scripts/dailymaint.sh

   1 #!/bin/bash
   2
   3 echo "Daily maintenance starting: `date`"
   4 # Delete tiles in zoomlevel 13-14 that are older than 336 hours = 14 days
   5 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 13-14 --action delete --rmemptydirs --minage 336 /var/lib/tirex/tiles/osm
   6 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 13-14 --action delete --rmemptydirs --minage 336 /var/lib/tirex/tiles/osmde
   7 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 13-14 --action delete --rmemptydirs --minage 336 /var/lib/tirex/tiles/osmhd
   8 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 13-14 --action delete --rmemptydirs --minage 336 /var/lib/tirex/tiles/osmdehd
   9 # Delete tiles in zoomlevel 15-20 that are older than 168 hours =  7 days
  10 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 15-20 --action delete --rmemptydirs --minage 168 /var/lib/tirex/tiles/osm
  11 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 15-20 --action delete --rmemptydirs --minage 168 /var/lib/tirex/tiles/osmde
  12 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 15-20 --action delete --rmemptydirs --minage 168 /var/lib/tirex/tiles/osmhd
  13 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 15-20 --action delete --rmemptydirs --minage 168 /var/lib/tirex/tiles/osmdehd
  14 # Delete all tiles in our bicycle/lecture hall overlay that are older
  15 # than 24 hours as these are REALLY cheap to regenerate on the fly.
  16 sudo -u tirex -- /home.local/osm/bin/osmtilecleanup.pl --zoom 10-20 --action delete --rmemptydirs --minage 24 /var/lib/tirex/tiles/rrze-ovl
  17 # Regenerate a part of zoomlevel 0-12 tiles. There are at most 350000 such tiles.
  18 # At 5000 a day, it'll take 70 days to regenerate all. As they hardly ever change, that should be fine.
  19 export PRIO=31
  20 # unrz191 2015-09-11: reduce number of 5000 because we have deleted a lot of tiles that are cheap to rerender.
  21 /home.local/osm/bin/osmtilecleanup.pl --zoom  0-12 --action rerender \
  22                                       --limit 2000 --rrs /home.local/osm/bin/osmrerenderwrapper.sh /var/lib/tirex/tiles/osm
  23 /home.local/osm/bin/osmtilecleanup.pl --zoom  0-12 --action rerender \
  24                                       --limit 2000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmde.sh /var/lib/tirex/tiles/osmde
  25 /home.local/osm/bin/osmtilecleanup.pl --zoom  0-12 --action rerender \
  26                                       --limit 2000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmhd.sh /var/lib/tirex/tiles/osmhd
  27 /home.local/osm/bin/osmtilecleanup.pl --zoom  0-12 --action rerender \
  28                                       --limit 2000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmdehd.sh /var/lib/tirex/tiles/osmdehd
  29 # Regenerate (part of) zoomlevel 13-14 tiles. Some of these are pretty expensive, so
  30 # we rather rerender them scheduled than when they change (usually they really don't,
  31 # it is 99 percent false alerts).
  32 /home.local/osm/bin/osmtilecleanup.pl --zoom  13-14 --action rerender \
  33                                       --limit 1000 --rrs /home.local/osm/bin/osmrerenderwrapper.sh /var/lib/tirex/tiles/osm
  34 /home.local/osm/bin/osmtilecleanup.pl --zoom  13-14 --action rerender \
  35                                       --limit 1000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmde.sh /var/lib/tirex/tiles/osmde
  36 /home.local/osm/bin/osmtilecleanup.pl --zoom  13-14 --action rerender \
  37                                       --limit 1000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmhd.sh /var/lib/tirex/tiles/osmhd
  38 /home.local/osm/bin/osmtilecleanup.pl --zoom  13-14 --action rerender \
  39                                       --limit 1000 --rrs /home.local/osm/bin/osmrerenderwrapper-osmdehd.sh /var/lib/tirex/tiles/osmdehd
  40 # Update tile stats for munin
  41 tirex-tiledir-check --stats=/var/lib/tirex/stats/tiles-osm.stats osm
  42 tirex-tiledir-check --stats=/var/lib/tirex/stats/tiles-osmde.stats osmde
  43 tirex-tiledir-check --stats=/var/lib/tirex/stats/tiles-osmhd.stats osmhd
  44 tirex-tiledir-check --stats=/var/lib/tirex/stats/tiles-osmdehd.stats osmdehd
  45
  46 DOW=`/bin/date '+%w'`
  47 if [ "$DOW" == "6" -o "$DOW" == "3" ] ; then
  48         echo "Time to vacuum the databse... This will take a few hours."
  49         # Vacuum the database. This can take hours. Possibly better just once per week?
  50         time psql --dbname=osm -c 'vacuum verbose analyze'
  51 fi
  52
  53 # Rerender Erlangen / Nuernberg. Around 4000 tiles, takes around 30 minutes.
  54 tirex-batch --prio=${PRIO} --expire=+14400 map=osm bbox=10.93,49.37,11.14,49.63 z=13-19
  55 tirex-batch --prio=${PRIO} --expire=+14400 map=osmde bbox=10.93,49.37,11.14,49.63 z=13-19
  56 tirex-batch --prio=${PRIO} --expire=+14400 map=osmhd bbox=10.93,49.37,11.14,49.63 z=13-19
  57 tirex-batch --prio=${PRIO} --expire=+14400 map=osmdehd bbox=10.93,49.37,11.14,49.63 z=13-19
  58
  59 echo "Daily maintenance finished: `date`"
  60