[OSM-talk-nl] Migratie openstreetmap.nl

[Roeland Douma]

Hier wordt nog druk aan gesleuteld maar dit is de huidige setup:

Elke nacht wordt de daily diff binnen gehaald en wordt er een nieuwe planet file 
gegeneerd. Deze wordt dan vers in de database geladen. Dit om rare render 
artefacten te voorkomen.

Vervolgens wordt de database met diffs geupdate (minutely diffs) zodat deze weer 
gelijkt loopt met de diffs.

Dit betekent vervolgens dat zodra er een nieuwe diff binnekomt alle tiles die 
invalid zijn op zooms hoger dan 15 worden verwijderd.

Voor de default stylesheet geldt dat zoom 12 t/m 15 opnieuw worden gerenderd.
Voor de overige stylesheets wordt de rest gewoon weg gegooid.

Zo houden we de default layer lekker snel. En toch up to date.

Echter als er dus heel veel wordt ge-edit kan het rerederen nogal lang duren. 
Het maximum nu staat op maximaal een uur toen er veel ge-edit werd. Maar er 
wordt dus nog gewerkt om dit naar benenden te krijgen.

Het streven is natuurlijk om dit zo laag mogelijk te krijgen. Maar omdat we 
toch een snelle server willen hebben (dus veel geprerenderd) moeten er 
afwegingen gemaakt worden.

Ik hoop dat dit een beetje je vraag beantwoord.

--Roeland

On Wednesday 20 May 2009 21:06:42 Martijn van Exel wrote:
> OK cool, ik zou (ook) zeggen: doen.
> Kunnen we eens kijken of de nieuwe setup tegen productieomstandigheden
> bestand is.
>
> Kan iemand me (nog eens) vertellen hoe het zit met de actualiteit van
> de tiles met deze setup? Hoe oud maximaal?
> Grtz
>
> martijn van exel -+- mvexel at gmail.com -+- http://www.schaaltreinen.nl/
>
> 2009/5/20 Roeland Douma <unix at rullzer.com>:
> > Wat mij besterft zijn we goed om te gaan. Ik wou even wachten of er nog
> > hate mail binnen kwam dat ik gek was geworden maar het valt erg mee.
> > (waarschijnlijk komt dat na de migratie :P).
> >
> > Ik zal zo Jeroen even tackelen.
> >
> > --Roeland
> >
> > On Wednesday 20 May 2009 18:42:37 Martijn van Exel wrote:
> >> Hoe staat het ermee ondertussen?
> >> De kaart ziet er nog steeds een beetje verminkt uit..
> >> Succes!
> >>
> >> Grtz
> >> Martijn
> >>
> >> On 18-05-2009 14:31, Roeland Douma wrote:
> >> > Floris,
> >> >
> >> > Volgens mij moeten de meeste links blijven werken. Nouja
> >> > tile.openstreetmap.nl/~user niet meer. Maar dat zou naar dev moeten
> >> > gaan dan dus.
> >> >
> >> > Het kan ook gezien worden als een grote schoonmaak waarbij we alle
> >> > oude troep een keer opruimen.
> >> >
> >> > Over de AND stuff. Deze zal ik even backuppen vanaf de oude server en
> >> > deze tiletjes ook op de nieuwe gaan bakken. Voordeel van de AND tiles
> >> > is dat ze niet on demand hoeven :P
> >> >
> >> > --Roeland
> >> >
> >> > On Monday 18 May 2009 14:20:47 Floris Looijesteijn wrote:
> >> >> als oude links blijven werken lijkt me dat prima.
> >> >>
> >> >> zitten de and layers daar ook nog steeds in?
> >> >>
> >> >> groet,
> >> >> floris
> >> >>
> >> >>> dev.openstreetmap.nl is nu actief en wijst naar de oude tile server.
> >> >>> Tenzij er
> >> >>> nog bezwaar is zou ik tile.openstreetmap.nl graag naar de nieuwe
> >> >>> server zetten
> >> >>> zodat iedereen daarvan kan genieten.
> >> >>>
> >> >>> --Roeland
> >> >>>
> >> >>> On Saturday 16 May 2009 13:49:42 Milo van der Linden wrote:
> >> >>>> Beste allemaal,
> >> >>>>
> >> >>>> Hedenochtend is het volgende voorstel besproken op het #osm-nl IRC
> >> >>>> kanaal:
> >> >>>>
> >> >>>> In verband met gebroken wegen op tile.openstreetmap.nl wordt
> >> >>>> overwogen om de nieuwe oxilion server op de url
> >> >>>> tile.openstreetmap.nl te zetten. Voor de "oude" server wordt
> >> >>>> overwogen de url dev.openstreetmap.nl óf oud.openstreetmap.nl te
> >> >>>> gaan gebruiken.
> >> >>>>
> >> >>>> Voor gebroken links willen we de tekst:
> >> >>>> "Was u op zoek naar oud.openstreetmap.nl of dev.openstreetmap.nl"
> >> >>>> tonen op de error pagina's
> >> >>>>
> >> >>>> Ondertussen worden dan de logs gemonitord om te kijken welke "oude"
> >> >>>> url's nog vaak worden geraadpleegd zodat deze gemigreerd kunnen
> >> >>>> worden.
> >> >>>>
> >> >>>> Uiteindelijk hopen we te komen tot een situatie waarbij de oude
> >> >>>> omgevingen compleet zijn uitgefaseerd, hierbij zorgend dat:
> >> >>>> - Initiatieven die nog niet helemaal af zijn op een nieuwe dev
> >> >>>> omgeving komen
> >> >>>> - "Productie rijpe" initiatieven naar de nieuwe
> >> >>>> tile.openstreetmap.nl worden verplaatst.
> >> >>>>
> >> >>>> Graag jullie meningen over dit initiatief!
> >> >>>>
> >> >>>> Met vriendelijke groet,
> >> >>>>
> >> >>>> Milo van der Linden
> >> >>>> Secretaris - Stichting OpenGeo
> >> >>>> http://www.opengeo.nl
> >> >>>>
> >> >>>>
> >> >>>>
> >> >>>> _______________________________________________
> >> >>>> Talk-nl mailing list
> >> >>>> Talk-nl at openstreetmap.org
> >> >>>> http://lists.openstreetmap.org/listinfo/talk-nl
> >> >>>
> >> >>> _______________________________________________
> >> >>> Talk-nl mailing list
> >> >>> Talk-nl at openstreetmap.org
> >> >>> http://lists.openstreetmap.org/listinfo/talk-nl
> >> >>
> >> >> _______________________________________________
> >> >> Talk-nl mailing list
> >> >> Talk-nl at openstreetmap.org
> >> >> http://lists.openstreetmap.org/listinfo/talk-nl
> >> >
> >> > _______________________________________________
> >> > Talk-nl mailing list
> >> > Talk-nl at openstreetmap.org
> >> > http://lists.openstreetmap.org/listinfo/talk-nl
> >
> > _______________________________________________
> > Talk-nl mailing list
> > Talk-nl at openstreetmap.org
> > http://lists.openstreetmap.org/listinfo/talk-nl
>
> _______________________________________________
> Talk-nl mailing list
> Talk-nl at openstreetmap.org
> http://lists.openstreetmap.org/listinfo/talk-nl