Aktualnost dat - poloha.net a old.osm.cz na Talk-cz

Tom Ka tomas.kasparek na gmail.com #m3b90c3 10. 1. 2016 11:37

Jeste jednu vec jse ted narazil. Chtel jsem zkontrolovat nejake sve zmeny (napr. vytvoreni http://www.openstreetmap.org/way/389382702), na osm.org je v pohode, ale na ruian.poloha.net (podle webu data z 9-1-2016) neni. Krome toho jsem nikde nenasel info o aktualnosti dat z old.osm.cz (zde pri nahravani casto kontroluju stav dat i kdyz vim, ze nebyva uplne cerstve). Muzu tedy poprosit Petra Vejsadu o kontrolu aktualnosti dat a Michala Grezla o info o aktualizacich dat pro old.osm.cz (idealne s infem o verzi dat primo na webu). Diky moc.

Marián Kyral mkyral na email.cz #m5addbc 10. 1. 2016 11:57

Jeste jednu vec jse ted narazil. Chtel jsem zkontrolovat nejake sve zmeny (napr. vytvoreni http://www.openstreetmap.org/way/389382702), na osm.org je v pohode, ale na ruian.poloha.net (podle webu data z 9-1-2016) neni. Krome toho jsem nikde nenasel info o aktualnosti dat z old.osm.cz (zde pri nahravani casto kontroluju stav dat i kdyz vim, ze nebyva uplne cerstve). Muzu tedy poprosit Petra Vejsadu o kontrolu aktualnosti dat a Michala Grezla o info o aktualizacich dat pro old.osm.cz (idealne s infem o verzi dat primo na webu). Diky moc.

Ahoj, na poloha.net zkus reload - asi se tahají dlaždice z cache. Já tam tu cestu vidím. Marián

Tom Ka tomas.kasparek na gmail.com #m070715 10. 1. 2016 13:33

Dik, zkousel jsem, i uklid cache ve firefoxu. Po nejake dobre uz to vidim aspon na velky zoom, ale na mensi stale nic. No nic, pockam.

Petr Vejsada osm na propsychology.cz #m2e61e9 10. 1. 2016 14:10

Ahoj, DATA jsou OK, vždy ráno z geofabrik. Info o aktuálnosti dat je na hlavní stránce http://poloha.net v levém sloupci hned nahoře. Problém asi bude s dlaždicemi - každý den, po přijetí nových dat z geofabrik se mažou dlaždice zoomu 16-20. Ty se pak překreslí v snad přijatelném čase cca 2 vteřin. Dlaždice do zoomu 15 včetně jsou na disku nakešované a samy o sobě se nepřekreslují; jen na spuštění kreslení z příkazového řádku. Funguje <urldlaždice>/dirty . Mod_tile umí něco jako "autodirty". Je soubor planet-import-complete, jehož timestamp se porovnává s timestampem dlaždice. Pokud někdo požaduje dlaždici, která je starší než planet-import-complete, spustí se renderování. Uživatel ovšem dostane starou verzi dlaždice a novou verzi dostane až při dalším požadavku, bude-li do té doby dlaždice vykreslena. Metadlaždice zoomu 11 se vykresluje asi půl minuty a když jich bude ve frontě 10, tak holt 5 minut. Zkusil jsem to teď zapnout na dlaždice zoomu 11-15. Tedy aktuální stav je: - dlaždice 0-10 se překreslují jen z commandline - dlaždice 11-15 autodirty - dlaždice 16-20 jsou stále aktuální (mažou se z cache po zpracování nových dat) Jinak když mluvím o dlaždicích v cache, tak mám na mysli meta-dlaždice 8x8=64 normálních dlaždic. Používám Tirex http://wiki.openstreetmap.org/wiki/Tirex . Osm2pgsql má funkci na exspirování dlaždic. Funguje tak, že při importu změn vygeneruje seznam bboxů, které se mají překreslit. Tuto funkci jsem použival, je to mnoho měsíců (let) zpět. Funkce jednak dosti zdržovala import a její spolehlivost byla nevalná - často exspirovala kusy území zbytečně a naopak - nechala být území, kde došlo k podstatným změnám. Možná se v osm2pgsql něco v tomto směru zlepšilo, ale moc tomu nevěřím. Poslední variantou je dlaždice například 14-15 každý den překreslovat. Můžu se zkusit zeptat TransIP, co oni na to :-), docela pěkně a svižně to tu funguje, tak si nechci hledat další hosting.

Ahoj, DATA jsou OK, vždy ráno z geofabrik. Info o aktuálnosti dat je na hlavní stránce http://poloha.net v levém sloupci hned nahoře. Problém asi bude s dlaždicemi - každý den, po přijetí nových dat z geofabrik se mažou dlaždice zoomu 16-20. Ty se pak překreslí v snad přijatelném čase cca 2 vteřin. Dlaždice do zoomu 15 včetně jsou na disku nakešované a samy o sobě se nepřekreslují; jen na spuštění kreslení z příkazového řádku. Funguje <urldlaždice>/dirty . Mod_tile umí něco jako "autodirty". Je soubor planet-import-complete, jehož timestamp se porovnává s timestampem dlaždice. Pokud někdo požaduje dlaždici, která je starší než planet-import-complete, spustí se renderování. Uživatel ovšem dostane starou verzi dlaždice a novou verzi dostane až při dalším požadavku, bude-li do té doby dlaždice vykreslena. Metadlaždice zoomu 11 se vykresluje asi půl minuty a když jich bude ve frontě 10, tak holt 5 minut. Zkusil jsem to teď zapnout na dlaždice zoomu 11-15. Tedy aktuální stav je: - dlaždice 0-10 se překreslují jen z commandline - dlaždice 11-15 autodirty - dlaždice 16-20 jsou stále aktuální (mažou se z cache po zpracování nových dat) Jinak když mluvím o dlaždicích v cache, tak mám na mysli meta-dlaždice 8x8=64 normálních dlaždic. Používám Tirex http://wiki.openstreetmap.org/wiki/Tirex . Osm2pgsql má funkci na exspirování dlaždic. Funguje tak, že při importu změn vygeneruje seznam bboxů, které se mají překreslit. Tuto funkci jsem použival, je to mnoho měsíců (let) zpět. Funkce jednak dosti zdržovala import a její spolehlivost byla nevalná - často exspirovala kusy území zbytečně a naopak - nechala být území, kde došlo k podstatným změnám. Možná se v osm2pgsql něco v tomto směru zlepšilo, ale moc tomu nevěřím. Poslední variantou je dlaždice například 14-15 každý den překreslovat. Můžu se zkusit zeptat TransIP, co oni na to :-), docela pěkně a svižně to tu funguje, tak si nechci hledat další hosting. -- Petr Dne Ne 10. ledna 2016 11:37:16, Tom Ka napsal(a):

Jeste jednu vec jse ted narazil. Chtel jsem zkontrolovat nejake sve zmeny (napr. vytvoreni http://www.openstreetmap.org/way/389382702), na osm.org je v pohode, ale na ruian.poloha.net (podle webu data z 9-1-2016) neni. Krome toho jsem nikde nenasel info o aktualnosti dat z old.osm.cz (zde pri nahravani casto kontroluju stav dat i kdyz vim, ze nebyva uplne cerstve). Muzu tedy poprosit Petra Vejsadu o kontrolu aktualnosti dat a Michala Grezla o info o aktualizacich dat pro old.osm.cz (idealne s infem o verzi dat primo na webu). Diky moc. _______________________________________________ Talk-cz mailing list Talk-cz na openstreetmap.org https://lists.openstreetmap.org/listinfo/talk-cz

Tom Ka tomas.kasparek na gmail.com #mfc2033 11. 1. 2016 16:52

DATA jsou OK, vždy ráno z geofabrik. Info o aktuálnosti dat je na hlavní stránce http://poloha.net v levém sloupci hned nahoře.

jo jo, to jsem vedel, jen mi na to prave nesedely ty dlazdice.

Problém asi bude s dlaždicemi - každý den, po přijetí nových dat z geofabrik se mažou dlaždice zoomu 16-20. Ty se pak překreslí v snad přijatelném čase cca 2 vteřin. Dlaždice do zoomu 15 včetně jsou na disku nakešované a samy o sobě se nepřekreslují; jen na spuštění kreslení z příkazového řádku. Funguje <urldlaždice>/dirty.

jo, to znam, neni to tak davno co to tu zaznelo i na listu: https://lists.openstreetmap.org/pipermail/talk-cz/2015-October/012678.html

Mod_tile umí něco jako "autodirty". Je soubor planet-import-complete, jehož timestamp se porovnává s timestampem dlaždice. Pokud někdo požaduje dlaždici, která je starší než planet-import-complete, spustí se renderování. Uživatel ovšem dostane starou verzi dlaždice a novou verzi dostane až při dalším požadavku, bude-li do té doby dlaždice vykreslena. Metadlaždice zoomu 11 se vykresluje asi půl minuty a když jich bude ve frontě 10, tak holt 5 minut. Zkusil jsem to teď zapnout na dlaždice zoomu 11-15. Tedy aktuální stav je: - dlaždice 0-10 se překreslují jen z commandline - dlaždice 11-15 autodirty - dlaždice 16-20 jsou stále aktuální (mažou se z cache po zpracování nových dat)

diky za souhrn. Koukal jsem na to a myslim, ze ty 0-10 jsou pro praxi +- stale stejne, takze kdyz se pregeneruji jednou za mesic, dva, tak to bohate staci. Ty 11-15 by mohlo byt fajn s tim autodirty, celkove bude mapa certvejsi. Diky a me se.