Re: [osm-hu] Automatizált adatbetöltés: népesség
Imre Samu
pella.samu at gmail.com
2015. Jan. 2., P, 19:26:47 UTC
gratulálok!
>Remélem megfelel. Volt 12 ütközés, ott próbáltam a változtatásokat okosan
megőrizni.
Hmm... Az ütközés mindig gyanús ... a 12 ütközést alaposan át kell nézni
ezek osm-id -jét el tudnád küldeni ?
>Ami kérdéses volt, hogy törlésre került a
http://www.ksh.hu/apps/hntr.telepules?p_lang=HU&p_id=05102település,
>amit visszaállítottam. Ha gáz akkor töröljétek ismét :)
:)
Akkor ez tanulságos tanpélda lett.
mert ahogy nézem közben megduplázódott
http://www.openstreetmap.org/node/3256275166
http://www.openstreetmap.org/node/700705932
feltételezem, hogy "valaki" kitörölte 6 napja, Dömcsi észlelte és felvette
5 napja - de már egy másik id-vel.
Te meg talán a régi id-t hiányoltad és visszaállítottad..
Sajnos az osm-ben nincsenek fix id-k. ( bővebben:
http://wiki.openstreetmap.org/wiki/Overpass_API/Permanent_ID )
emiatt egy " ksh_ref=05102 in hungary " lekérdezéssel lehet ezt csak
ellenőrizni
vagy egy [ name=Balogunyom and place=* lekérdezéssel ]
Jól feltételezem, hogy a sokkal régebben letöltött adatok alapján
módosítottál?
Valószínűleg az a legjobb módszer, hogy a programot/scriptet készítünk és
ezt teszteljük le és amikor minden rendben,
akkor csak a friss adatokon kell lefuttatni és feltölteni.
és valami xmldiff szerű elemzés se árt.
Egyébként minél nagyobb az időablak a letöltött és feltöltött adatok
között
annál inkább valószínű egy ütközés.
ezt szálat ( Balogunyom ) még el kell varrni és akkor sikeresen
lezárhatjuk.
Ezennel átestél az OSM importálási tűzkeresztségen!
Gratulálok! :)
üdv,
Imre
2015. január 2. 19:23 KAMI911 KAMI911 írta, <kami911 at gmail.com>:
> A feltöltött, összeegyeztetett adatokat a már megosztott Dropboxban
> population-3.0.osm néven találjátok.
>
> Üdvözlettel / Best Regards:
>
> Kálmán (KAMI) Szalai
>
> 2015. január 2. 19:05 KAMI911 KAMI911 írta, <kami911 at gmail.com>:
>
> Sziasztok,
>>
>> Beküldtem: http://www.openstreetmap.org/changeset/27868866
>>
>> Remélem így megfelel. Végül a forrást: KSH (www.ksh.hu) formában
>> jelöltem.
>>
>> Egy példa:
>>
>> <osm version='0.6' upload='true' generator='JOSM'>
>> <node id='15350070' action='modify' timestamp='2014-06-24T15:50:34Z'
>> uid='2037929' user='vitus marton' visible='true' version='6'
>> changeset='23125084' lat='46.8076371' lon='18.1397468'>
>> <tag k='is_in' v='Siófoki kistérség; Somogy megye; Dél-Dunántúl;
>> Magyarország' />
>> <tag k='is_in:country' v='Hungary' />
>> <tag k='is_in:county' v='Somogy' />
>> <tag k='is_in:subregion' v='Siófoki' />
>> <tag k='ksh_ref' v='04127' />
>> <tag k='name' v='Som' />
>> <tag k='place' v='village' />
>> <tag k='population' v='705' />
>> <tag k='postal_code' v='8655' />
>> <tag k='source:population' v='KSH (www.ksh.hu)' />
>> <tag k='source:population:date' v='2014-01-01' />
>> <tag k='source:postal_code' v='Magyar Posta (posta.hu)' />
>> <tag k='source:postal_code:date' v='2009-03-01' />
>> </node>
>>
>> Remélem megfelel. Volt 12 ütközés, ott próbáltam a változtatásokat okosan
>> megőrizni. Ami kérdéses volt, hogy törlésre került a
>> http://www.ksh.hu/apps/hntr.telepules?p_lang=HU&p_id=05102 település,
>> amit visszaállítottam. Ha gáz akkor töröljétek ismét :)
>>
>> Még szívesen rendezném a az ilyen mezőket is, ahol:
>> <node id='716417613' action='modify' timestamp='2014-06-24T15:39:14Z'
>> uid='2037929' user='vitus marton' visible='true' version='4'
>> changeset='23125084' lat='47.1120413' lon='17.7346021'>
>> <tag k='is_in' v='Veszprémi kistérség; Veszprém megye;
>> Közép-Dunántúl; Magyarország' />
>> <tag k='is_in:country' v='Hungary' />
>> <tag k='is_in:county' v='Veszprém' />
>> <tag k='is_in:subregion' v='Veszprémi' />
>> <tag k='ksh_ref' v='07922' />
>> <tag k='name' v='Szentgál' />
>> <tag k='name:de' v='Sankt Gall' />
>> <tag k='place' v='village' />
>> <tag k='population' v='2729' />
>> <tag k='postal_code' v='8444' />
>> <tag k='source:population' v='KSH (www.ksh.hu)' />
>> <tag k='source:population:date' v='2014-01-01' />
>> <tag k='source:postal_code' v='A Magyar Köztársaság Helységnévtára,
>> 2009' />
>> </node>
>> Tehát ahol a posta_code ilyen formában van:
>> <tag k='source:postal_code' v='A Magyar Köztársaság Helységnévtára,
>> 2009' />
>>
>> És ezt is szétszedném külön source és külön date részre. Ha egyetértetek
>> :)
>>
>> Köszi szépen!
>>
>> Üdvözlettel / Best Regards:
>>
>> Kálmán (KAMI) Szalai
>>
>> 2015. január 2. 17:38 írta, <gabor.ganzer at gmail.com>:
>>
>> Lekérdezések készítésíhez, későbbi módosításokhoz nyerőbb a *"source:population:date"
>>> ="2014-01-01"* kulcs-érték párosítás, így én is erre szavaznék.
>>>
>>> 2015. január 2., péntek 17:14:39 UTC+1 időpontban KAMI KAMI a következőt
>>> írta:
>>>>
>>>> Ezt nem nehéz beszerkeszteni, csak egy döntés kell hogy így legyen, és
>>>> így csinálom meg.
>>>>
>>>> Üdvözlettel / Best Regards:
>>>>
>>>> Kálmán (KAMI) Szalai
>>>>
>>>> 2015. január 2. 17:01 Imre Samu írta, <pella... at gmail.com>:
>>>>
>>>>>
>>>>> hogy még tovább bonyolítsam a dátumot külön mezőben is meg lehetne
>>>>> adni :
>>>>> * "source:population:date" ="2014-01-01"*
>>>>> http://taginfo.openstreetmap.org/keys/source%3Aname%3Adate#values
>>>>> [ bővebben: http://wiki.openstreetmap.org/wiki/Key:source ]
>>>>>
>>>>> de szerintem ez most nem olyan lényeges ...
>>>>>
>>>>>
>>>>> 2015. január 2. 16:37 Imre Samu írta, <pella... at gmail.com>:
>>>>>
>>>>> > Illetve az lenne a kérdésem, hogy a dátumot (a forráshoz) milyen
>>>>>> formában vigyem fel?
>>>>>> >Jó a „2014. 01. 01.”? Vagy valami nem magyar formátum kellene?
>>>>>>
>>>>>> A nemzetköziség miatt biztos nem a magyar formátum a nyerő ...
>>>>>> de alaposan utánanézve elég vegyes a kép:
>>>>>> http://taginfo.openstreetmap.org/keys/source:population#values
>>>>>>
>>>>>> a fenti alapján
>>>>>> akár még ez is lehetne: source:population ="
>>>>>> www.ksh.hu/docs/hun/hnk/hnk_2014.xls 2014-01-01"
>>>>>> vagy rövidebben * source:population =" www.ksh.hu
>>>>>> <http://www.ksh.hu> 2014-01-01"*
>>>>>>
>>>>>> vagyis ISO 8601 szerinti dátumformára szavazok én is.
>>>>>>
>>>>>> és hosszú távra talán a rövidebb forma a nyerő ( mert az url a ksh
>>>>>> portál átalakítása miatt változhat, a webcim az fix )
>>>>>> vagyis én erre szavaznék : * source:population =" www.ksh.hu
>>>>>> <http://www.ksh.hu> 2014-01-01"*
>>>>>>
>>>>>> de ha marad a v="KSH, 2014-01-01" az se olyan nagy baj.
>>>>>> csak azt hiszem, hogy a www.ksh.hu külföldi barátabb és emiatt
>>>>>> egyből mindenki megérti a föld bármely részén,
>>>>>> hogy mi is ez. Ellenben most én nem tudom nyomozás nélkül, hogy mi a
>>>>>> "GUS <http://taginfo.openstreetmap.org/tags/source%3Apopulation=GUS>"
>>>>>> ; "psgc
>>>>>> <http://taginfo.openstreetmap.org/tags/source%3Apopulation=psgc>"
>>>>>> ...
>>>>>> üdv,
>>>>>> Imre
>>>>>>
>>>>>> 2015. január 2. 14:09 KAMI911 KAMI911 írta, <kam... at gmail.com>:
>>>>>>
>>>>>> Sziasztok,
>>>>>>>
>>>>>>> Van még valami visszajelzés a témával kapcsolatban? Illetve az lenne
>>>>>>> a kérdésem, hogy a dátumot (a forráshoz) milyen formában vigyem fel? Jó a
>>>>>>> „2014. 01. 01.”? Vagy valami nem magyar formátum kellene?
>>>>>>>
>>>>>>> Üdvözlettel / Best Regards:
>>>>>>>
>>>>>>> Kálmán (KAMI) Szalai
>>>>>>>
>>>>>>> 2014. december 26. 16:09 Imre Samu írta, <pella... at gmail.com>:
>>>>>>>
>>>>>>> >Akkor a population bemehet?
>>>>>>>> >Vagy van valami merge windows (idő korlát a szemrevéztelezésre) ?
>>>>>>>>
>>>>>>>> A javaslat csak a saját véleményem volt. ( a közösség egy tagjáé )
>>>>>>>> emiatt várjuk meg a többiek reagálását is.
>>>>>>>> Talán hétfő estig a közösség többsége ránéz a leveleire,
>>>>>>>> és ha van valami probléma ezzel a megközelítéssel, akkor
>>>>>>>> jelez.
>>>>>>>> // vagyis legyen időablak ...
>>>>>>>>
>>>>>>>> Ha megvan, akkor célszerű itt is készíteni egy sort az importról :
>>>>>>>> http://wiki.openstreetmap.org/wiki/WikiProject_Hungary/
>>>>>>>> Import%C3%A1l%C3%A1s
>>>>>>>>
>>>>>>>> üdv,
>>>>>>>> Imre
>>>>>>>>
>>>>>>>>
>>>>>>>>
>>>>>>>> 2014. december 26. 15:19 KAMI911 KAMI911 írta, <kam... at gmail.com>:
>>>>>>>>
>>>>>>>> Akkor a polupation bemehet? Vagy van valami merge windows (idő
>>>>>>>>> korlát a szemrevéztelezésre) ?
>>>>>>>>>
>>>>>>>>> Üdvözlettel / Best Regards:
>>>>>>>>>
>>>>>>>>> Kálmán (KAMI) Szalai
>>>>>>>>>
>>>>>>>>> 2014. december 26. 14:18 Imre Samu írta, <pella... at gmail.com>:
>>>>>>>>>
>>>>>>>>> > ksh_ref / ref:ksh átkeresztelés
>>>>>>>>>>
>>>>>>>>>> Javaslat:
>>>>>>>>>> - Válasszuk külön a problémákat, és most csak a "population" és
>>>>>>>>>> a "source:population" kulcsokat érintse ez a feladat, minden
>>>>>>>>>> más maradjon változatlan.
>>>>>>>>>> A többi elemről való döntés és ezek rendberakása szerintem
>>>>>>>>>> nagyobb feladat, ami sok-sok egyeztetést kíván.
>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> Indoklás:
>>>>>>>>>> - KAMI önkéntesen vállalkozott erre.
>>>>>>>>>> Ez lenne a kezdőfeladata és emiatt szerintem fontos a
>>>>>>>>>> sikerélmény biztosítása.
>>>>>>>>>> *Maradjon a feladata egyszerű, zárjuk le gyorsan és
>>>>>>>>>> ünnepeljük meg őt !*
>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> - A többi elem alapos felülvizsgálatra szorul.
>>>>>>>>>>
>>>>>>>>>> Annó 5 éve mindenki a legjobb tudása alapján hozta létre a
>>>>>>>>>> wikit és az elemeket, de mostanra megérett egy alapos revízió.
>>>>>>>>>>
>>>>>>>>>> A ksh_ref -re a ref:ksh mellett még a ref:lau:2 vagy
>>>>>>>>>> ref:lau2 is potenciálisan esélyes
>>>>>>>>>>
>>>>>>>>>> "Definíció: Településen a közigazgatási rendszer területi és
>>>>>>>>>> szervezeti (igazgatási) alapegységét, így a fővárost, a fővárosi kerületet,
>>>>>>>>>> a megyei jogú várost, a várost, a nagyközséget és a községet értjük. A
>>>>>>>>>> település kifejezést azonos értelemben használjuk a helység fogalmával.
>>>>>>>>>> Magyarországon az Eurostat által alkalmazott Local
>>>>>>>>>> Administrative Units (helyi közigazgatási egységek) szerint a LAU 2 szintjének
>>>>>>>>>> megfelelő közigazgatási egység."
>>>>>>>>>>
>>>>>>>>>> A csehek készítettek egy javaslatot , szerintem érdemes azt
>>>>>>>>>> is elemezni:
>>>>>>>>>> http://wiki.openstreetmap.org/wiki/NUTS_and_LAU
>>>>>>>>>>
>>>>>>>>>> Jó lenne a KSH-val közösen kialakítani / véleményeztetni az
>>>>>>>>>> új javaslatot.
>>>>>>>>>> a ksh_ref jelenleg túl tág fogalom. rengeteg KSH kód van
>>>>>>>>>> ( borvidékre, budapesti kerületre, .. )
>>>>>>>>>> Valahogy legyen benne, hogy ez egyértelműen egy 5 hosszú " településazonosító
>>>>>>>>>> törzsszám"
>>>>>>>>>> vagyis innen minden kódnak adjunk OSM nevet:
>>>>>>>>>> http://net.jogtar.hu/jr/gen/hjegy_doc.cgi?docid=A1100031.KIM
>>>>>>>>>>
>>>>>>>>>> pl.
>>>>>>>>>> ref:ksh:lau:2 ( Local Administrative Units (helyi
>>>>>>>>>> közigazgatási egységek) szerint a LAU 2 )
>>>>>>>>>> ref:ksh:wineregion ( borvidék kódja )
>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> A vezető 0 -ról is a KSH-s szakértők döntsenek.
>>>>>>>>>> Habár ha komolyan vesszük az adatok linkelhetőségét (
>>>>>>>>>> http://en.wikipedia.org/wiki/Linked_data ) akkor racionális,
>>>>>>>>>> hogy maradjon a vezető "0".
>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> Valamint minden OSM településinfót rendbe kellene rakni
>>>>>>>>>> - http://wiki.openstreetmap.org/wiki/WikiProject_Hungary/
>>>>>>>>>> Telep%C3%BCl%C3%A9sek
>>>>>>>>>> - http://wiki.openstreetmap.org/wiki/Hu:Key:place
>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> üdv,
>>>>>>>>>> Imre
>>>>>>>>>>
>>>>>>>>>> 2014. december 26. 11:26 szali írta, <uzeme... at gmail.com>:
>>>>>>>>>>
>>>>>>>>>> Szerintem jobb megoldás az átkeresztelés. Most még valószínűleg
>>>>>>>>>>> csak egy-két saját használatra készült scriptet érintene, bár ki tudja. Ami
>>>>>>>>>>> biztos, hogy minél később nevezünk át valamit, annál nagyobb szívás lesz az
>>>>>>>>>>> átnevezéssel.
>>>>>>>>>>>
>>>>>>>>>>> 2014. december 26., péntek 2:28:02 UTC+1 időpontban Imre Samu a
>>>>>>>>>>> következőt írta:
>>>>>>>>>>>>
>>>>>>>>>>>> >Miért jobb amúgy a "ksh_ref", mint a "ref:ksh"? A sémát
>>>>>>>>>>>> követve az utóbbi lenne a logikus.
>>>>>>>>>>>>
>>>>>>>>>>>> nehéz dilemma.
>>>>>>>>>>>>
>>>>>>>>>>>> Ha jól látom minden településnél 5 év óta a "ksh_ref" kulcs
>>>>>>>>>>>> szerepel.
>>>>>>>>>>>>
>>>>>>>>>>>> ( changeset="2983791" timestamp="2009-10-29T19:45:30Z" )
>>>>>>>>>>>> http://www.openstreetmap.org/changeset/2983791
>>>>>>>>>>>>
>>>>>>>>>>>>
>>>>>>>>>>>> 5 év nagy idő, nem tudom, hogy hány alkalmazást érintene egy
>>>>>>>>>>>> mező átkeresztelés.
>>>>>>>>>>>>
>>>>>>>>>>>>
>>>>>>>>>>>> mi legyen ?
>>>>>>>>>>>>
>>>>>>>>>>>>
>>>>>>>>>>>
>>>>>>>>>>> --
>>>>>>>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>>>>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>>>>>>>> ---
>>>>>>>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a
>>>>>>>>>>> Google Csoportok „openstreetmap-hungary” csoportjára.
>>>>>>>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>>>>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>>>>>>>> unsubscribe at googlegroups.com címre.
>>>>>>>>>>> További lehetőségekért látogasson el ide:
>>>>>>>>>>> https://groups.google.com/d/optout.
>>>>>>>>>>>
>>>>>>>>>>
>>>>>>>>>> --
>>>>>>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>>>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>>>>>>> ---
>>>>>>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a
>>>>>>>>>> Google Csoportok „openstreetmap-hungary” csoportjára.
>>>>>>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>>>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>>>>>>> unsubscribe at googlegroups.com címre.
>>>>>>>>>> További lehetőségekért látogasson el ide:
>>>>>>>>>> https://groups.google.com/d/optout.
>>>>>>>>>>
>>>>>>>>>
>>>>>>>>> --
>>>>>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>>>>>> ---
>>>>>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>>>>>>>>> „openstreetmap-hungary” csoportjára.
>>>>>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>>>>>> unsubscribe at googlegroups.com címre.
>>>>>>>>> További lehetőségekért látogasson el ide:
>>>>>>>>> https://groups.google.com/d/optout.
>>>>>>>>>
>>>>>>>>
>>>>>>>> --
>>>>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>>>>> ---
>>>>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>>>>>>>> „openstreetmap-hungary” csoportjára.
>>>>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>>>>> unsubscribe at googlegroups.com címre.
>>>>>>>> További lehetőségekért látogasson el ide:
>>>>>>>> https://groups.google.com/d/optout.
>>>>>>>>
>>>>>>>
>>>>>>> --
>>>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>>>> ---
>>>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>>>>>>> „openstreetmap-hungary” csoportjára.
>>>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>>>> unsubscribe at googlegroups.com címre.
>>>>>>> További lehetőségekért látogasson el ide:
>>>>>>> https://groups.google.com/d/optout.
>>>>>>>
>>>>>>
>>>>>>
>>>>> --
>>>>> Magyar OSM Levelezőlista - openstreet... at googlegroups.com
>>>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>>>> ---
>>>>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>>>>> „openstreetmap-hungary” csoportjára.
>>>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>>>> leiratkozáshoz küldjön egy e-amailt a(z) openstreetmap-hungary+
>>>>> unsubscribe at googlegroups.com címre.
>>>>> További lehetőségekért látogasson el ide: https://groups.google.com/d/
>>>>> optout.
>>>>>
>>>>
>>>> --
>>> Magyar OSM Levelezőlista - openstreetmap-hungary at googlegroups.com
>>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>>> ---
>>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>>> „openstreetmap-hungary” csoportjára.
>>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>>> leiratkozáshoz küldjön egy e-amailt a(z)
>>> openstreetmap-hungary+unsubscribe at googlegroups.com címre.
>>> További lehetőségekért látogasson el ide:
>>> https://groups.google.com/d/optout.
>>>
>>
>>
> --
> Magyar OSM Levelezőlista - openstreetmap-hungary at googlegroups.com
> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
> ---
> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
> „openstreetmap-hungary” csoportjára.
> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
> leiratkozáshoz küldjön egy e-amailt a(z)
> openstreetmap-hungary+unsubscribe at googlegroups.com címre.
> További lehetőségekért látogasson el ide:
> https://groups.google.com/d/optout.
>
--------- következő rész ---------
Egy csatolt HTML állomány át lett konvertálva...
URL: <http://lists.openstreetmap.org/pipermail/talk-hu/attachments/20150102/64e81314/attachment.htm>
További információk a(z) Talk-hu levelezőlistáról