[osm-hu] Re: * Import
KAMI911 KAMI911
kami911 at gmail.com
2018. Dec. 24., H, 07:19:07 UTC
Sziasztok,,
Annyi még van, hogy a QC persze a már átírt névre megy, így azok ahol
javitások voltak, megjavultak.
Üdvözlettel / Best Regards:
Kálmán (KAMI) Szalai
KAMI911 KAMI911 <kami911 at gmail.com> ezt írta (időpont: 2018. dec. 24., H,
7:58):
> Sziasztok,
>
> Az ellenőrzések mellett, ha biztos a javítás, akkor megpróbálja a lenti
> módszerrel az út <-> utcát a megfelelő módon cserélni. Ez csináltam meg
> mostanság.
> Először a planet_osm_roads alapján dolgoztam.
> Az eredmény ez lett:
> osm-import-request $ git diff *.osm | grep '+ <tag k="addr:street"' |
> wc -l
> 758
> Javítások csak a Tesconál:
> osm-import-request $ git diff hu_tesco*.osm | grep '+ <tag
> k="addr:street"' | wc -l
> 27
> Ezek után váltottam planet_osm_line-ra, és a helyzet tovább javult:
> osm-import-request $ git diff *.osm | grep '+ <tag k="addr:street"' |
> wc -l
> 1228
> Javítások csak a Tesco-nál:
> osm-import-request $ git diff hu_tesco*.osm | grep '+ <tag
> k="addr:street"' | wc -l
> 49
>
> A csere a fent már taglalt SQL lekérdezések alapján történik.
>
> Ha van kedvetek, ellenőrizzétek, hogy nem csinált-e hülyeséget.
>
> Ilyen hibát találtam, de szerintem ez OSM hiba:
> https://www.openstreetmap.org/way/39500636 (a névben nincs közterület
> típusa vonalnak)
>
> Átnéztem kb 50 POI-t és rendben voltak.
> Egyedül azt találtam, hogy a Kossuth Lajos tér 1-3 alatt lévő posta
> valószínűleg nem publikus.
>
> Szerintetek érdemes lenne egy újabb Tesco import ami az esetlegesen
> bevezetett hibákat javítaná? A postás import szerintetek milyen állapotban
> van? Esetleg mehetne az, kisebbtől a nagyobbig csomag -> csekk -> partner
> -> posta
>
> Üdvözlettel / Best Regards:
>
> Kálmán (KAMI) Szalai
> UI:
>
> Úgy tűnik többet is cserélt, mint amennyit én találtam:
>
> Az én manuális cseretáblám ez volt:
>
> Szent László út-> utca (Budapest)
> Ady Enrde út -> utca (Budapest)
> Budafok-Belvárosi Szent Lipót plébánia -> Budapest
> Ady Enrde utca -> út (Budapest, házszám 99)
> Bartók Béla utca -> Bartók Béla út (Budapest)
> Thaly Kálmán út -> Thaly Kálmán utca (Budapest)
> Rákosi utca -> Rákosi út (Budapest)
> Rákóczi utca -> Rákóczi Ferenc utca
> Széchenyi utca -> Széchenyi István utca (Miskolc)
> Rákóczi utca -> Rákóczi Ferenc utca (Sárvár)
> Bartók Béla utca -> Bartók Béla út (Csorna)
> Harkányi utca - Harkányi út (Siklós)
> Makay István utca -> Makay István út (Pécs)
> Szabadkai utca -> Szabadkai út (Szeged)
> Aradi út -> Aradi utca (Makó)
> Bátyai út -> Bátyai utca (Kalocsa)
> Kossuth Lajos utca -> Kossuth Lajos út (Kiskőrös)
> Berzsenyi út -> Berzsenyi Dániel utca (Kaposvár)
> Szabadság utca -> Szabadság út (Nagyatád)
> Vásárhely utca -> Vásárhelyi út (Orosháza)
> Noszlopy utca -> Noszlopy Gáspár utca (Marcali)
> Klapka utca -> Klapka György utca (Balatonboglár)
> Ceglédi utca -> Ceglédi út (Nagykőrös)
> Dózsa György utca -> Dózsa György út (Kiskunlacháza)
> Mártírok utca -> Mártírok útja (Veszprém)
> Kossuth Lajos utca -> Kossuth Lajos út (Pilis)
> Fő utca -> Fő út (Dunaharaszti)
> Fő út -> Fő utca (Ajka)
> II. Rákóczi Ferenc utca -> II. Rákóczi Ferenc út (Budapest)
> Kinizsi út -> Kinizsi utca (Budaörs) !! helyet javítani
> Hengermalom utca -> Hengermalom út (Budapest)
> Kisújszállási utca -> Kisújszállási út (Karcag)
> Kerepesi utca -> Kerepesi út (Budapest)
> Csabdi út -> Csabdi utca (Bicske)
> Bibó István út -> Bibó István utca (Hatvan)
> Kabai útfél -> Kabai út (Hajdúszoboszló)
> Zanati utca -> Zanati út (Szombathely)
> Királyszék utca -> Királyszéki út (Győr)
> Egri utca -> Egri út (Mezőkövesd)
> Bartók Béla út -> Bartók Béla utca (Csorna)
> Szentgyörgyfalvi utca -> Szentgyörgyfalvi út (Debrecen)
> Törvényház utca -> Törvényház út (Eger)
> Rákóczi út -> II. Rákóczi Ferenc út (Eger)
> Királyhidai utca -> Királyhidai út (Mosonmagyaróvár)
> Brassói utca -> Brassói út (Ózd)
>
> ez 45 elem, szemben a talált 49 elemmel.
>
> Thomas Nagy <bkil.hu at gmail.com> ezt írta (időpont: 2018. dec. 23., V,
> 12:55):
>
>> Ezek nagyon hasznos ellenőrzések. Látom, hogy ezek saját függvények.
>> Esetleg be tudnánk vezetni valami hasonlót közismert QA eszközökben is?
>>
>> https://github.com/KAMI911/osm_poi_matchmaker/commit/6d6a058500d6e6f90bf345879bb501f0e562d92e
>> https://wiki.openstreetmap.org/wiki/Quality_assurance
>>
>> On Sunday, December 23, 2018 at 12:18:04 PM UTC+1, KAMI KAMI wrote:
>>>
>>> Sziasztok, egyelőre a QC-ben bevezettem két ellenőrzést:
>>>
>>> <!-- Checker good:
>>> {not_in_water,street_metaphone_is_around,standard_opening_hours}; bad
>>> {street_is_not_around}-->
>>>
>>> street_is_not_around - van/nincs olyan nevű utca az OSM-en a környéken,
>>> amely a POI addr:street mezőjében szerepel
>>> street_metaphone_is_around - van/nincs olyan hangzású nevű utca az
>>> OSM-en a környéken, amely a POI addr:street mezőjében szerepel (kb az
>>> út-utca keveréseket tudja kiszűrni)
>>>
>>> Egyelőre nincs ezeknek a teszten kivül semmi eredménye, de ha szerintetk
>>> hasznos és megbízható, esetleg be lehet vezetni, hogy a találatoknál legyen
>>> felülírva a POI addr:street adata.
>>>
>>> Nagyjából ezek a lekérdezések állnak a háttérben:
>>>
>>> Utcanév megtalálás a környéken, ha a név azonos (validátorhoz):
>>> SELECT name, osm_id, highway, ST_Distance_Sphere(ST_Transform(way,
>>> 4326), point.geom) as distance, way, ST_AsEWKT(way) as way_ewkt
>>> FROM planet_osm_roads, (SELECT
>>> ST_SetSRID(ST_MakePoint(19.03207,47.47248),4326) as geom) point
>>> WHERE name = 'Bartók Béla út' AND highway is not NULL
>>> AND
>>> ST_DWithin(ST_Buffer(way,3),ST_Transform(point.geom,3857), 300)
>>> ORDER BY distance ASC;
>>>
>>> Utcanév megtalálás a környéken, ha a név azonos:
>>> SELECT name, osm_id, highway, ST_Distance_Sphere(ST_Transform(way,
>>> 4326), point.geom) as distance, way, ST_AsEWKT(way) as way_ewkt
>>> FROM planet_osm_roads, (SELECT
>>> ST_SetSRID(ST_MakePoint(19.03207,47.47248),4326) as geom) point
>>> WHERE dmetaphone(name) = dmetaphone('Bartók Béla út') AND
>>> highway is not NULL
>>> AND
>>> ST_DWithin(ST_Buffer(way,3),ST_Transform(point.geom,3857), 300)
>>> ORDER BY distance ASC;
>>>
>>> Ugyanez, amikor út helyett utca van:
>>> SELECT name, osm_id, highway, ST_Distance_Sphere(ST_Transform(way,
>>> 4326), point.geom) as distance, way, ST_AsEWKT(way) as way_ewkt
>>> FROM planet_osm_roads, (SELECT
>>> ST_SetSRID(ST_MakePoint(19.03207,47.47248),4326) as geom) point
>>> WHERE dmetaphone(name) = dmetaphone('Bartók Béla utca') AND
>>> highway is not NULL
>>> AND
>>> ST_DWithin(ST_Buffer(way,3),ST_Transform(point.geom,3857), 300)
>>> ORDER BY distance ASC;
>>>
>>> SELECT name, osm_id, highway, ST_Distance_Sphere(ST_Transform(way,
>>> 4326), point.geom) as distance, way, ST_AsEWKT(way) as way_ewkt
>>> FROM planet_osm_roads, (SELECT
>>> ST_SetSRID(ST_MakePoint(21.07252,47.93337),4326) as geom) point
>>> WHERE dmetaphone(name) = dmetaphone('Petőfi Sándor út') AND
>>> highway is not NULL
>>> AND
>>> ST_DWithin(ST_Buffer(way,3),ST_Transform(point.geom,3857), 300)
>>> ORDER BY distance ASC;
>>>
>>> Örömmel várom, ha van ötlet még ezen kívül, vagy bármi gondolat a
>>> témában.
>>>
>>>
>>> Üdvözlettel / Best Regards:
>>>
>>> Kálmán (KAMI) Szalai
>>>
>>>
>>> KAMI911 KAMI911 <kam... at gmail.com> ezt írta (időpont: 2018. dec. 20.,
>>> Cs, 14:59):
>>>
>>>> Sziasztok,
>>>>
>>>> Lehet elérkezett az idő hogy ez az egész import témát egybe kezeljük.
>>>> Persze az importok külön-külön mennek, de a hibákat kereshetjük globálisan.
>>>>
>>>> Ahogy átírtam a programot, sok-sok duplikátum megszűnt, ettől
>>>> függetlenül érdemes lenne jobb adatokat megadni, hogy milyenek legyenek a
>>>> keresési sugár értékek, safe (név és tag egyezés) és unsafe (csak tag
>>>> egyezés) esetben. Szóval most sokkal jobbak a kilátások, de elkezdtem nézni
>>>> a duplikátumokat és az AVIA-nál Martonvásárnál két poi is van egyik a
>>>> település nevével, a másik Szabó Brigitta névvel. Jelezem nekik.
>>>> A Benunál a duplikálást az okozza, hogy két külön poi azonos GEOM-mal
>>>> rendelkezik.
>>>>
>>>> Van kedvetek a továbbiakat megfejteni, hogy mi a gond velük? És persze
>>>> ha nem a mi hibánk akkor be is kellene jelenteni a cégeknek.
>>>>
>>>> Természetesen az új elemekre is rá lehetne nézni, hogy biztos nem lesz
>>>> valami duplikátum a működés révén.
>>>>
>>>> Imrével már beszélgettük, hogyan lehetne szűrni az új és duplikált
>>>> POI-kat mégvagy a megfelelő utcaelnevezéssel eltalálni, megadni, de akinek
>>>> van valami ötlete, azt szívesen vesszük.
>>>>
>>>> Frissített adatok:
>>>> https://github.com/KAMI911/osm-import-request
>>>>
>>>> Most itt tartunk:
>>>>
>>>> -----
>>>> 300
>>>>
>>>> ./hu_avia/poi_address_merge_huaviafu.osm
>>>> 2 <!-- OSM link: https://osm.org/node/320586750 -->
>>>> Duplicated elements: 1
>>>> New elements: 39
>>>>
>>>> ./hu_benu/poi_address_merge_hubenupha.osm
>>>> 2 <!-- OSM link: https://osm.org/node/3520336469 -->
>>>> Duplicated elements: 1
>>>> New elements: 125
>>>>
>>>> ./hu_bp_bank/poi_address_merge_hubpatm.osm
>>>> Duplicated elements: 0
>>>> New elements: 111
>>>>
>>>> ./hu_bp_bank/poi_address_merge_hubpbank.osm
>>>> Duplicated elements: 0
>>>> New elements: 24
>>>>
>>>> ./hu_cba/poi_address_merge_hucbacon.osm
>>>> 2 <!-- OSM link: https://osm.org/node/4251192415 -->
>>>> Duplicated elements: 1
>>>> New elements: 200
>>>>
>>>> ./hu_dm/poi_address_merge_hudmche.osm
>>>> Duplicated elements: 0
>>>> New elements: 86
>>>>
>>>> ./hu_foxpost/poi_address_merge_hufoxpocso.osm
>>>> Duplicated elements: 0
>>>> New elements: 98
>>>>
>>>> ./hu_kh/poi_address_merge_hukhatm.osm
>>>> Duplicated elements: 0
>>>> New elements: 374
>>>>
>>>> ./hu_kh/poi_address_merge_hukhbank.osm
>>>> Duplicated elements: 0
>>>> New elements: 73
>>>>
>>>> ./hu_kulcs/poi_address_merge_hukulcspha.osm
>>>> Duplicated elements: 0
>>>> New elements: 63
>>>>
>>>> ./hu_mobil_petrol/poi_address_merge_humobpefu.osm
>>>> Duplicated elements: 0
>>>> New elements: 2
>>>>
>>>> ./hu_mol/poi_address_merge_humolfu.osm
>>>> 2 <!-- OSM link: https://osm.org/node/2302639399 -->
>>>> 2 <!-- OSM link: https://osm.org/way/434836133 -->
>>>> Duplicated elements: 2
>>>> New elements: 25
>>>>
>>>> ./hu_mol_bubi/poi_address_merge_hububibir.osm
>>>> Duplicated elements: 0
>>>> New elements: 3
>>>>
>>>> ./hu_omv/poi_address_merge_huomvfu.osm
>>>> Duplicated elements: 0
>>>> New elements: 16
>>>>
>>>> ./hu_posta/poi_address_merge_hupostacse.osm
>>>> Duplicated elements: 0
>>>> New elements: 115
>>>>
>>>> ./hu_posta/poi_address_merge_hupostacso.osm
>>>> Duplicated elements: 0
>>>> New elements: 50
>>>>
>>>> ./hu_posta/poi_address_merge_hupostapo.osm
>>>> Duplicated elements: 0
>>>> New elements: 1233
>>>>
>>>> ./hu_posta/poi_address_merge_hupostapp.osm
>>>> 2 <!-- OSM link: https://osm.org/node/3469960863 -->
>>>> Duplicated elements: 1
>>>> New elements: 450
>>>>
>>>> ./hu_prima/poi_address_merge_huprimacon.osm
>>>> Duplicated elements: 0
>>>> New elements: 36
>>>>
>>>> ./hu_rossmann/poi_address_merge_hurossmche.osm
>>>> Duplicated elements: 0
>>>> New elements: 76
>>>>
>>>> ./hu_shell/poi_address_merge_hushellfu.osm
>>>> Duplicated elements: 0
>>>> New elements: 3
>>>>
>>>> ./hu_spar/poi_address_merge_husparexp.osm
>>>> Duplicated elements: 0
>>>> New elements: 61
>>>>
>>>> ./hu_spar/poi_address_merge_husparint.osm
>>>> Duplicated elements: 0
>>>> New elements: 16
>>>>
>>>> ./hu_spar/poi_address_merge_husparsup.osm
>>>> 2 <!-- OSM link: https://osm.org/node/1243005712 -->
>>>> 2 <!-- OSM link: https://osm.org/way/228874975 -->
>>>> 2 <!-- OSM link: https://osm.org/way/420910894 -->
>>>> Duplicated elements: 3
>>>> New elements: 150
>>>>
>>>> ./hu_tesco/poi_address_merge_hutescoexp.osm
>>>> Duplicated elements: 0
>>>> New elements: 2
>>>>
>>>> ./hu_tesco/poi_address_merge_hutescoext.osm
>>>> Duplicated elements: 0
>>>> New elements: 0
>>>>
>>>> ./hu_tesco/poi_address_merge_husmrktexp.osm
>>>> Duplicated elements: 0
>>>> New elements: 2
>>>>
>>>> ./hu_tesco/poi_address_merge_hutescosup.osm
>>>> Duplicated elements: 0
>>>> New elements: 2
>>>>
>>>> Üdvözlettel / Best Regards:
>>>>
>>>> Kálmán (KAMI) Szalai
>>>>
>>> --
>> Magyar OSM Levelezőlista - openstreetmap-hungary at googlegroups.com
>> leiratkozás: openstreetmap-hungary+unsubscribe at googlegroups.com
>> ---
>> Azért kapta ezt az üzenetet, mert feliratkozott a Google Csoportok
>> „openstreetmap-hungary” csoportjára.
>> Az erről a csoportról és az ahhoz kapcsolódó e-mailekről való
>> leiratkozáshoz küldjön egy e-amailt a(z)
>> openstreetmap-hungary+unsubscribe at googlegroups.com címre.
>> További lehetőségekért látogasson el ide:
>> https://groups.google.com/d/optout.
>>
>
--------- következő rész ---------
Egy csatolt HTML állomány át lett konvertálva...
URL: <http://lists.openstreetmap.org/pipermail/talk-hu/attachments/20181224/4b287d66/attachment.htm>
További információk a(z) Talk-hu levelezőlistáról