[Talk-pt] Utilisação da Base Nacional de Moradas

Alexandre Moleiro alexandre.moleiro at gmail.com
Wed Mar 24 12:43:31 UTC 2021


Agradeço a todos os que já contribuíram!

Sobre o processamento dos dados, pelos testemunhos de quem já o fez e pela
minha experiência, não podemos usar ferramentas automáticas.
Há muitos erros que precisam de um olhar humano e esse trabalho
preparatório tem de ser feito em tabela/folha de cálculo,qgis,etc. como
mostrou o Nuno Caldeira no vídeo que está linkado em
https://wiki.openstreetmap.org/wiki/Portugal/Projetos/Importa%C3%A7%C3%A3o_de_endere%C3%A7os

Devemos sim explicitar as regras para expansão de abreviaturas e o que
fazer aos endereços incompletos (na minha opinião não importar).

Para mim a parte mais importante (e trabalhosa) é a validação e correcção
dos dados ainda em tabela.
Depois disso também acho importante a verificação visual dos dados a
importar no mapa face aos já existentes.
Sou de opinião que não devemos criar duplicados.


Entretanto sobre as zonas rurais continuo com a mesma dúvida:

Vejamos o seguinte endereço retirado dos dados do INE já convertidos para
geojson (obtidos em: http://85.240.54.201/ine/)

"addr:postcode" : "8800-011",
"addr:city" : "Cachopo",
"addr:street" : "Alcarias Baixas",
"addr:housenumber" : "CP 256 Z"

Como conheço pessoalmente o local sei que quando alguém dá a morada escreve:

Flano de Beltrano Cicrano
Alcarias Baixas 256-Z   (há quem ponha o CP ou Caixa Postal antes do 256-Z)
8800-011 Cachopo

A minha dúvida é sobre o campo addr:street, que nos dados do INE contém o
nome do lugar/aldeia/monte/sitio em zonas rurais.
A razão para tal parece-me óbvia, nesses lugares as ruas/estradas muitas
vezes não têm nome.

Na minha interpretação da wiki
https://wiki.openstreetmap.org/wiki/Pt:Key:addr nestes casos deveríamos
usar o addr:place em vez do addr:street.
Gostaria de ler mais opiniões.

Saudações
Alexandre Moleiro



On Wed, 24 Mar 2021 at 11:55, David Morais Ferreira <
david.moraisferreira at gmail.com> wrote:

> Olá,
>
> É óptimo que tenhamos dados que podemos usar para melhorar o
> OpenStreetMap! Bom trabalho e obrigado pelos esforços!
> Importar endereços não é um novo desafio, e é por isso que recomendo que
> aprendamos com projectos anteriores no OpenStreetMap [1].
>
> No que diz respeito à convenção de marcação de endereços, recomendo que
> sigamos o esquema de Karlsruhe [2], em vez de utilizarmos as relações
> associatedStreets. Este esquema de etiquetagem é pouco utilizado [3] e não
> é fácil de utilizar para novos contribuintes. Pelo que sei, tanto o editor
> do iD como o StreetComplete não apoiam sequer as relações. No caso de
> decidirmos utilizar o AssociatedStreets, deveríamos analisar o software
> escrito pela comunidade francesa OSM [4].
>
> Para o processamento de dados, recomendo que utilizemos scripts para
> normalizar a nomenclatura, uma vez que esta é repetível e verificável. Por
> exemplo, no Luxemburgo, usamos csventrifuge [5] para expandir(?)
> abreviaturas (Dr -> Doutor, Eng..), remover endereços inexistentes, e
> acrescentar endereçosem falta.
> O processo de conflação poderia ser feito manualmente, ou poderíamos
> utilizar ferramentas existentes tais como autoAWS [5], regio-osm [6], para
> citar algumas.
>
>
> Talvez pudéssemos organizar algum tipo de conferência
> (BigBlueButton/Zoom/...) para discutir ideias? Seria uma boa oportunidade
> para as pessoas se conhecerem umas às outras, e fortaleceria a nossa
> comunidade.😊
>
> PS: Uma vez encontrado um consenso, deveríamos documentá-lo em
> https://wiki.openstreetmap.org/wiki/Import/Guidelines.
>
> Cumprimentos,
> David / dmlu
>
>
> [1] https://wiki.openstreetmap.org/wiki/Category:Address_import
> [2]
> https://wiki.openstreetmap.org/wiki/Proposed_features/House_numbers/Karlsruhe_Schema
> [3] https://taginfo.openstreetmap.org/tags/type=associatedStreet#map
> [4]
> https://wiki.openstreetmap.org/wiki/FR:France/WikiProject_Base_Adresses_Nationale_Ouverte_(BANO)
> [5] https://github.com/osmlu/csventrifuge
> [6] https://wiki.openstreetmap.org/wiki/AutoAWS
> [7] https://regio-osm.de/listofstreets/hierarchy
>
>
>
>
> On Mon, Mar 22, 2021 at 8:01 PM Jorge Gustavo Rocha <jgr at di.uminho.pt>
> wrote:
>
>> Olá Alexandre,
>>
>> Excelente iniciativa! Vamos por à discussão e ver quem contribui.
>>
>> Os meus dois cêntimos vão para que se use uma relação entre o
>> prédio/número de polícia e a rua correspondente, como escrevi no diário
>> há uns tempos (há 7 anos [1]). Desta foorma, se se corrgir o nome da
>> rua, ficam todos os endereços corrigidos.
>>
>> A relação da minha casa, por exemplo, é esta [2].
>>
>> Boas mapeadelas,
>>
>> Jorge Gustavo
>>
>> [1]
>> https://www.openstreetmap.org/user/Jorge%20Gustavo%20Rocha/diary/21113
>>
>> [2]
>>
>> https://www.openstreetmap.org/relation/3547082#map=16/40.6171/-8.7502&layers=D
>>
>>
>> Às 18:48 de 22/03/21, Alexandre Moleiro escreveu:
>> > Boas.
>> >
>> > Tendo em conta que este procedimento se trata de uma importação seria
>> > importante confirmar se toda a comunidade PT está de acordo com o
>> > "Projeto de importação de endereços com base nos dados cedidos pelo
>> > Instituto Nacional de Estatística (INE)."
>> >
>> https://wiki.openstreetmap.org/wiki/Portugal/Projetos/Importa%C3%A7%C3%A3o_de_endere%C3%A7os
>> > <
>> https://wiki.openstreetmap.org/wiki/Portugal/Projetos/Importa%C3%A7%C3%A3o_de_endere%C3%A7os
>> >
>> >
>> > Sendo esta mailing list o canal oficial da comunidade seria desejável
>> > que ficasse registado o apoio à iniciativa por uma maioria dos
>> mapeadores.
>> >
>> > Há forma de lançarmos uma sondagem ? Qual o melhor método para mostrar
>> > que estamos todos de acordo?
>> >
>> > Sobre a forma mais correcta de colocar os endereços no OSM coloco uma
>> > dúvida sobre os endereços em zonas rurais, em particular em zonas onde
>> > as ruas/estradas/caminhos não têm nome.
>> > Nesses casos os dados do INE contêm o nome do local e não o nome da
>> > rua/estrada (além do número de polícia ou caixa postal) .
>> >
>> > Devemos usar addr:street ou o addr:place com o nome do local ?
>> > A wiki não é totalmente inequívoca neste aspecto.
>> > https://wiki.openstreetmap.org/wiki/Pt:Key:addr
>> > <https://wiki.openstreetmap.org/wiki/Pt:Key:addr>
>> >
>> > Saudações
>> > Alexandre Moleiro
>> >
>> >
>> > On Sun, 7 Mar 2021 at 00:47, Jorge Gustavo Rocha <jgr at di.uminho.pt
>> > <mailto:jgr at di.uminho.pt>> wrote:
>> >
>> >     Caro João,
>> >
>> >     Sim, por favor usa os dados da Base Nacional de Moradas que está
>> >     disponível. Estes dados serão melhorados a curto prazo e irão
>> incluir
>> >     também dados de endereços comerciais e industriais. Para já
>> referem-se a
>> >     alojamentos, que é o importante para os Censos.
>> >
>> >     Mas usa e abusa e quando houve mais dados e melhores, melhora-se o
>> mapa.
>> >     É assim que fazemos desde o início.
>> >
>> >     Como podes usar a informação?
>> >
>> >     1) O serviço tem índices para o continente, e dentro de cada um
>> destes
>> >     índices, tens um link para cada concelho.
>> >
>> >     Norte: https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Centro_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Centro_Atom.xml>
>> >     Centro:
>> https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Centro_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Centro_Atom.xml>
>> >     Lisboa: https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_AML_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_AML_Atom.xml>
>> >     Alentejo:
>> >     https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Alentejo_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Alentejo_Atom.xml>
>> >     Algarve:
>> >     https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Algarve_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_pc_Algarve_Atom.xml>
>> >     Madeira: https://inspire.ine.pt/AD/atom/CDG_AD_BNM_ram_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_ram_Atom.xml>
>> >     Açores:
>> >     https://inspire.ine.pt/AD/atom/CDG_AD_BNM_raa_AC26_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_raa_AC26_Atom.xml>
>> >     https://inspire.ine.pt/AD/atom/CDG_AD_BNM_raa_AC25_Atom.xml
>> >     <https://inspire.ine.pt/AD/atom/CDG_AD_BNM_raa_AC25_Atom.xml>
>> >
>> >     2) Dentro de cada índice, tens um link para um zip para cada
>> município.
>> >
>> >     2.1) Por exemplo, para o meu município, Ílhavo, terei que usar o
>> índice
>> >     da zona centro e descarregar:
>> >
>> >     inspire.ine.pt/AD/atom/gml/Addresses_0110_EPSG4258.zip
>> >     <http://inspire.ine.pt/AD/atom/gml/Addresses_0110_EPSG4258.zip>
>> >
>> >     O zip contém um GML. O formato GML contém os dados divididos em
>> quatro
>> >     componentes:
>> >     - os endereços propriamente ditos que têm uma componente geográfica
>> que
>> >     é um ponto
>> >     - os dados relacionados com esse endereço, que são:
>> >     -- a rua
>> >     -- a designação postal
>> >     -- a área administrativa
>> >
>> >     3) Visualizar a informação no QGIS
>> >
>> >     Basta arrastares o GML para o QGIS e aparecem-te as quatro camadas.
>> >
>> >     Acrescenta o OSM como mapa de fundo.
>> >
>> >     3.1 Para cada ponto, que representa um ponto de entrega de correio,
>> tens
>> >     um ou mais endereços.
>> >
>> >     Com o botão (i) de Identificar, podes pedir todos os endereços
>> >     associados ao ponto.
>> >
>> >     Vê o print screen:
>> >     https://nextcloud.geomaster.pt/index.php/s/ALFrca47qJYqGZP
>> >     <https://nextcloud.geomaster.pt/index.php/s/ALFrca47qJYqGZP>
>> >
>> >     No print screen aparece a minha casa (nº 187) e os 9 endereços
>> >     associados ao mesmo ponto de entrega do correio, como se vê na
>> tabela. É
>> >     tipicamente a localização da caixa de correio. Nalgumas aldeias, a
>> caixa
>> >     é distante do edifício.
>> >
>> >     São instruções muito sucintas... Agora que acabei de escrever isto,
>> vejo
>> >     que seria mais interessante disponibilizar esta informação de outra
>> >     forma. Amanhã vou ver se arranjo uma outra forma mais simpática.
>> >
>> >     Temos também que conversar sobre a forma mais correta de por estes
>> >     endereços no OSM.
>> >
>> >     Abraço,
>> >
>> >     Gustavo
>> >
>> >
>> >     Às 19:38 de 06/03/21, João Pedro Malhado escreveu:
>> >     > Boa tarde,
>> >     >
>> >     > Muito obrigado pela menção à disponibilidade desta base de dados
>> >     que não conhecia.
>> >     > Não sei qual é a opinião geral, mas parece-me que de acordo com a
>> >     informação disponível estes dados poderiam ser usados no OSM, o que
>> >     tonaria esta fonte preciosa na melhoria do mapa.
>> >     >
>> >     > Gostaria de saber se, e de que forma, estes dados estão a ser
>> >     utilisados no OSM, ou se há planos para o fazer.
>> >     >
>> >     > Alguém teria conselhos a dar sobre como ler este formato? Ou só
>> >     escrevendo código para processar o xml?
>> >     >
>> >     > Cumprimentos,
>> >     > João
>> >     >
>> >     > ________________________________________
>> >     > From: Aurelio Pires <anvpires at gmail.com <mailto:
>> anvpires at gmail.com>>
>> >     > Sent: Thursday, March 4, 2021 21:01
>> >     > To: talk-pt at openstreetmap.org <mailto:talk-pt at openstreetmap.org>
>> >     > Subject: Re: [Talk-pt]  Fw: Licença e utilisação dos dados SIG no
>> >     OpenStreetMap
>> >     >
>> >     > Obrigado Marcos pela partilha deste email.
>> >     > No portal do SNIG pode ver-se nos Metadados desta informação [1],
>> >     ao nível da Política de Dados:
>> >     >
>> >     > Restrições legais:
>> >     >   Acesso público sem restrições
>> >     >   acesso e uso sem condições
>> >     >
>> >     > APires
>> >     >
>> >     > [1]
>> >
>> https://snig.dgterritorio.gov.pt/rndg/srv/por/catalog.search#/metadata/1b772914-e3e9-4663-8557-a6aef5aa596a?tab=responsible
>> >     <
>> https://snig.dgterritorio.gov.pt/rndg/srv/por/catalog.search#/metadata/1b772914-e3e9-4663-8557-a6aef5aa596a?tab=responsible
>> >
>> >     >
>> >     >
>> >     > On 2021-03-04 18:52, Marcos Amores wrote:
>> >     > Há três anos perguntei ao INE e disseram-me na altura que tinham
>> >     todo o interesse que os dados fizessem parte do OSM. Colocado em
>> >     anexo abaixo.
>> >     >
>> >     > ---------- Forwarded message ---------
>> >     > De: Ana M. Santos <ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt><mailto:ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt>>>
>> >     > Date: sexta, 11/05/2018 à(s) 11:56
>> >     > Subject: FW: Os dados do BGRI 2011 podem ser utilizados no
>> >     OpenStreetMap?
>> >     > To: <marcosoliveira.2405 at gmail.com
>> >     <mailto:marcosoliveira.2405 at gmail.com><mailto:
>> marcosoliveira.2405 at gmail.com
>> >     <mailto:marcosoliveira.2405 at gmail.com>>>
>> >     > Cc: Margarida Rosa <margarida.rosa at ine.pt
>> >     <mailto:margarida.rosa at ine.pt><mailto:margarida.rosa at ine.pt
>> >     <mailto:margarida.rosa at ine.pt>>>, INE - Apoio ao Cliente
>> >     <info at ine.pt <mailto:info at ine.pt><mailto:info at ine.pt
>> >     <mailto:info at ine.pt>>>, Jorge Magalhães <jorge.magalhaes at ine.pt
>> >     <mailto:jorge.magalhaes at ine.pt><mailto:jorge.magalhaes at ine.pt
>> >     <mailto:jorge.magalhaes at ine.pt>>>, Francisco Caldeira
>> >     <francisco.caldeira at ine.pt
>> >     <mailto:francisco.caldeira at ine.pt><mailto:francisco.caldeira at ine.pt
>> >     <mailto:francisco.caldeira at ine.pt>>>, Cristina Ferreira
>> >     <cristina.ferreira at ine.pt
>> >     <mailto:cristina.ferreira at ine.pt><mailto:cristina.ferreira at ine.pt
>> >     <mailto:cristina.ferreira at ine.pt>>>
>> >     >
>> >     >
>> >     > Bom dia, as minhas desculpas pela resposta tardia ao seu email.
>> >     Confirmo que o conjunto de dados geográfico (CGD)  relativos à Base
>> >     Geográfica de Informação (BGRI) são open data e o INE terá todo o
>> >     interesse em que os mesmos integrem a base de dados do OSM. Este CGD
>> >     está harmonizado com a diretiva INSPIRE e publicado em serviço ATOM
>> >     http://inspire.ine.pt/SU/atom/downloadservice.xml
>> >     <http://inspire.ine.pt/SU/atom/downloadservice.xml>
>> >     > Coloco em conhecimento a colega do Serviço de Difusão para
>> >     eventuais esclarecimentos adicionais.
>> >     >
>> >     > Muito obrigada,
>> >     > Cumprimentos,
>> >     > Ana Santos
>> >     >
>> >     > Cumprimentos,
>> >     > Ana Santos
>> >     > INE – DMSI/GEO
>> >     > Tel.: + 351 218 426 100 ext: 1421
>> >     > ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt><mailto:ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt>>
>> >     > From: Marcos Oliveira [mailto:marcosoliveira.2405 at gmail.com
>> >     <mailto:marcosoliveira.2405 at gmail.com>]
>> >     > Sent: sexta-feira, 13 de abril de 2018 21:20
>> >     > To: ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt><mailto:ana.msantos at ine.pt
>> >     <mailto:ana.msantos at ine.pt>>
>> >     > Cc: osm-ml at michreichert.de
>> >     <mailto:osm-ml at michreichert.de><mailto:osm-ml at michreichert.de
>> >     <mailto:osm-ml at michreichert.de>>
>> >     > Subject: Os dados do BGRI 2011 podem ser utilizados no
>> OpenStreetMap?
>> >     >
>> >     > Ex.ª Dr.ª Ana Maria Santos,
>> >     >
>> >     > Recentemente foi notado o uso de dados da Base Geográfica de
>> >     Referenciação de Informação no OpenStreetMap, uma base de dados
>> >     cartográficos aberta, com a justificação de que neles existem dados
>> >     sobre lugares estatísticos que podiam ser úteis para a
>> >     georeferenciação de elementos. [1]
>> >     >
>> >     > Nos metadados existe uma secção que prevê restrições sobre o uso e
>> >     pelo que pude apurar existem direitos de autor inerentes a estes
>> >     dados. [2]
>> >     >
>> >     > Segundo as normas do OpenStreetMap qualquer fonte de dados que
>> >     pertencem a uma entidade/pessoa (i.e. dados que não estejam em
>> >     domínio publico) deve ser consultada sobre o facto e determinar se
>> >     há ou não permissão para o uso dos dados em questão. Se a resposta é
>> >     negativa então os dados são totalmente removidos da base de dados de
>> >     forma a não prejudicar o dono dos mesmos. [3]
>> >     >
>> >     > Seria, então, possível confirmar se V. Ex.ª autoriza o uso destes
>> >     dados no OpenStreetMap?
>> >     >
>> >     > Continuação de uma boa noite.
>> >     >
>> >     > [1] - https://www.openstreetmap.org/changeset/58061236
>> >     <https://www.openstreetmap.org/changeset/58061236>
>> >     > [2] - http://mapas.ine.pt/download/metadados/bgri11.html
>> >     <http://mapas.ine.pt/download/metadados/bgri11.html>
>> >     > [3] -
>> https://blog.openstreetmap.org/2017/03/17/use-of-cc-by-data/
>> >     <https://blog.openstreetmap.org/2017/03/17/use-of-cc-by-data/>
>> >     >
>> >     >
>> >     > _______________________________________________
>> >     > Talk-pt mailing list
>> >     > Talk-pt at openstreetmap.org <mailto:Talk-pt at openstreetmap.org>
>> >     > https://lists.openstreetmap.org/listinfo/talk-pt
>> >     <https://lists.openstreetmap.org/listinfo/talk-pt>
>> >     >
>> >
>> >     J. Gustavo
>> >     --
>> >     Jorge Gustavo Rocha
>> >     Departamento de Informática
>> >     Universidade do Minho
>> >     4710-057 Braga
>> >     Gabinete 3.29 (Piso 3)
>> >     Tel: +351 253604480
>> >     Fax: +351 253604471
>> >     Móvel: +351 910333888
>> >     skype: nabocudnosor
>> >
>> >     _______________________________________________
>> >     Talk-pt mailing list
>> >     Talk-pt at openstreetmap.org <mailto:Talk-pt at openstreetmap.org>
>> >     https://lists.openstreetmap.org/listinfo/talk-pt
>> >     <https://lists.openstreetmap.org/listinfo/talk-pt>
>> >
>> >
>> >
>> > --
>> > Alexandre Moleiro
>> >   alexandre.moleiro at gmail.com <mailto:alexandre.moleiro at gmail.com>
>> >
>> > _______________________________________________
>> > Talk-pt mailing list
>> > Talk-pt at openstreetmap.org
>> > https://lists.openstreetmap.org/listinfo/talk-pt
>> >
>>
>> J. Gustavo
>> --
>> Jorge Gustavo Rocha
>> Departamento de Informática
>> Universidade do Minho
>> 4710-057 Braga
>> Gabinete 3.29 (Piso 3)
>> Tel: +351 253604480
>> Fax: +351 253604471
>> Móvel: +351 910333888
>> skype: nabocudnosor
>>
>> _______________________________________________
>> Talk-pt mailing list
>> Talk-pt at openstreetmap.org
>> https://lists.openstreetmap.org/listinfo/talk-pt
>>
> _______________________________________________
> Talk-pt mailing list
> Talk-pt at openstreetmap.org
> https://lists.openstreetmap.org/listinfo/talk-pt
>


-- 
Alexandre Moleiro
  alexandre.moleiro at gmail.com
-------------- next part --------------
An HTML attachment was scrubbed...
URL: <http://lists.openstreetmap.org/pipermail/talk-pt/attachments/20210324/600d2c35/attachment-0001.htm>


More information about the Talk-pt mailing list