A recolha e a análise automatizada de dados do mercado habitacional: fichas de áreas do município de Águeda

Abstract

A temática da habitação é algo imperativo quando se fala em políticas públicas no contexto português, sendo que o seu estudo e análise têm sido dificultados devido à falta de informação estruturada. Com este trabalho pretende-se apresentar a relevância prática dos novos métodos e técnicas de recolha e visualização de dados com o objetivo de utilizar dados já existentes para a criação de ferramentas de apoio à decisão. A título de exemplo, utilizam-se dados recolhidos no processo de licenciamento das habitações no Município de Águeda, nomeadamente da Ficha de Áreas. Com acesso a estes dados pretende-se criar uma ferramenta de auxílio à tomada de decisão para os técnicos, bem como de aconselhamento a promotores imobiliários, de forma que os investimentos realizados no território de Águeda estejam de acordo com as necessidades habitacionais sentidas. Para realizar esta ferramenta, recorreu-se exclusivamente à linguagem de programação Python, sendo que com esta foram utilizadas diversas técnicas como por exemplo a recolha de dados presentes em imagens, através do reconhecimento ótico de caracteres (OCR) com recurso às bibliotecas PDF2Image e Pytesseract, bem como a leitura automatizada de tabelas presentes em documentos PDF, através da biblioteca Tabula. Para além disso, realizou-se todo o processo de design do dashboard com recurso à biblioteca Plotly. Com a realização desta ferramenta pretende-se demonstrar que existem diversos dados disponíveis que são passíveis de ser utilizados e trabalhados com recurso às novas tecnologias e dos quais o poder político poderá beneficiar.

The housing theme is imperative when talking about public policies in the Portuguese context, and its study and analysis have been difficult due to the lack of structured information. This work intends to present the practical relevance of new methods and techniques for collecting and visualizing data, using existing data to create decision support tools. For example, we use the data from the housing licensing process of the Municipality of Águeda, more specifically from the Area File. With access to this data, it is intended to create a decision-making tool for technicians, as well as advising real estate developers, so that investments made in the territory of Águeda are by the housing needs felt. To create this tool is used the Python programming language. With it, several techniques were used, such as the collection of data present in images, through optical character recognition (OCR) using the PDF2Image and Pytesseract libraries, as well as the automated reading of tables present in PDF documents through the Tabula library. In addition, the entire dashboard design was carried out using the Plotly library. With this tool, the main goal is to demonstrate that several data available can be used with recourse to new technologies and from which the political power can benefit.