Dados abertos, Python e PostgreSQL: a combinação perfeita - Álvaro Justen
Capturar dados públicos não é tarefa fácil: estão em muitas páginas, formatos/padrões. O software livre Brasil.IO disponibiliza esses dados em formatos abertos. Mostraremos como usamos o PostgreSQL e ferramentas que facilitam trabalhar com dados.
Dada a imensa quantidade de informação disponível na Web de forma distribuída e em diversos formatos é comum a necessidade de criar softwares especializados para capturar, converter e limpar os dados antes de inserí-los em uma base de dados relacional. Com o advento dos dados públicos e da inovação cívica, muitos dados de interesse da população O Brasil. IO nasceu para resolver esse problema: é uma comunidade de desenvolvedores que criam scripts para capturar, limpar e estruturar bases de dados de interesse público, que ficam disponíveis no site para download e para acesso através de uma API - chamamos esse processo de ""libertação de dados"". O projeto é software livre e é utilizado por jornalistas, pesquisadores e ativistas, facilitando a criação de narrativas e aplicativos guiados por dados.
--
Álvaro Justen - Álvaro Justen é programador e professor. Ativista de software livre desde 2004 e programador Python desde 2005, atualmente trabalha capturando, convertendo, limpando e analisando dados em diversos projetos jornalísticos brasileiros; é fundador do portal de dados abertos acessíveis Brasil.IO, desenvolvedor-chefe do ImpactoJOR, professor da Escola de Dados e está sempre viajando para congressos, libertando dados públicos inacessíveis e provando cafés especiais.