Minha jornada rumo ao Open Data
Bom, este não é exatamente um artigo técnico. Este post descreve o fim de uma busca e o começo de uma nova jornada: meu primeiro passo rumo ao Open Data, um mundo de fadas, de gente estranha disposta a mudar o mundo.
Meu primeiro contato com esse mundo aconteceu há dois anos, quando comecei a aprender luxemburguês. Rapidamente, descobri a falta de conteúdo online, de apoio da comunidade e de ferramentas de aprendizado. Então decidi usar meus superpoderes para construir uma aplicação chamada LOD to Anki. Esse software tem como objetivo exportar as palavras do LOD.lu para flashcards do Anki. Siga os links para saber mais sobre eles.
Infelizmente, fazer scraping do conteúdo do LOD se mostrou uma estratégia ineficiente. A estrutura HTML do site antigo era complicada, o que tornava o web crawling complexo e lento. Como eu manteria meu dataset atualizado? Como eu garantiria o desempenho da minha ferramenta? Só havia uma resposta para essas perguntas. Decidi pedir os dados diretamente.
Para minha surpresa, o Zenter fir d’Lëtzebuerger Sprooch (ZLS) respondeu. Eles compartilharam o link do dataset do LOD, disponível na Plataforma de Open Data de Luxemburgo, e fiquei maravilhado!
Com o dataset em mãos, desenvolvi meu projeto rapidamente. Foi fácil integrá-lo ao software, o que me deu tempo para focar no desenvolvimento dos decks do Anki. Graças a isso, todas as palavras importantes listadas pela série de livros Schwätzt Dir Lëtzebuergesch agora estão documentadas e compartilhadas no GitHub, para qualquer pessoa usar e aprender.
Aquela interação inocente com o ZLS e o dataset deles me ajudou a causar um impacto pequeno, mas positivo, na sociedade. Algumas pessoas expressaram sua gratidão pelo software. Além disso, o conteúdo de áudio do LOD.lu teve seu tamanho reduzido, com uma perda de qualidade imperceptível, porque compartilhei com o ZLS a sugestão do László sobre compressão de áudio, o que potencialmente reduziu o tráfego de rede deles.
De fato, o mundo é redondo e dá voltas. Dois anos depois, aproveitei a oportunidade de me juntar ao povo das fadas. Agora trabalho no Luxembourg National Data Service (LNDS). Serei um dos muitos seres humanos trabalhando nos bastidores, integrando e fornecendo soluções para apoiar a pesquisa e a inovação por meio de dados.
Gostaria de expressar meu agradecimento a todas as pessoas da Pictet Technologies. Esses quatro anos de aprendizado e crescimento foram, sem dúvida, decisivos para o sucesso da minha carreira.
See you | Bis geschwënn | Até mais | À bientôt