anaschwendler/jornalismo-de-dados

Processamento de Linguagem Natural: aplicações em jornalismo e pesquisa ;)

Jornalismo de Dados

Processamento de Linguagem Natural: aplicações em jornalismo e pesquisa ;)

Objetivos

• Extrair insights para projetos de pesquisa jornalística e acadêmica
• Mostrar exemplos do que já foi feito
• Metodologia básica por trás do uso de Processamento de linguagem natural

Planejamento

• Introdução a PLN (o que é PLN)
• Por que é importante, como ajuda no dia-a-dia
• Como criar estudos (jupyter notebook)
• Scrapping de dados
• Como análisar usando PLN
• Resultados até agora

Tecnologias

• Python
• Anaconda
• Jupyter notebook
• Beautiful Soup
• Scrapy
• Pandas
• Numpy
• Scikit-learn
• Seaborn

Instalando módulos necessários

$ pip install -r requirements.txt

Bases de dados

[Em construção]

CSTCorpus: http://nilc.icmc.usp.br/CSTNews/login/about

http://download.inep.gov.br/microdados/microdados_censo_superior_2014.zip http://portal.inep.gov.br/artigo/-/asset_publisher/B4AQV9zFY7Bv/content/id/1336683