Futpedia-Scrapper

Scrapper para obter dados da Futpédia

O quê é isto?

Um Web Scrapper, em Java, para obter dados da Futpédia.

Em outras palavras, ele abre uma conexão com o site da Futpédia, e varre o HTML em busca dos dados, e te retorna um POJO com os dados.

A lista de Campeonatos vem puro, ou seja, vem todos os dados e eles não são tratados. Recomendo verificar as classes no respectivo pacote para verificar exatamente os dados que você vai precisar...

Já os detalhes de um campeonato específico, em algumas situações vem do Javascript, enquanto que em outras do HTML, então os dados são tratados para unificar e simplificar.

Se você quiser puxar os dados puros, está implementado, mas não são todos os campeonatos que vão suportar.

Como usar?

Basta criar um instância do Objeto Futpedia, e chamar o método para obter uma lista de campeonatos, ou algum campeonato específico. Por exemplo, para obter uma lista de todos os campeonatos brasileiros:

Futpedia fp = new Futpedia();
ResultadoListaCampeonatos brs;
try {
  brs = fp.getBrasileiroUnificado();
} catch (Exception ex) {
  //Exceptions: IOException, FileNotFoundException, etc...
}

Para imprimir uma lista dos campeões, do mais recente para o mais antigo:

for(Campeo c : brs.getCampeoes())
  System.out.println(c.getNomePopular());

Para obter a lista de times de um campeonato específico:

CampeonatoSimples cs;
try {
  cs = fp.getDetalhesCampeonato("http://futpedia.globo.com/campeonato/campeonato-brasileiro/2016"); //Você também pode pegar a URL dentro do "ResultadoListaCampeonatos" no objeto "EdicaoDetalhes".
} catch (Exception ex) {
  //Exceptions: IOException, FileNotFoundException, etc...
}
                
System.out.println("Lista de equipes:");
for(String s: cs.getEquipes().keySet())
  System.out.println("Key: " + s + " / " + rc.getEquipe(s).getNomePopular());

Que tipo de dados retorna?

Todas as edições de cada campeonato;
Jogos para cada uma das edições, e também os times que participaram dela;
Resultados de partidas;

Dentre outros dados!

Dependências

Para executar este projeto, você vai precisar de duas Libs:

Gson para obter os dados que vem do JavaScript;
Jsoup para obter os dados diretamente das TAGs HTML;

LICENSE