Módulo 9 - Coleta de dados com Python
- 30/10 - Aula
2. Introdução
Nesta aula, faremos um primeiro workshop de extração de dados, para aprender as estruturas das páginas, o uso de comandos de extração e de gravação de dados. Você aprenderá, passo a passo, a construir o extrator disponível no seguinte Repositório Github.
Na aula seguinte trataremos de estratégias para organizar esses dados em uma tabela, gerando assim um banco de dados relacional.
3. Leituras
3.1 Leitura obrigatória
1: Costa, Alexandre. Data Mining Judicial I: Introdução. Dsd.arcos, 2020.
2: Costa, Alexandre. Data Mining Judicial II : Extrator Básico. Dsd.arcos, 2020.
3.2 Leitura Complementar
1: Costa, Alexandre. Data Mining Judicial III - Extrator Intermediário. Dsd.arcos, 2020.
4. Atividades
4.1 Atividade em classe: Workshop de Extração dos dados processuais
O texto desta semana gera um extrator para os dados para as páginas do controle concentrado. A experiência de utilizar uma aula para esclarecer o texto que já foi lido e as habilidades que já foram desenvolvidas se mostrou pouco efetivo. Em vez disso, partiremos das habilidades construídas por vocês para extrair um outro conjunto de dados: os dados constantes da pesquisa processual, na aba Processos do menu de pesquisa contido na página principal.
Esta é uma atividade que seguirá as estruturas contidas no texto complementar.
4.2 Atividade Obrigatória: Definição do trabalho final
Neste momento do curso, é preciso definir se você fará o trabalho final, que é um dos requisitos para uma menção SS.
Como indicado nas informações gerais sobre o curso, o trabalho final pode ser:
- Um projeto de pesquisa de dados em direito.
- Um programa capaz de extrair dados e gerar um banco, acerca de dados que não foram ainda colhidos e organizados.
- Um banco de dados desenvolvido, construído ao longo da disciplina, que possa ser disponibilizado de forma pública.
- Outro trabalho técnico ou acadêmico, desde que seja aprovado pelo(s) docente(s). Nesse caso, o estudante ou grupo deve apresentar uma proposta de trabalho alternativo.
A definição do tipo do trabalho final deverá ser feita pelo seguinte Formulário.