[Raspador Legislativo] Corrigir spider do senado

[ogecece]

[Raspador Legislativo] Corrigir spider do senado

[arielbello]

Tem como corrigir na própria spider e fazer uma request pra cada ano, a partir do START_DATE. Já estou implementando.

[arielbello]

cuducos/raspadorlegislativo#9

[arielbello]

Aparentemente o parametro de data mudou o nome, verificar o funcionamento e fazer uma PR para corrigi-lo, caso necessário.

[arielbello]

A API continua funcionando com o parâmetro dataInicioApresentação, porém a spider do senado só carrega dados de um ano (envvar START_DATE).

[ogecece]

Precisaria executar uma vez pra cada ano e consolidar num arquivo só então? Ou teria uma alternativa?

[arielbello]

Essa PR corrige o período de extração: cuducos/raspadorlegislativo#10 , porém o endpoint que está sendo usado nessa spider (materia/pesquisa) não está mais documentado. Existe outro endpoint que está documentado e que aparentemente tem as mesmas informações (materia/tramitando), sendo assim, ainda pretendo fazer mais uma PR que modifique a spider para extrair os dados desse endpoint.

[arielbello]

Finalizando as alterações necessárias com essa PR que atualiza a spider do senado para usar o novo endpoint que está documentado.