brunomioto/manchete

As principais manchetes dos jornais brasileiros diariamente!

 Hello! 👋 

           

I'm a biologist currently doing my PhD with Ecology/Evolution/Genetics!

I create a lot of Data Visualizations and R packages.

R Packages

• reservatoriosBR
• ggimprensa
• nupelia
• nupgen
• NUPcollection

readme template by Cédric Scherer

manchete's Issues

Operação mais eficiente

Estudar como purrr::safely pode ser usado como wrap na função que faz o screenshot de sorte a permitir que o loop do purrr ignore os erros e rode para todas as instâncias a cada vez que for chamado

Internet archive

Adicionar funcionalidade para salvar a página no internet archive.

Salvar o link da página arquivada em uma tabela

Possibilidades para obter mais conteúdo dos screenshots

• Obter os textos a partir das imagens? (Pelo mero exercício da coisa)
• Criar ALT para imagens no Twitter
• Resumir as notícias do dia (NLP?)

Unificar todos os screenshots em um único script

Por hora o screenshot do G1 só funciona se em um script separado. Talvez a forma vetorizada da função webshot de alguma forma esteja afetando o desempenho da página e impedindo carregamento (ela parece ser pesada). A issue #1 apresenta o erro indicado.

Uma possibilidade é usar "purrr::walk" ou "for" para passar um portal por vez à função com um uma pausa com Sys.sleep entre cada passagem.

Questões

• E se uma página não for salva? Provável que twitter e telegram quebrem.
  Solução: fazer tweet e telegram baseados nos arquivos existentes, e não no nome padrão.
• Adicionando outros jornais, precisaria ser feito 2 tweets para publicar tudo. O código está preparado para isso?

Obter data e hora dos registros e salvar em um arquivo

Assim podemos usar essa info nos tweets e telegram para informar a hora do print, e não a hora que estamos postando (atualmente)

Adicionar outros jornais

E discutir posicionamento nos posts

Hoje

Grupo 1

• O Globo
• Folha
• Estadão
• G1

Grupo 2

• Isto é
• Poder360
• Metrópoles
• Extra

Futuramente

Grupo 3

• UOL notícias (Não tem bem uma "capa")
• R7
• Revista Piauí (Mais focado em reportagens)
• Carta Capital
• Veja
• Terra
• IG

Temática

Tech

• Techtudo

Data Journalism

• Nexo
• O Povo

Retry GH action retrying when `webshot2::webshot()` tries to save .png file

It happens when the functions tries to save the .png file and needs the commit to make it. So it saves, but the Retry action is pulled

Webshot2 error with globo group websites

webshot2:webshot() doesn't work sometimes with g1, oglobo and extra websites. Unknown error for us.

The main error is: Error: Chromote: timed out waiting for event Page.loadEventFired

Remove LGPD banners from webshots