Nossa, você tem razão! Não sabia da existência desse pacote. E hoje esbarrei nos dados da SABESP e pensei em implementar no reservatoriosBR. Mas esse pacote da Beatriz é perfeito! Vou inclusive citar na descrição do meu! Parabéns @beatrizmilz pelo trabalho!!!
Que tal esse. Apesar de já estar previsto no cronograma de Dados Abertos, minha curiosidade é no sentido de ver o modelo estatístico que irão propor
Da pra organizar dos dados da plataforma de curriculum lattes e criar uma base de pontuação?
Boa noite pessoal! Tudo bem?
Gostaria de deixar a seguinte sugestão de scraping:
https://www.cepea.esalq.usp.br/br/consultas-ao-banco-de-dados-do-site.aspx
Valeu!
Caaaara, não acredito que perdi bem essa live! Infelizmente não consegui assistir
Acabei de assistir agora, e vocês mandaram bem demais!!! (Menos na parte relativa à biologia, mas estão perdoados kkkkk)
Vou tentar adaptar esse código com o que utilizamos e dou um retorno aqui também!
Mas a tibble ficou incrível!
E parabéns pela live, foi muito boa, aprendi muito!
Abraços
O @Ariel_Levy está precisando de um código que baixa as tabelas desse site todos os dias!
https://sistemaswebb3-listados.b3.com.br/indexPage/theorical/IBOV?language=pt-br
Tanto a tabela diária quanto a trimestral.
O problema é que o link de download do CSV muda todo dia.
Eu montei esse código que funciona hoje, mas não sei no futuro
r <- httr::GET(
"https://sistemaswebb3-listados.b3.com.br/indexProxy/indexCall/GetDownloadPortfolioTheorical/eyJpbmRleCI6IklCT1YiLCJsYW5ndWFnZSI6InB0LWJyIn0=",
httr::config(ssl_verifypeer = FALSE)
)
httr::content(r, "text") |>
base64enc::base64decode() |>
readr::read_delim(delim = ";",
escape_double = FALSE,
locale = readr::locale(encoding = "ISO-8859-2",decimal_mark = ","),
trim_ws = TRUE, skip = 1) |>
janitor::clean_names() |>
dplyr::filter(!is.na(acao))
Site sugetido pelo Lucas Adriano, aluno da Curso-R
Boa noite! Chance de ouro de fazer um web scraping legal e muito útil! Site da Agência Nacional de Mineração que fiscaliza as barragens de rejeito.
https://app.anm.gov.br/SIGBM/Publico/GerenciarPublico
A ideia seria conseguir raspar as informações que ficam ao clicar na lupinha, na extrema direita da linha de cada registro relativo a cada barragem!
Um site do governo importante é a seção de Consultas Públicas, que muitas vezes são abertas e passam despercebidas pela população.
Como visto na reportagem da Agência Pública, o governo fez uma consulta pública de 30 de março a 29 de abril deste ano sobre um programa de fracking, extração de gás e óleo atualmente proibida no Brasil, (a ser lançado nesse mês de junho), e tivemos só 5 (??) contribuições.
O site de Consulta Pública em questão é o do Ministério de Minas e Energias, mas talvez se os outros seguirem o mesmo padrão, poderíamos só exportar.
Uma base de dados com título, subtitulo, prazo inicial e final, status e link já seria bem legal!
http://antigo.mme.gov.br/web/guest/servicos/consultas-publicas