Coletar dados em quantidade e qualidade é fundamental para qualquer pesquisa científica. No entanto, e se eles já estiverem disponíveis na internet, apenas esperando que você encontre os instrumentos certos para “raspá-los” e colocá-los na sua tigela de análise? O post de hoje é sobre essa forma de coleta de dados, chamada de web scraping […]

Imagine uma biblioteca gigante sem catálogo. Você tem milhares de artigos e precisa descobrir quais grandes temas aparecem e como eles evoluem ao longo do tempo. Nesse cenário, a modelagem de tópicos (topic modeling) funciona como um “bibliotecário automático”: ela lê os textos por você — numa velocidade que seria impossível manualmente — e os […]

O termo embedding vem do inglês to embed, que significa “inserir”, “embutir” ou “encaixar algo dentro de outra coisa”. Na área de Processamento de Linguagem Natural (PLN), embedding descreve justamente o processo de inserir o significado de palavras, frases ou textos inteiros dentro de um espaço numérico multidimensional. Cada unidade textual — uma palavra, uma […]

Neste post, falaremos sobre análise de sentimentos via Inteligência Artificial. Primeiramente, explicaremos sua relevância clínica e conceitual. Em seguida, detalharemos os principais componentes técnicos que tornam essa análise possível. Nós então apresentaremos exemplos práticos em diferentes contextos, da análise de mercado à política. Por fim, discutiremos evidências científicas, limitações e desafios que ainda cercam o […]

A análise de textos com IA (Inteligência Artificial) está transformando a forma como conduzimos pesquisas científicas. Durante muitos anos, meu trabalho com ciência de dados foi dominado por números, planilhas, escalas, coeficientes e curvas. Vez por outra, contudo, me perguntavam como seria possível analisar respostas textuais longas a perguntas abertas. E, claro, analisar documentos e […]