Text Mining no Release UGPA3

Tecnologia
scotta  
em 13/11/19 11:59
ver comentários do moderador

Comentários

Último comentário 1º comentário do autor Só moderadores Só os meus Só quem eu sigo Ordenar por gostei
ThiagoDV  7º
em 13/11/2019 12:12
Nível no Race: Taquipariu 
Muito bom, hein. Acho análise de sentimento uma coisa fantástica. Esse script tá em algum repositório? Posta aí se tiver e se for aberto, fiquei curioso como fazer pra chegar aí. 

Eu me interesso, por mim pode postar à vontade. 
Text Mining no Release UGPA3 - #1 de 18
SpaceMan 
em 13/11/2019 12:15
muito maneiro
Text Mining no Release UGPA3 - #2 de 18
boxveil 
em 13/11/2019 12:16
Bem legal isso ai. Estou dando uma olhada em machine learning tb. Você montou isso com logistic regression com multiclass?
Text Mining no Release UGPA3 - #3 de 18
gustavo 
em 13/11/2019 12:17
dá para criar um índice de positividade do tópico ou resposta

mas coloca mais detalhes de quais são os critérios ou é uma lib q vc passa o texto e retorna um valor ?
Text Mining no Release UGPA3 - #4 de 18
developer  180º
em 13/11/2019 12:18
Me lembra aqueles momentos: Tenho 2 notícias pra você, uma boa e uma ruim, qual você quer primeiro?

Parabéns pela iniciativa! Achei muito interessante! Agora, uma sugestão para avançar nas suas ideias e detalhar mais, sugiro dividir a análise por temas, por exemplo, Lucro.

Pega todos os parágrafos contendo a palavra lucro e analisa se o sentimento foi positivo. Dentro disso, temos alguns cenários possíveis sobre um sentimento POSITIVO a respeito do lucro da empresa naquele balanço. Por exemplo:

O sentimento é positivo se o lucro aumentou? É positivo se estabilizou? Ou mesmo se o lucro diminuiu, mas a empresa analisou que isso é devido ao cenário atual, o sentimento deveria ser positivo, certo?

E as empresas que estão indo realmente mal (pensando no lucro), elas tentam esconder isso com as palavras nos seus relatórios?

Muitos cenários possíveis, dá até um TCC, mestrado, etc... Manda braza aí e poste as novidades! 
Text Mining no Release UGPA3 - #5 de 18
ViniciusCaminha 
em 13/11/2019 12:18
Nível no Race: Tá começando a andar
Posta os outros gráficos
Text Mining no Release UGPA3 - #6 de 18
Bastter 
em 13/11/2019 12:24
Nível no Race: Turbo Mix 
embaixo nao deveria ser os trimestres?
Text Mining no Release UGPA3 - #7 de 18
bergamota 
em 13/11/2019 12:25
@Bastter não pois é somente uma release, o index seria os paragrafos por exemplo (eu acho)
Text Mining no Release UGPA3 - #8 de 18
Bastter 
em 13/11/2019 13:01
Nível no Race: Turbo Mix 
ah eh do release
achei q era do mural
Text Mining no Release UGPA3 - #9 de 18
scotta 
em 13/11/2019 13:02
Obrigado a todos pelas respostas.

@ThiagoDV - Vou colocar no Git e coloco o endereço. É aberto para uso, sem problemas. A intenção é ir melhorando (com colaboração, se possível) e deixar como mais uma ferramenta para o pessoal daqui.

@boxveil - É pura mineração de texto com a linguagem R e o pacote tidytext (entre outros).

@gustavo - É um script onde vc passa o pdf e ele faz analise e geração de graficos com frequencias e tem 3 pacotes de dicionários de sentimentos que voce pode acrescentar para gerar, por exemplo, o grafico que coloquei aqui.

@developer - Pretendo tornar multi-pdf. Porque dai dá para ver na mesma empresa, ou nas dos segmentos e através dos trimestres como estão "os sentimentos" do release.

@Bastter - o index é o que @leandroberg falou podem são os parágrafos ou linhas. Por isso que comentei conforme o documento avança o tom fica pesado.

Vou avançar com as análises e coloco mais informações aqui.

Novamente, obrigado a todos pelos comentários.
Text Mining no Release UGPA3 - #10 de 18
msperlin  110º
em 13/11/2019 13:22
Ficou bacana. Parabéns! ggplot2 é mágico.
Text Mining no Release UGPA3 - #11 de 18
Farelliinho  180º
em 13/11/2019 13:28
Muito massa!

Se possível coloca o código no GitHub para aprendermos e contribuir.
Text Mining no Release UGPA3 - #12 de 18
gustavo 
em 13/11/2019 14:11
entendi @scotta
a mágica tá nesse "dicionários de sentimentos"
se puder personalizar então deve dar pra fazer muita coisa legal
Text Mining no Release UGPA3 - #13 de 18
Mark.Valley  180º
em 13/11/2019 15:15
Nível no Race: Tá ficando maluco igual o Bastter
Muito legal!

Seria interessante ver algo aplicado nos murais das empresas correlacionando com a cotação.
Text Mining no Release UGPA3 - #14 de 18
laotzu  35º
em 13/11/2019 18:04
Primeiro vc faz a MÉDIA; depois vc passa a MERD&$#&
Text Mining no Release UGPA3 - #15 de 18
Barao_Bigode_Style  180º
em 13/11/2019 19:25
Nível no Race: Tá ficando maluco igual o Bastter
Poderia aplicar isto para sugerir tópicos interessantes para os usuários com base no que eles dão like aqui no site

Como tem bastante coisa sendo postada e tem gente que não acessa sempre, pode agregar valor

Um classificador bayesiano com bag of words pode dar conta disso
Text Mining no Release UGPA3 - #16 de 18
Removida 
em 18/03/2020 20:36
Nível no Race: Intermediário
Vocês são fera, por onde começo a aprender a fazer umas brincadeiras dessas?
Text Mining no Release UGPA3 - #17 de 18
ThiagoDV  7º
em 18/03/2020 20:54
Nível no Race: Taquipariu 
@Pmtp o ideal é começar pelo começo, aprendendo lógica e uma linguagem que seja usada para esse tipo de brincadeira como Python ou R. 

Sem a base fica muito mais difícil chegar a esse nível de minerar texto. 

O script do tópico foi feito em R mas Python também é usada para essas brincadeiras, então uma opção é começar por aqui


Tecnologia > FAQ > Python - Tópicos ordenados para estudo
Text Mining no Release UGPA3 - #18 de 18

Notificar 1º comentário 1º comentário do autor Só moderadores Só os meus Só quem eu sigo Ordenar por gostei

Você está em Tecnologia > Text Mining no Release UGPA3
por scotta em 13/11/2019 11:59

15 usuários comentaram este tópico.
Clique para ir para o primeiro comentário do usuário.