Importação de extrato bancário e controle de despesas e receitas
comentada em 12/09/2019 20:51

Trade de extrato bancário

Cara.. controla por ordem de grandeza.
Isso é doidera... ficar somando gastos e receitas.. pára tudo cara.. não é por aí não. 

Pra facilitar a vida passa tudo no cartão de crédito, dá um conferida , veja se está dentro da normalidade os gastos e vai ser feliz.

@pjc tem poucas coisas piores para vc fazer na vida do q isso
fazer isso eh a certeza de nunca enriquecer
ja reparou q todos analistas indicam isso e toda sardinhada faz
acha mesmo q eh o melhor caminho?

esquece isso e vai estudar cara

#PAS > FAQ > Como controlar os gastos? Excel? APP?

#PAS > FAQ > Compras, contas e Cartão de Crédito

Iniciantes

Livraria
aba livros gratis
Pequeno Manual
Filosofia
Sonho mais ou menos grande

estuda isso ai e esquece esta sardinhice

Dá pra automatizar tudo isso aí mas não vou ensinar porque é sardinhice

o primeiro app q eu fiz quando começaram os smartphones
foi um cadastro de despesas, achei  uma ideia genial
abandonei 2 meses depois

hoje com CC vc além de centralizar
o app dele já te dá tudo dividido por segmento/gasto

Pessoal, não é pra contar centavos e já pago o possível em cartão de crédito.

Mas infelizmente preciso fazer alguns pagamentos necessariamente em espécie, relativas a pessoal meu e de parente. Não tenho como fugir disso.

Já controlo por ordem de grandeza, mas somo manualmente. Era isso que queria evitar.

No Menu dados a segunda opção :

Se for Banco do Brasil, ele mesmo já tem um gerenciador financeiro no App dele. 

@janesrcosta fazer continha já é ruim... fazer continha no app de banco e ainda deixar o gerente ver e depois de um tempo ficar lhe ligando "estou vendo que vc precisa de um consorcio pois esta gastando muito em tal coisa?" nunca!

@Ricardoch2 Já fiz essa importação. O problema é somatório de valores negativos e positivos. A conta não bate. É como se ele não lesse todos os valores como negativos.

Outro ponto, este de menor importância, é que o Excel multiplica os números por 100 quando formato as células para Real.

@pjc Na hora de importar o .csv vc pode configurar cada campo a ser importado eh um primeiro caminho a ser tentado.

No caso teria que tentar outros formatos diferente de real.

Outra tentativa é inves de importar, abrir o .csv no excel e depois formatar os campos (colunas)

O problema acima é que  Comma Separated Values (CSV) quer dizer separado por comma ou seja virgula Mas no Brasil é separado por ; (ponto e virgula) pq o separador decimal tb é virgula. Ou seja, receita de bolo para dar pane. Mas no final vai funcionar.

@ThiagoDV Eu queria fazer +- isso para conferir valores de recebimento de cartão de crédito na empresa.
Eu tenho um código python que carrega o txt do extrato e faz o agrupamento de acordo com a "descrição" da linha, usando pandas. fiz agrupamento por mes e dia.
acontece que a tela que exibe o resultado é mt limitada, estou usando o pySimpleGui.

Teria alguma outa opçaõ bem simples e prática? Seria melhor enviar para o excel o resultado?

O arquivo do extrato é +- isso
"Conta";"Data_Mov";"Nr_Doc";"Historico";"Valor";"Deb_Cred"
"0101001000001111";"20190830";"465484";"CIEL MS CD";"264.49";"C"
"0101001000001111";"20190830";"465485";"CIEL ED CD";"135.79";"C"
"0101001000001111";"20190830";"301216";"CRED TEV";"19.59";"C"
"0101001000001111";"20190830";"273027";"DEB TARIFA";"0.66";"D"
"0101001000001111";"20190902";"000341";"CRED TED";"2949.25";"C"

Eu preciso agrupar todos esse "CIEL", cada descriçao geralmente é uma bandeira.

Vou inserir meu código abaixo
Se puder dar uma luz pra ajudar, grande abraço

import PySimpleGUI as sg
import pandas as pd
import sys
import datetime

def selecionar_dia(arquivo):
    
    data = pd.read_csv(arquivo,encoding = "utf-8",sep=";")
  
    del data['Conta']
    del data['Nr_Doc']
    del data['Deb_Cred']
    
    data=data[data['Historico'].str.contains("CIEL|CR VD",na = False)]
    data['Data_Mov'] = pd.to_datetime(data['Data_Mov'],format='%Y%m%d')
   
    data = data.groupby(data['Data_Mov']).sum()
    data = data.reset_index()
    data['Data_Mov'] = data['Data_Mov'].dt.strftime('%d/%m/%Y')
    data=data.append(data.sum(numeric_only=True).rename('Total'))
    data = data.fillna('-----')
    return data

def selecionar_mes(arquivo):
    
    data = pd.read_csv(arquivo,encoding = "utf-8",sep=";")
   
    del data['Conta']
    del data['Nr_Doc']
    del data['Deb_Cred']
    
    data=data[data['Historico'].str.contains("CIEL|CR VD",na = False)]
    data['Data_Mov'] = pd.to_datetime(data['Data_Mov'],format='%Y%m%d')
    data = data.groupby(pd.Grouper(key='Data_Mov', freq='1M')).sum()
    data = data.reset_index()
    data['Data_Mov'] = data['Data_Mov'].dt.strftime('%b')
    
    return data
    

layout = [[sg.Text('Cielo', size=(30, 1), font=("Helvetica", 25), text_color='blue')],      

   [sg.Radio('Mês     ', "RADIO1", default=True), sg.Radio('Dia', "RADIO1")],      
   [sg.Text('_'  * 100, size=(70, 1))],      
   [sg.Text('Selecionar Arquivo', size=(35, 1))],      
   [sg.Text('Source Folder', size=(15, 1), auto_size_text=False, justification='right'), sg.InputText('Escolha...'),sg.FileBrowse()],
   [sg.Submit(), sg.Cancel()]]


event, values  = sg.Window('Recebimento Cielo', auto_size_text=True, default_element_size=(40, 1)).Layout(layout).Read()
   
mes,dia, arquivo = values

if event == 'Submit':
    if mes is True:
        sg.Popup('Arquivo',arquivo,selecionar_mes(arquivo))
    if mes is False:
        sg.Popup('Arquivo',arquivo,selecionar_dia(arquivo))?

@ProfessorCarlosBruno

Hahaha! Verdade, não tinha pensado nisso! Gerente vai encher o saco. Já me procuraram umas 2x querendo que eu investisse o dinheiro que está parado na poupança (RE). Da últiam vez, queriam que eu investisse num CDB que rendia 3% ao ano, kkkk

@deniro Elegante seu código !!!

uso esse código a 1 ano e tem resolvido o problema. queria melhorar a interface, talvez web, mas desanimei quando fui ver o trabalho que dava.
Estou pensando em migrar pra alguma coisa mais dinamica que funcione online, que facilite quem recebe por cartão fazer conciliação bancária.
Se alguém ai animar podemos colocar na área la de jobs do site

@deniro vou dar uma olhada quando pegar o computador. Ainda não deu pra olhar mas vamo melhorar isso aí. Já vi uns pontos de melhoria no código batendo o olho mas quero rodar pra entender melhor o problema. 

@deniro tive um tempinho agora aqui e dei uma olhada no teu código. Tive alguns problemas pra botar pra rodar pois tava dando uns erros. E também perdão se eu falar alguma besteira, mas nunca usei PySimpleGUI e posso falar alguma mesbla por não conhecer a lib. 

1. Teu código deu erro de cara aqui na linha 52, em 

mes,dia, arquivo = values

Vi que values é um dicionário com 4 chaves, e foi feito desempacotamento atribuindo a 3 variáveis os 4 valores do dicionário. O código deu o primeiro erro aqui. Mas vi que a terceira e a quarta chave do dicionário são a mesma coisa. Fiz gambiarra aqui e continue analisando o código pra ver o resultado final.

2. Dá pra melhorar as funções de selecionar mês e dia mas isso pode ficar pra depois se for de interesse. Por exemplo, as linhas 

del data['Conta']
del data['Nr_Doc']
del data['Deb_Cred']

podem ser substituídas por:

data = data[['Data_Mov', 'Historico', 'Valor']]

O que economiza linhas. Mas é mais estética, o resultado é o mesmo.
3. Em:

if event == 'Submit':
    if mes is True:
        sg.Popup('Arquivo',arquivo,selecionar_mes(arquivo))
    if mes is False:
        sg.Popup('Arquivo',arquivo,selecionar_dia(arquivo))

tive alguns problemas. Primeiro, o interpretador tava reconhecendo "arquivo" como a chave do dicionário values, e o path está no valor da chave e não na chave, então tive que substituir por algo assim:

if event == 'Submit':
    if mes:
        sg.Popup('Arquivo',values[arquivo],selecionar_mes(values[arquivo]))
    if dia:
        sg.Popup('Arquivo',values[arquivo],selecionar_dia(values[arquivo]))

Mudei também um pouco as condicionais. 

Fazendo isso eu consegui botar o código pra rodar. Usei seu exemplo de texto acima e salvei em csv e usei ele pra fazer a leitura do código. Aí fiquei com umas dúvidas.

Seu problema é o layout que tá feio? Quer melhorar o layout?

O código tá todo feito pra abrir dados da Cielo na coluna histórico. Existe um código pra cada opção que não seja Cielo e dependendo disso você roda códigos diferentes? Isso não tá muito claro pra mim. Ou você só precisa saber quando os dados são da Cielo e você só usa esse código? 

Explica mais qual teu problema pra gente tentar ver uma solução legal, pois não ficou muito claro pra mim o problema em si.

@ThiagoDV cara muito obrigado. 

Eu usei esse pysimplegui porque foi o jeito mais fácil que eu achei para criar uma janelinha para o usuário final.  Na verdade eu queria ter uma interface web para mostrar esses dados, tem como?

ou tem alguma outra opção para substituir esse pysimplegui, que seja mais flexivel? eu queria colocar um menu com opções, de agrupar por dia, mes, bandeira... e mostrar a tabela direto na mesma janela 

enfim, eu queria pegar os dados do csv e mostrar de maneira amigável para o usuário final

aqui tem um exemplos de dados mais completo
"Conta";"Data_Mov";"Nr_Doc";"Historico";"Valor";"Deb_Cred" "0101001000001111";" - Pastebin.com

talvez uma opção seria devolver um json e fazer toda interface em html

Novamente, muito obrigado por ter tirado um tempo para dar uma olhada

@deniro você já deu alguma olhada em microframeworks web como Flask? Dá pra mostrar uma interface web interessante pro usuário final usando Flask. E como você quer algo simples, não acho que teria muito trabalho com a parte de web não. 

Dá pra fazer algo como você quer com libs de GUI mas eu acho que daria mais trabalho. Uma interface web dá bem menos trabalho para mostrar algo como você quer, basta um conhecimento básico de web. Imagino uma API por trás da interface que faz esse processamento, devolve os dados (pode ser em JSON, como dito) pra interface e você monta a tabela de acordo com o resultado. 

Vou tentar postar mais tópicos sobre Flask por aqui pra ver se te dá uma ajuda. A intenção com meus tópicos é mostrar uma base de web para começar a falar um pouco mais de frameworks web. 

Obrigado pela ajuda. Quando eu tiver uma solução melhor eu volto a postar