renatoelho Goto Github PK

agrupamento-de-arquivos-aclscript

Consolidação de vários arquivos em uma única base.

analisando_base_dados_com_pandas

Analisando uma base de dados com Pandas

analise-classe-economica-clientes-aclscript

Criação de uma base única com dados salarias de clientes de uma financeira, a partir de contracheques em formato de PDF para definição da classe econômica dos clientes.

analise-contas-a-pagar-aging-list-aclscript

Desenvolvimento de uma análise de contas a pagar – Aging list

analise-credito

Este projeto de engenharia de dados, desenvolvido por nós, Renato Coelho e Gyan Lucas, tem como objetivo conceitual e educativo demonstrar como seria uma solução de análise de crédito utilizando ferramentas open source e proprietárias em conjunto para atender a esse propósito.

analise-sentimento-python-chatgpt

Análise de sentimento é uma técnica de processamento de linguagem natural que permite identificar a opinião expressa em um texto. Ela pode ser utilizada para entender a opinião dos clientes sobre um produto ou serviço ou monitorar a reputação de uma marca ou empresa.

apache-nifi-2-0-container

A utilização do Python no Apache NiFi 2 permite que você crie processadores personalizados para manipular, transformar e analisar dados de forma específica. Isso significa que, além dos processadores padrão que vêm com o NiFi, você pode escrever seu próprio código Python.

apache-nifi-container

apache-nifi-enriquecimento-cep

Neste projeto, mergulho no universo do Apache Nifi, explorando como consumir e salvar dados de uma API diretamente em um banco de dados.

apache-nifi-https

Instalando e Configurando o Apache NiFi com Segurança HTTPS

apache-nifi-registry-container

app-ocr

Este projeto utiliza o poder e a facilidade de criação de aplicativos do Streamlit, juntamente com a versatilidade do Tesseract na conversão de imagens em texto (OCR).

comandos-basicos-git

consolidacao-arquivos

Este projeto visa a consolidação de arquivos de múltiplas extensões, como .xlsx, .txt, .csv e .json, cujos layouts são completamente diferentes, em uma única OBT (One Big Table). Utilizando a linguagem Python e bibliotecas como Pandas, DuckDB, Pydantic e Jupyter, o projeto automatiza o processo de leitura, transformação e unificação dos dados.

consumindo-api-enderecos-python

Imagine que você tem uma base de endereços de clientes que esteja incompleta e que queira atualizar, uma das melhores maneiras seria utilizar uma API e o Python para fazer as requisições.

contextdb

Vou mostrar como desenvolver um sistema para otimizar o uso de prompts em aplicações de inteligência artificial, utilizando um banco de dados de contexto. Este projeto utiliza Python e plataformas de gerenciamento de banco de dados.

criacao-ambiente-virtual-python3

Criação de um ambiente virtual no Python 3

criando-bots-telegram

Crie seu próprio bot personalizado e comece a interagir com os usuários no Telegram de maneira única e criativa. Seja para fins de automação, entretenimento ou utilidade, este repositório é o seu ponto de partida para dominar o desenvolvimento de bots com Python para o Telegram.

criando-seu-proprio-github-usando-git

Criando seu próprio ‘GitHub’ usando o Git

criando-usuario-mysql

Criando usuário no MySQL

curso_portfolio

O objetivo do curso é apresentar as ferramentas Git e GitHub e como elas podem ser usadas para criação de um portfólio profissional, que pode ser usado tanto por desenvolvedores backend e frontend, por profissionais de BIG DATA e Analytics com também profissionais das mais variadas áreas de negócio que tenham projetos interessantes e queiram torna-los públicos.

data-lake

o Data Lake é um conceito/arquitetura de armazenamento de dados em vez de uma ferramenta específica. É um repositório centralizado que permite armazenar dados brutos ou semiestruturados de diversas fontes, como bancos de dados, logs, dispositivos IoT e muito mais.

docker-mysql

O processo de automação da inicialização e configuração de bancos de dados MySQL em contêineres Docker é facilitado por meio de uma abordagem que permite a execução automática de scripts SQL durante o processo de inicialização. Esses scripts, que podem conter comandos para criação de esquemas, inserção de dados iniciais e configuração de parâmetros

dockerfile

Um Dockerfile é um arquivo de configuração usado no Docker, uma plataforma de conteinerização que permite empacotar, distribuir e executar aplicativos em contêineres leves e isolados. O Dockerfile é usado para definir como um contêiner deve ser construído.

download-arquivos

Baixando Arquivos com Python e a Biblioteca Requests

duckdb-e-pandas

email-validator

Este projeto visa obter bom nível de confiança de um determinado endereço de e-mail, considerando diversos fatores, incluindo a validade do Top-Level Domain (TLD) que é quando um domínio está listado entre os domínios válidos existentes como .com, .com.br etc...

etapas-projeto-engenharia-dados

Etapas de um projeto de engenharia de dados

exemplo-api-paginacao

fluxo-elt

Trata-se de um processo de ELT (Extração, Carga e Transformação) que integra um sistema legado com um banco de dados relacional (no exemplo, um MySQL) para um banco NoSQL (ElasticSearch) sem alterações significativas nos dados transferidos.