Pular para o conteúdoSkip to content
colimanlabeffort > talent
Guia · Dados na AWSGuide · Data on AWS

O que dá para fazer com os seus dados na AWS.

What you can do with your data on AWS.

Os seus dados já existem: no banco do sistema, em planilhas, em PDFs, em APIs de fornecedores. Este guia mostra o que acontece quando eles passam a morar num só lugar, consultável e seguro, dentro da sua própria conta AWS.

Your data already exists: in your system's database, in spreadsheets, PDFs and vendor APIs. This guide shows what happens when it all lives in one queryable, secure place, inside your own AWS account.

ArquiteturaArchitecture

O caminho dos dadosHow the data flows

Uma arquitetura de referência. Cada projeto usa só as peças que fazem sentido para o seu caso.

A reference architecture. Each project uses only the pieces that make sense for your case.

Em todas as etapasAcross every step Lake Formation · IAM · KMS · Macie · CloudTrail quem acessa o quê, criptografia, dados pessoais encontrados e registro de cada acesso who accesses what, encryption, personal data discovered, and a log of every access
PossibilidadesPossibilities

Oito coisas que você passa a conseguirEight things you can start doing

EXP-01

O S3 como repositório consultávelS3 as a queryable repository

Todos os arquivos e exportações num só lugar, organizados em camadas (bruto, tratado, pronto) e catalogados. Não é um "drive": cada pasta vira uma tabela que dá para consultar em SQL, e o armazenamento custa uma fração de um banco tradicional.

Every file and export in one place, organized in layers (raw, cleaned, ready) and catalogued. It's not a "drive": every folder becomes a table you can query in SQL, and storage costs a fraction of a traditional database.

Exemplo: 10 anos de planilhas de vendas viram uma tabela única.Example: 10 years of sales spreadsheets become a single table.

S3Glue CatalogParquet
EXP-02

Consultas consolidadas com o AthenaConsolidated queries with Athena

Um SQL só que cruza o data lake com os bancos de dados do sistema, sem copiar tudo antes. Você paga pelo volume de dados lido em cada consulta, não por servidor ligado.

One SQL query that joins the data lake with your system's databases, without copying everything first. You pay for the data each query reads, not for servers left running.

Exemplo: pedidos do banco do sistema + metas da planilha do comercial, num relatório só.Example: orders from the system database + targets from the sales spreadsheet, in one report.

AthenaFederated QuerySQL
EXP-03

Banco replicado sem pesar a produçãoReplicated databases, no load on production

O banco do seu sistema é copiado continuamente para a AWS, incluindo cada alteração. A análise roda na cópia, e o sistema principal não fica lento por causa dos relatórios.

Your system's database is continuously copied to AWS, including every change. Analysis runs on the copy, so reports never slow down the main system.

Exemplo: o painel atualiza a cada poucos minutos sem tocar no ERP.Example: the dashboard refreshes every few minutes without touching the ERP.

DMSCDCRDS · Aurora
EXP-04

RAG sobre os seus documentosRAG over your documents

Um assistente que responde com base nos seus contratos, manuais, normas e relatórios, e mostra de qual documento tirou cada resposta. Os documentos ficam no seu S3.

An assistant that answers from your contracts, manuals, policies and reports, and shows which document each answer came from. The documents stay in your S3.

Exemplo: "Qual é o prazo de rescisão no contrato com o fornecedor X?"Example: "What's the termination notice in our contract with vendor X?"

BedrockKnowledge Basesbusca vetorialvector search
EXP-05

Pergunte ao seu banco de dadosAsk your database

RAG também sobre dados estruturados: a pergunta em português vira SQL sobre as tabelas do seu sistema, a consulta roda no Athena ou no Redshift e a resposta volta explicada, junto com o SQL usado, para quem quiser conferir.

RAG over structured data too: a plain-language question becomes SQL over your system's tables, runs on Athena or Redshift, and the answer comes back explained, along with the SQL, for anyone who wants to check it.

Exemplo: "Quais clientes compraram menos neste trimestre do que no anterior?"Example: "Which customers bought less this quarter than last?"

Bedrocktext-to-SQLAthena
EXP-06

Modelos preditivos com o SageMakerPredictive models with SageMaker

Modelos treinados com o seu histórico, direto sobre o data lake: previsão de demanda, risco de cancelamento, classificação de documentos e detecção de anomalias. Podem rodar em lote ou responder em tempo real para o seu sistema.

Models trained on your own history, straight from the data lake: demand forecasting, churn risk, document classification, anomaly detection. Run them in batch or as real-time endpoints for your system.

Exemplo: lista semanal dos clientes com maior risco de sair.Example: a weekly list of customers most likely to churn.

SageMakerscikit-learnendpoints
EXP-07

Painéis que se atualizam sozinhosDashboards that refresh themselves

Indicadores ligados direto ao data lake, sem ninguém exportar planilha toda segunda-feira. Cada pessoa vê só o que tem permissão para ver.

KPIs wired straight to the data lake, with no one exporting spreadsheets every Monday. Each person sees only what they're allowed to see.

Exemplo: o painel da diretoria abre pronto às 8h.Example: the leadership dashboard is ready at 8 a.m.

QuickSightAthena
EXP-08

Privacidade e LGPD desde o inícioPrivacy by design (LGPD/GDPR)

Descoberta automática de dados pessoais nos arquivos, permissões por tabela e por coluna, criptografia e registro de cada acesso. É o que você precisa mostrar numa auditoria.

Automatic discovery of personal data in files, table- and column-level permissions, encryption, and a log of every access. Exactly what you need to show in an audit.

Exemplo: o CPF fica visível só para o financeiro, e o resto da empresa vê mascarado.Example: tax IDs visible only to finance; everyone else sees them masked.

MacieLake FormationKMSCloudTrail
Por onde começarWhere to start

Você não precisa fazer tudo de uma vezYou don't need all of it at once

O primeiro passo é um diagnóstico curto: mapeio as suas fontes, escolho o caso de uso com mais retorno e entrego uma arquitetura com estimativa de custo mensal. Depois, cada peça entra quando fizer sentido.

The first step is a short assessment: I map your sources, pick the use case with the best return, and deliver an architecture with a monthly cost estimate. After that, each piece comes in when it makes sense.

  1. DiagnósticoAssessment

    Fontes, problemas, riscos de LGPD e o caso de uso prioritário.

    Sources, issues, privacy risks and the priority use case.

  2. FundaçãoFoundation

    S3, catálogo, permissões e as primeiras cargas automáticas.

    S3, catalog, permissions and the first automated loads.

  3. Primeiro resultadoFirst result

    Um painel, um RAG ou uma consulta consolidada em produção.

    A dashboard, a RAG assistant or a consolidated query in production.

  4. EvoluçãoEvolution

    Novos casos de uso sobre a mesma base, com custo acompanhado.

    New use cases on the same foundation, with cost tracked.

ContatoContact

Qual desses você queria ter amanhã?Which of these would you want tomorrow?

Me conte de onde vêm os seus dados e qual pergunta você ainda não consegue responder. Eu digo por onde começaria.

Tell me where your data comes from and which question you still can't answer. I'll tell you where I'd start.