You are on page 1of 36

[GUIA COMPLETO]

Humanização
dos dados

ou vai ou voa

3 passos essenciais para acelerar a cultura data-driven


na sua empresa e atingir mais resultados
PÓS-GRADUAÇÃO EM
BUSINESS INTELLIGENCE & ANALYTICS

05 pipeline
de dados

18 discovery
de produtos

28 DEILAS

33 #desafioconquer

35 use os dados
a seu favor

Clique, selecione ou escreva! Este material possui recursos


interativos para enriquecer sua experiência.
70%
dos negócios no mundo estão
coletando dados mais rapidamente
do que conseguem utilizá-los.

64%
têm um volume tão intenso que não
conseguem atender às expectativas de
segurança e compliance no manejo.

Fonte: Data Paradox, Dell Technologies, 2020.

O paradoxo dos dados:


metade das empresas brasileiras
não sabem o que fazer com as
informações que coletam.
Fonte: Gazeta do Povo, 2021.

61% constantemente lidam com equipes de dados sobrecarregadas.


Apenas 21% das empresas sabem tratar os dados adequadamente.

Fonte: Data Paradox, Dell Technologies, 2020.

3
coonquer
dados bem tr|
Resultado

dados bem tratados são bem direcionados:


a quem você está informando?

4
interativo!

pipeline
de dados

5
dados existem para
pessoas
Por isso, é preciso saber fazer as perguntas certas:

Quem vai usar os dados?

O que essa pessoa precisa saber?

Qual tipo de decisão os dados vão informar?

Qual a forma mais fácil, clara e acessível de disponibilizar


essa informação?

dados são criados


por pessoas
A tecnologia informa os dados, mas são os humanos que
os transformam em inteligência de negócio.

Essas pessoas usam insights para identificar oportunidades,


guiar o desenho da estratégia de negócio e atingir objetivos.

6
Usar dados de maneira estratégica vai muito além da coleta,
do tratamento e da visualização.

Para uma gestão inteligente, é importante colocar os dados no


centro da tomada de decisão e do planejamento estratégico.

Dados existem para que insights sejam gerados e ações possam


ser planejadas e tomadas com embasamento, aumentando,
assim, as chances de sucesso da organização.

Seus dados só se transformam em


produtos quando atravessam a
esteira de desenvolvimento.

7
pipeline de dados
ESTEIRA DE DESENVOLVIMENTO

Sistemas legados, Consolidar os dados den-


bases de dados, Excel tro de um ambiente único
com input manual via streaming ou batch

fontes integração
de dados dos dados

Modelar os Evoluir os dados


dados e dis- modelagem e para que eles
ponibilizá-los em evolução sejam utilizáveis.
visualização dos dados
ferramentas de dos dados O famoso ETL e
visualização Framework TRACE

sustentação
produto do produto
de dados de dados

Entregar o produto de Garantir a satisfação,


dados (conforme as es- o uso e a qualidade
pecificações do cliente) do produto

8
processamento

trata- limpeza
mento

evolução dos dados


ESTÁGIOS DOS DADOS: FRAMEWORK TRACE

T TRANSIENTE

RA RAW

C CLEAN

E EVALUATED

9
12
data preparation
FERRAMENTAS DE INTEGRAÇÃO E EVOLUÇÃO DOS DADOS

Capacidade de processamento de dados


em larga escala;

Estrutura 100% de código aberto;

Executada em hardware comum em um


data center existente;

Pode ser executada em uma infraestrutura


de nuvem.

Ferramenta de código aberto;

Pode lidar com dados em lote e em tempo real;

Flexível para trabalhar com o HDFS e com


outros armazenamentos de dados.

Estrutura distribuída em tempo real para


o processamento confiável do fluxo de
dados ilimitado;

Suporta qualquer linguagem de programação;

Tem recursos exclusivos, como: escalabilidade


maciça, tolerância ao erro, suporta topologia de
gráfico acrílico direto (DAG) e protocolos como
JSON, e muito mais.

10
Banco de dados de tipo distribuído;

Processa conjuntos de dados estruturados;

Conta com recursos exclusivos, como:


disponibilidade contínua como fonte de
dados, desempenho escalável linear, pontos
de disponibilidade na nuvem e outros;

Pode lidar com vários usuários simultâneos


nos data centers.

Segue um modelo de cliente/servidor, em


que o servidor pode estar localizado no local
ou em uma infraestrutura de nuvem;

Escrito em Java;

Conta com GUI para projetar e executar


fluxos de trabalho.

Banco de dados NoSQL de código aberto;

Compatível com várias plataformas;

Ideal para quem precisa de dados rápidos e em


tempo real, para tomar decisões instantâneas.

Amplamente usada no banco de dados


de gráficos;

Mantém um padrão de valor-chave no


armazenamento de dados.

11
Serve para análise estatística de dados;

Possui sua própria biblioteca pública CRAN


(Comprehensive R Archive Network), com
mais de 9000 módulos e algoritmos para
análise estatística de dados.

Usada para algoritmos de streaming


distribuídos para mineração de Big Data e
outras tarefas de aprendizado de máquina.

Ajuda no processamento de dados paralelo;

Executa em hardware de commodity;

Oferece suporte ao gerenciamento completo


do fluxo de trabalho de Big Data.

modelagem e
visualização dos dados
FERRAMENTAS DE MAIS UTILIZADAS

Criação de tabelas, gráficos e cerca de 20


outras visualizações;

Possibilidade de importar e exportar dados


rapidamente e em muitos tipos de arquivos.

12
Visualização de dados individualmente ou
dentro de relatórios;

Visualização em tempo real.

Ferramenta baseada na web que permite


criar visualizações simples a partir de
conjuntos de dados;

Pode ser usada para analisar dados de


qualquer banco de dados SQL.

Permite uma análise de dados de múltiplas


fontes ao mesmo tempo.

Colaboração multiusuário: é possível que


outras pessoas visualizem e editem;

Cria relatórios automáticos.

Ideal para a criação de gráficos, tabelas


e mapas para sites;

Torna as visualizações amigáveis para


pessoas com daltonismo.

13
Limpa e classifica dados automaticamente;

Conta com gráficos interativos.

Criação de visualizações para embutir


em páginas web;

Tem painel de dados em tempo real;

Trabalha com estruturas JavaScript, como


Angular, Ember, Reagir e jQuery.

Ideal para grandes conjuntos de dados;

Análise em tempo real;

Permite analisar dados de mais de 1.000 fontes.

Permite integrações com Google Ads,


Google Search Console e WordPress;

Tem painel de controle interativo.

Cria desde gráficos de linhas simples até


gráficos geoespaciais altamente detalhados;

Pode se conectar a qualquer fonte de dados


baseada em SQL por meio do SQLAlchemy.

14
interativo!

Transforma dados em relatórios e painéis infor-


mativos, fáceis de ler e de compartilhar;

Cria gráficos de linhas, barras e pizza,


mapas geográficos, gráficos de área
e bolhas, tabelas de dados paginadas,
tabelas dinâmicas e outros;

Relatórios interativos;

Permite a inclusão de links e imagens clicáveis.

Painéis em tempo real;

Insights integrados;

Pode se conectar com Redshift, Snowflake,


BigQuery e mais de 50 SQL compatíveis.

Incentive a cultura de dados!


Se possível, tenha uma equipe dedicada a disseminar a
cultura de dados por toda a esteira de dados.

PIPELINE DE DADOS!

15
interativo!

Dê uma nota de 1 a 10 para a maturidade da sua empresa na


implementação da esteira de dados.

1 2 3 4 5 6 7 8 9 10

Sua empresa realiza a integração de dados (reunir todos os dados em


um único local)? Se sim, de forma manual ou automatizada?

Sua empresa realiza a evolução de dados (limpeza e criação de indicadores)?

Sua empresa trabalha com as ferramentas de visualização de dados?


Se sim, de forma pontual ou frequente?

16
mas...

a esteira de dados
só terá sucesso
se você, antes do
desenvolvimento,
dedicar tempo para
descobrir qual produto
é o mais assertivo para
responder às perguntas
do seu negócio.

17
interativo!

discovery
de produtos

18
E se pensássemos o resultado da manipulação de dados, as análises e
as visualizações como produtos de dados?

delivery e discovery
de produtos
oportunidade processo

análise
design
usuários
discovery delivery experiência
backlog
tecnologia
pesquisa

priorização testes

Antes de começar o delivery, precisamos investir no discovery


do produto de dados... mas como?

discovery de produtos
01. Definindo personas;

02. Mapeando a jornada do usuário;

19
03. Desenvolvendo um protótipo do produto;

04. Checando a viabilidade técnica de desenvolvimento do produto.

01. definindo personas


pessoa > persona

Como é sua abordagem com Quais as características mais


relação a “fatos e dados”? marcantes a respeito do seu
“estilo de trabalho”?

O que a incentiva? idade? Qual palavra você


onde mora? usaria para descrever
onde trabalha? essa pessoa?
qual é o seu cargo?
fale sobre a
educação
dessa persona.
O que a desincentiva? O que ela valoriza
em uma análise?

Quais são as dores Como o meu trabalho pode


dessa persona? impactar de forma positiva
essa persona?

20
02. mapeando a jornada
do usuário
jornada do usuário

O que é? Quando usar? Como aplicar?


É uma representação Quando é necessário Pode ser usada
gráfica das etapas entender o ciclo em conjunto com
de relacionamento de relacionamento a jornada e com
do cliente com um do cliente com a as personas para
produto ou serviço. empresa. explorar como cada
uma se relaciona
em cada momento
do ciclo de vida do
produto ou serviço
analisado.

21
ESTÁGIOS

LEMBRANÇA/
NECESSIDADE > DESCOBERTA > PESQUISA > AVALIAÇÃO > ENCONTRO
FAZENDO

Preciso de Temos Será que vou Preciso saber Essa


uma proposta experiência encontrar? se de fato o ferramenta
da BRF! nesse Temos material me é fantástica!
PENSAMENTO

Preciso de um segmento! experiência atende.


organograma Dicas do nesse
e benchmarks. Finder! segmento
específico?
EXPERIÊNCIA SENTIMENTO

Autonomia. Muitos Nomenclatura Recomenda


Não tem materiais não contribui e divulga.
burocracia. voltando na positivamente.
pesquisa.

22
03. desenvolvendo um
protótipo do produto
A fase de prototipação tem como função auxiliar a validação
das ideias geradas. Protótipos reduzem as incertezas do projeto
e exemplificam as ideias de modo a trazê-las à realidade.

protótipo não é MVP!


DIFERENÇA MVP X PROTÓTIPO

foco Modelo de negócio. Produto/serviço comercia-


lizado pelo negócio.

conceito Visão reduzida Visão simplificada


do produto final. do produto final.

utilidade Testar a viabilidade Testar a viabilidade técnica


do negócio. do produto/serviço.

feedback Orienta o desenvolvimento Melhoria técnica


do negócio. do produto/serviço.

visão do cliente Produto/serviço com o Produto/serviço com


mínimo de características características mínimas,
que permitem utilizá-lo. mas que não permitem
necessariamente utilizá-lo.

23
protótipos de alta fidelidade

ferramenta Figma

04. checando a viabilidade técnica


de desenvolvimento do produto
Dados: verifique se os dados têm a disponibilidade, a granularidade
e a frequência de atualização que o seu protótipo necessita.

Tecnologia: cheque se as funcionalidades da ferramenta de


desenvolvimento do produto atendem ao seu protótipo.

24
interativo!

Faça o seu cliente pensar primeiro no protótipo do


produto ideal!

Só depois faça os ajustes


conforme as suas limitações
de dados e tecnologia.

Defina a persona que irá consumir o seu produto de dados.

Quem é essa persona? Quais são os seus sonhos,


desejos, hábitos de consumo etc.?

Preencha o template da próxima página.

25
interativo!

definindo a persona

Como é sua abordagem com Quais as características mais marcantes


relação a “fatos e dados”? a respeito do seu “estilo de trabalho”?

O que a incentiva? idade? Qual palavra você usaria


para descrever essa
pessoa?
onde mora?

onde trabalha?

qual é o seu cargo?

O que a desincentiva? O que ela valoriza em


fale sobre a educação uma análise?
dessa persona.

Quais são as dores dessa persona? Como o meu trabalho pode impactar
de forma positiva essa persona?

26
ex.: guardião (detalhista, metódico)

Como é sua abordagem com Quais as características mais marcantes


relação a “fatos e dados”? a respeito do seu “estilo de trabalho”?
É detalhista e gosta de organização. Prático, estruturado, reservado,
metódico, leal, focado nos detalhes.

O que a incentiva? idade? Qual palavra você usaria


Organizado, previsão, para descrever essa
consistência e plano pessoa?
detalhado. onde mora? Ordem.

onde trabalha?

qual é o seu cargo?

O que a desincentiva? O que ela valoriza em


fale sobre a educação uma análise?
Desordem, pressão por dessa persona
prazos, ambiguidade e Valoriza a “clareza”
incerteza. e a organização das
informações.

Quais são as dores dessa persona? Como o meu trabalho pode impactar
Tem dificuldade em abraçar o risco; de forma positiva essa persona?
A instabilidade é um fator que a Manter relatórios ou dashboards
incomoda; Tem receio de que erros sempre atualizados e com bastante
do passado voltem a acontecer. informação (detalhes) disponíveis
para ajudar na tomada de decisões.

27
30
interativo!

DEILAS

28
_deilas

Metodologia prática e rápida de análise de dados para unir os mundos de


dados e de produto, tornando sua empresa cada dia mais data-driven.

D efina o objetivo produto de dados


E scolha métricas de sucesso
I dentifique fontes
L impe as bases
A nalise os dados
S ugira decisões
defina o produto de dados
Defina o produto usando as técnicas de discovery
que aprendemos nesta aula.
Lembre-se de que os dados devem trazer respostas para
perguntas específicas.
As respostas devem ser claras, mensuráveis e
relevantes para o negócio.

escolha métricas de sucesso


Deixe claro os indicadores que medem o sucesso de sustentação
do produto de dados desenvolvido.
Planeje como e com qual frequência essas métricas serão medidas.
29
o que não
se mede, não se
gerencia.
identifique fontes
Mapeie as fontes já existentes.

Verifique a viabilidade do cruzamento de dados.

Busque novos dados, se necessário.

Automatize as fontes sempre que possível.

limpe as bases
Lembre-se da metodologia do framework TRACE.

Trate os dados ausentes (missing data).

Trate os dados sem padrão.

Proteja os dados sensíveis.

30
analise os dados
Crie indicadores a partir dos dados brutos.

Cheque a consistência dos dados tratados.

Se possível, use ferramentas de Data Quality para garantir


a disponibilidade e a assertividade dos dados.

sugira decisões
Desenvolva o produto de dados de acordo com o seu protótipo.

Faça a homologação com os usuários dos dados.

Certifique-se de que o seu produto de dados responde


às questões críticas de negócio.

31
interativo!

Considere a persona que você definiu no exercício anterior.

Defina 3 perguntas de negócio que precisam ser respondidas para


que essa persona tome decisões de negócio.

Faça um “protótipo em papel” do produto de dados que


responda a essas perguntas.

32
Mapeie a jornada do usuário de quem toma as decisões da sua área.

Mapeie as perguntas de negócio que essa pessoa precisa


responder para ser mais data-driven.

33
Use os dados
a seu favor
O profissional que sabe interpretar dados é capaz de definir o futuro
de toda empresa e, por isso, é super desejado no mercado.

A Pós-Graduação em Business Intelligence & Analytics da Conquer


foi desenvolvida para pessoas como você, que quer analisar e
influenciar decisões estratégicas com segurança e encontrar
oportunidades de crescimento para o negócio.

Aprenda tudo isso em apenas 6 meses, com aulas ao vivo, muita


mão na massa e professores que atuam como profissionais em
empresas que são gigantes do mercado.

Bora descobrir todos os detalhes desta Pós feita pra você?

Me conta mais
Sobre a
Conquer
Para entender melhor quem somos, você precisa saber que nascemos
da insatisfação com o ensino tradicional.

Nosso aprendizado vem na prática, no erro, na persistência, na cara


e na coragem.

Nada do que fazemos é comum, porque a gente não se encaixa


no convencional. É como se fossemos triângulos em um mundo
quadrado, sabe como?!

Se você é assim também, vem com a gente alavancar a sua carreira.

Não seja quadrado. Seja triângulo!


escolaconquer.com.br

You might also like