TRANSFORMAM OS NEGCIOS

Big Data & ANALYTICS

Copyright 2013 EMC Corporation. Todos os direitos reservados.

Big Data = dados estruturados + no estruturados

Internet das Coisas
Informaes estruturadas em bancos de dados relacionais

Informaes no corporativas

Gerenciadas e no gerenciadas Informaes no estruturadas

Informaes de telemetria baseadas em local etc.

O universo digital est crescendo 7.600 PB por dia

Copyright 2013 EMC Corporation. Todos os direitos reservados. 2

A Importncia do Big Data para o negcio

Fornece material para anlise. Novos conhecimentos tornamse disponveis

uma beno!

Insights novos & Caractersticas

reas beneficiadas

Genoma do cliente e Intimidade

Produtos

Crescimento de dados
Alto volume Contnuo Diverso Complexo

Matemtica / Estatstica Preditivo Especfico Baseada em evidncias

Anlise Avanada

Marketing Sensveis localizao decises Agncias

Aes em tempo real

Riscos

Tecnologia (velha TI) e no pode lidar com suas novas caractersticas e no pode extrair valor dos dados

uma maldio!

Novas Tecnologias
Scale-out Relao custobenefcio Flexvel

...

...
Novas fontes de receita

Conscinci a Social

Copyright 2013 EMC Corporation. Todos os direitos reservados.

O que Analytics?

Analytics a aplicao da tecnologia computacional e de estatstica para solucionar problemas de negcios e da indstria. Praticamente, o processo de tomada de decises de forma realista e otimizada com base nos dados existentes.

Copyright 2013 EMC Corporation. Todos os direitos reservados.

Barreiras contra o ganho de valor do Big Data

Longos tempos de ingesto e processamento

Anlises de dados presa em silos

01101010111100 10101010100101010 011001010101110010 1101010100101011111

Fontes de dados pouco utilizadas

Copyright 2013 EMC Corporation. Todos os direitos reservados.

O Papel do CIO na Era de Big Data

O Papel do CIO na Transformao de Big Data
Os CIOs devem claramente abraar o conceito de Big Data, porque representa o exemplo perfeito do tipo de tecnologia no qual a TI habilita a gerao de oportunidades de negcio e possibilita a entrega de receitas significativas ou diferenciao competitiva nica para a empresa

Copyright 2013 EMC Corporation. Todos os direitos reservados.

O QUE NECESSRIO PARA APROVEITAR O

Big Data?
Copyright 2013 EMC Corporation. Todos os direitos reservados.

Os negcios impulsionam os projetos de Big Data

O Big Data exige uma forte colaborao da TI e das linhas de negcios

Alinhe-se a iniciativas

Priorize casos de uso

Determine dados e tecnologia

Copyright 2013 EMC Corporation. Todos os direitos reservados.

Requisitos tecnolgicos do Big Data

Armazenar dados em escala de petabytes Reagir a um grande nmero de eventos Oferecer menor tempo de implantao

Copyright 2013 EMC Corporation. Todos os direitos reservados.

EMC e Big Data

Armazenamento de dados de forma scale-out

Nuvem ou virtualizado

Copyright 2013 EMC Corporation. Todos os direitos reservados.

10

Isilon: armazenamento scale-out para Big Data

Capacidade de expanso em grande escala
At 20 PB em um s file system

Hadoop pronto para uso corporativo

O HDFS est integrado ao sistema operacional OneFS

Simplicidade no gerenciamento
Gerencie PBs da mesma forma que faria com TBs

Copyright 2013 EMC Corporation. Todos os direitos reservados.

11

Descubra novos tratamentos com Big Data

Acesso rpido a todos os dados
Dimensione at 12 PB com desempenho linear

Colabore nas pesquisas inovadoras

Reduza a disseminao de doenas

"Aumentamos um sistema nico de

arquivos para at 1 PB em menos de um ano e mantivemos o throughput necessrio para continuar nossa pesquisa."

Copyright 2013 EMC Corporation. Todos os direitos reservados.

12

EMC e Big Data

Armazenamento de dados de scale-out

2 1

Data Fabric de alta capacidade e em memria

Nuvem ou virtualizado

Copyright 2013 EMC Corporation. Todos os direitos reservados.

13

Uma viso holstica de um sistema de Big Data & Analytics:

Real Time Streams
Real-Time Processing
(s4, storm)

Analytics Big SQL

Processamento Batch

ETL

Real Time Structured Database

(hBase, Gemfire, Cassandra)

(Greenplum)

Dados No Estruturados(HDFS)

Copyright 2013 EMC Corporation. Todos os direitos reservados.

14

Pivotal: integrao de ativos da EMC e da VMware

Desenvolvimento de aplicativos orientado por dados Fabric de aplicativos e nuvem da Pivotal Fabric de dados da Pivotal

Laboratrios de cincia de dados da Pivotal

Virtualizao

...ETC
Armazenamento em nuvem

Copyright 2013 EMC Corporation. Todos os direitos reservados.

15

Reaja a grandes volumes de dados em tempo real

Desenvolvimento de aplicativos orientado por dados Fabric de aplicativos e nuvem da Pivotal Fabric de dados da Pivotal

Laboratrios de cincia de dados da Pivotal

Virtualizao

...ETC
Armazenamento em nuvem

Copyright 2013 EMC Corporation. Todos os direitos reservados.

16

Arquitetura de fabric de dados da Pivotal

Data Ingestion System

Data Staging Platform

Analytic Data Marts

Operational Intelligence

Run-Time Applications

Enterprise Data Warehouse

Copyright 2013 EMC Corporation. Todos os direitos reservados.

17

Estudo de caso: China CITIC Bank

O banco de dados de anlise de dados da Pivotal reduz o risco e aumenta as receitas Reduza o processo de anlise de dados de meses para dias Reduza o risco de crdito com dados em tempo real, permitindo ajustes mais rpidos em limites de crdito Melhoria de 86% nos tempos de configurao de campanha de marketing

"A central de carto de crdito j recuperou at 40 vezes o investimento do projeto, o que uma realizao considervel."

Copyright 2013 EMC Corporation. Todos os direitos reservados.

18

EMC e Big Data

Especialistas em cincia de dados

Armazenamento de dados de scale-out

3 2 1

Laboratrios de cincia de dados da Pivotal

Fabric de dados de alta capacidade e na memria

Nuvem ou virtualizado

Copyright 2013 EMC Corporation. Todos os direitos reservados.

19

Cientista de Dados: uma carreira emergente

SPOTLIGHT ON Big Data

by Thomas H. Davenport and D.J. Patil

Copyright 2013 EMC Corporation. Todos os direitos reservados.

20

Evoluo do processo de anlise de dados

Inteligncia de negcios versus anlise de dados avanada (cincia de dados)
anlise preditiva de dados e data mining (cincia de dados)

Alta

Tcnicas e tipos de dados tpicos Perguntas comuns

Otimizao, modelagem preditiva, previso de anlise estatstica Dados estruturados/no estruturados, qualquer tipo de fonte, conjuntos de dados muito grandes E se? Qual o cenrio ideal para nossos negcios? O que acontecer depois? E se essas tendncias continuarem? Por que isso est acontecendo?

VALOR COMERCIAL

Cincia de dados

Business Intelligence

Business Intelligence Baixo Passado

Tcnicas e tipos de dados tpicos Perguntas comuns

Gerao de relatrios padro e especfica, painis de controle, alertas, consultas, detalhes sob demanda Dados estruturados, fontes tradicionais, conjuntos de dados gerenciveis O que aconteceu no ltimo trimestre? Que quantidade vendemos? Onde est o problema? Em quais situaes?

TEMPO

Futuro

Copyright 2013 EMC Corporation. Todos os direitos reservados.

21

Acelere projetos: Data Science Labs

Os cientistas de dados trabalham com voc em seus dados

Deteco de fraude

Quant. Modelagem

Modelagem financeira

Genma do cliente

Anlise bayesiana

Trfego de TI/rede

Analytics de imagens e grficos

Processamento de fala e linguagem

Copyright 2013 EMC Corporation. Todos os direitos reservados.

22

Construindo uma rea de Cientistas de Dados

Copyright 2013 EMC Corporation. Todos os direitos reservados.

23

Matriz de Habilidades
Analistas Quantitativos, Estatsticos, e Analistas de Negcios Cientistas de Dados

Habilidade Quantitativa
Recm Graduados em CTEM Profissionais de Business Intelligence, TI

Habilidade Tcnica

Copyright 2013 EMC Corporation. Todos os direitos reservados.

24

Perfil do Cientista de Dados

Quantitativo

Tcnico

Curioso e Criativo

Questionador

Comunicativo & Colaborativo

Copyright 2013 EMC Corporation. Todos os direitos reservados.

25

Construindo uma prtica de Big Data no banco

Organizao: Nvel Executivo Senior
CEO, CIO, CDO, VP de Analytics, Diretor de Analytics
Cientistas de Dados
Desenvolvimento de algoritmos Java, C++, Python, MapReduce Promover Analytics e raciocnio baseado em evidncias, muda a forma como as pessoas tomam decises.

Abordagem orientada a servios

Operaes Tesouraria Financeiro Comercial Marketing Riscos

...

Cientistas de Dados

Desenvolvimento de modelos R, SAS, Stata

Time de Analytics
High Performance DB

- Centralizada - Forte interao com Negcios e TI - Pleno acesso aos dados - No se fundir com Business Intelligence

-Perfil: -Doutor ou Mestre em Estattica, Cincia da Computao, ou cursos na rea de Exatas -Experincia com Minerao de Dados -Fluencia em R, SAS, SQL, Java -Conhecimento da Indstria Financeira - Ordem de contratao: - Cientista de Dados Jr. para comear a gerar valor para os pilotos - Coordenador para organizar, evangelizar, e atrair novos talentos - Contratar mais recursos conforme a demanda

Hadoop
Visualizao Processamento Paralelo Federao de Dados ... Infraestrutura de TI

Copyright 2013 EMC Corporation. Todos os direitos reservados.

26

EMC Estrutura da Plataforma Unificada de Analytics

Plataforma Analtica
Centro de Cincia de Dados
Entrega de Labs na "Escala Big Data"

Plataforma de anlise em tempo real

Copyright 2013 EMC Corporation. Todos os direitos reservados.

27

Centro de Inovao e Cincia de Dados

Princpios fundamentais Construo de um centro de cincia de dados , em primeiro lugar, construir uma infra-estrutura formada por pessoas. Analytics um processo de descoberta iterativa de conhecimento e tem de ser gerida como tal. Descoberta comea fazendo as perguntas certas - Que podem ser to importantes quanto encontrar respostas a essas perguntas.
Gerenciamento do Projeto
Mapeamento de perfis dentro da cia. Definio de papis e habilidades e serem desenvolvidas Planos de superviso e comunicao Relatrios de status Alinhamento organizacional Mitigao de riscos Planejamento de recursos

Engenharia e Arquitetura de Dados

Facilitar os processos de carregamento de dados dos sistemas de origem para infra-estrutura do centro Coordenar as necessidades de dados com cientistas de dados Melhor prticas didticas para o desempenho das anlises A migrao de dados para suportar novas aplicaes

Cientistas de Dados
Promover uma cultura de colaborao de dados Executar trabalhos de Laboratrio em torno de gerao/aumento de receita especfica ou esforos de ganhos de eficincia operacional Educao mo na massa com novas tcnicas de anlise de dados Introduzir novas ferramentas e metodologias de anlise

Treinamento Formal e on the job

Identificar candidatos para treinamentos especficos e mais profundos de cincia de dados Criar currculo de formao oficial Metodologia Recrutamento Interno Imerso de Hadoop na EMC Americana Construir conhecimento institucional para a equipe de cientistas de dados

Copyright 2013 EMC Corporation. Todos os direitos reservados.

28

Plataforma G2 em Ao

Copyright 2013 EMC Corporation. Todos os direitos reservados.

29

EMC e Big Data

Especialistas em cincia de dados

Armazenamento de dados de scale-out

4 3 2 1

Desenvolvimento rpido de aplicativos

Laboratrios de cincia de dados da Pivotal

Fabric de dados de alta capacidade e na memria

Nuvem ou virtualizado

Copyright 2013 EMC Corporation. Todos os direitos reservados.

30

Aplicativos de Big Data diferenciam os negcios

Acesso de dispositivos mveis e da Internet das Coisas

Copyright 2013 EMC Corporation. Todos os direitos reservados.

31

Big Data Use Cases

Copyright 2013 EMC Corporation. Todos os direitos reservados.

32

Melhorar Reteno de Clientes Wealth Management e cross-selling

Gerenciar Riscos CUSTOMER EXPERIENCE Reduzir Custos Eficincia Operacional AUMENTAR RECEITAS

Situao Atual do Cliente:

Tem tido tradicionalmente uma postura muito qualitativa e reativa, ao invs de quantitativa e pr-ativa, para antecipar as necessidades de produtos para clientes, reteno de clientes em ambiente de mercado voltil, e definir produtos adequados para o cross-selling Isso leva a custos significativamente de atrair novos clientes mais elevados versus a manuteno dos existentes e diminuiu das receitas potenciais em perder oportunidades para aprofundar / ampliar relaes

FA Workstation, Mobile Devices

Descrio da Soluo:
Coletar e organizar grandes volumes de dados internos e externos (estruturados e no estruturados) para ir alm dos tradicionais Business Intelligence para alavancar Big Data Analytics Desenvolver modelos de anlise preditiva para antecipar as necessidades dos clientes, o foco do servio e marketing de produtos e gerenciar as reaes do cliente para eventos de mercado ou macro, incluindo alertas e notificaes Integrar os resultados de anlise preditiva para prospeco do FA e modelo de relacionamento FA-Cliente
Dados Cliente segmentao de clientes Tolerncias a risco Perfil de Investimento Investimento histrico e dados de transaes Ativos detidos fora

Predictive Analytics Cientista de Dados Financial Advisor

Dados Produtos Informaes sobre o produto Fluxos AUM Histrico produto anlise cliente histrico Anlise de perda

Dados no tradicionais eventos macro Notcias do Mercado mdias sociais Estilo de Vida do cliente

Valor de Negcios:
Aquisio, gesto e reteno de clientes mais efetiva Custo de reter clientes muito menor do que atrair novos Criar negcios e receita adicional atravs da antecipao das necessidades dos clientes e minimizar a migrao do cliente
Copyright 2013 EMC Corporation. Todos os direitos reservados.

33

Iniciar

Copyright 2013 EMC Corporation. Todos os direitos reservados.

34

EMC - Big Data Advisory Services

Piloto de BI / Analytics Avaliao da Maturidade Analytics BI / Analytics Big Data Advisory Services Estratgia em Data Warehouse Analytics Lab

Soluo Big Data usando Hadoop

Migrao de Data Warehouse

Next Gen Data Warehouse

Consolidao de Data Warehouse Data Warehouse / ETL Estratgia de MDM Qualidade de Dados Governana de Dados

Implementao MDM

Master Data Management

Copyright 2013 EMC Corporation. Todos os direitos reservados.

35

Comece com um workshop de viso de Big Data

Identifique onde o Big Data fornecer vantagem competitiva

Identifique casos de uso de Big Data Adquira e prepare dados estruturados e no estruturados Construa e refine continuamente modelos de anlise lgica Publique percepes nos aplicativos Mea a eficcia das decises

Copyright 2013 EMC Corporation. Todos os direitos reservados.

36

A EMC pode ajud-lo a treinar seu talento

EMC Academic Alliance e cursos de Big Data

Para obter mais informaes, acesse: http://education.EMC.com/datascience ou http://education.EMC.com/Business_Transformation

Copyright 2013 EMC Corporation. Todos os direitos reservados.

37

A EMC pode ajud-lo a treinar seu talento

EMC Academic Alliance e cursos de Big Data
Pblico
Lderes de negcios

Ofertas de cursos
Introduo cincia de dados e anlise de dados de Big Data para obter transformao dos negcios Mdulo de mais de 90 minutos

Novidade Novidade

Lderes de negcios e gerentes

Cincia de dados e anlise de dados de Big Data para transformao dos negcios 1 dia

Todos os futuros cientistas de dados

Cincia de dados e estudos analticos de Big Data 5 dias

Para obter mais informaes, acesse: http://education.EMC.com/datascience ou http://education.EMC.com/Business_Transformation

Copyright 2013 EMC Corporation. Todos os direitos reservados.

38

Resumo

1 2

O Big Data transforma os negcios O Big Data exige colaborao de negcios e da TI

A EMC pode ajud-lo com Big Data hoje

Copyright 2013 EMC Corporation. Todos os direitos reservados.

39