`
linguagem` `
topico` `
nome`BigData`
` `
titulo`BigData`
` `
descritor`Velocidade conectividade intangibilidade amazon Talend  `
` `
lead`Termo abrangente que inclui qq coleção de dados tão grande ou tão complexa (e crescente) que se torna dificil de se processar utilizando-se as ferramentas de gestão de dados ou aplicações de dados convencionais. Cinco V's:Volume, Varieade, Velocidade, Veracidade, Valor.
Desafios: captura, curadoria, armazenamento, recuperação análise e visualização.`
` `
melhorar`Melhorar`
` `
referencia`Escola estúdio,
`
` `
origem`BigData.xml`
` `
` `
topico` `
titulo` Séries históricas`
` `
desc` IBGE, Puc, Amazon:
`
` `
` `
topico` `
titulo`Camadas de plataforma BigData`
` `
desc` AMAZON
     GERAR --> ARMAZENAR --> ANALISAR  --> COMPARTILHAR

  IBM
     FONTES DE BIGDATA --> TRATAR/ARMAZENAR --> ANALISAR  --> CONSUMIR

 ESTUDO
     INVENTARIR --> ENRIQUECER --> SOCIALIZAR --> INTEROPERAR --> ADQUIRIR
`
` `
` `
topico` `
titulo`Tipos de BigData x Aplicação`
` `
desc`
Tipo de Big Data
 Aplicação
1 - Dados Gerados por máquina, sensores
 Prever o consumo de energia (serviço público)
2 - Dados da web e sociais
3 – Dados de transação
 Analítica de perda de cliente (Telecomunicações)
4 – Gerado por humanos
 Monitoramento de chamadas (Atendimento no varejo ao Cliente)
5 – Biométrica (facial + facebook)
2 – Dados da web e sociais
 Mensagem personalizada com base em reconhecimento facial e mídia social (e-Comerce e Varejo on line)
1 - Dados Gerados por máquina
3 – Dados de transação
 Dados de dispositivos móveis e direcionamento com base em localização (Varejo e marketing)
1 - Dados Gerados por máquina
3 – Dados de transação
4 – Gerado por humanos
 Deteção de Fraude
(Assistência médica)
`
` `
` `
topico` `
titulo`Arquitetura de conhecimentos`
` `
desc`
  • Ciência da Computação
    • Programação computador 

                                           







  




















  
  • Biologia
    Finança
    A Web
    • Aplicações







                          










      
INFRA
ANALISE DE DADOS
NEGÓCIO


  • ESTATÍSTICA
MATEMÁTICA

`
` `
` `
topico` `
titulo`Da origem a plataforma de dados`
` `
desc`
`
` `
` `
topico` `
titulo`Tipos de BigData x Aplicação`
` `
desc`Melhorar de forma contínua: qualidade, produto, componentes, mutirões e processos.
Existem várias Listas de Melhorias para organização e consolidação das ideias.
  • São atualizadas a qualquer momento. Participe
  • Um mutirão pode utilizar diversas listas.
  • A mesma lista pode ser usada em vários projetos.
`
` `
` `
topico` `
titulo`Camadas`
` `
desc`
  • Fonte de dados
    • Sistemas corporativos legados
    • Sistemas de gerenciamento de dados (DMS)
    • Data Warehouses e Data Marts
    • Dispositivos inteligentes
    • Provedores de dados agregados
    • Info geograficas e gerados por seres humanos
    • Dados de sensor (ambiente, eletricidade, instrumentos de navegação, radiação, automotivo, termico, optico, quimico pressão, dispositivos vestiveis...)
  • Tratamento e armazenamento de dados
  • Análise
  • Consumo
  • Gestão (interoperabilidade)
  • Governança
  • Serviços de enriquecimento de dados
  • Gerenciamento de ativos
`
` `
` `

topico` `
titulo`Tecnologias`
` `
desc`
  • NoSql data bases
  • Infraestrutura de processamento maciçamente paralelo
    • Cluster de dezenas de milhares de nó
    • Sistema de arquivos distribuido
    • Paradigma MapReduce
    • Indices de busca


`
` `
` `

topico` `
titulo`Processamento , recuperação e análise`
` `
desc`
  • Ecossistema Hadoop

`
` `
` `
`