Business Intelligence & Business Analytics Blog

Treinamento de Business Intelligence com Pentaho Community Edition

Sobre o Pentaho
O Pentaho é uma plataforma de código aberto que possibilita a criação de soluções de Business Intelligence (BI).
Inclui recursos de geração de relatórios, integração e armazenamento de dados (datawarehousing), análise de informações através de cubos OLAP, painéis interativos (dashboards) para controle gerencial e mineração de dados (Data Mining).
Hoje, o Pentaho é o mais popular e poderoso sistema de BI em software livre do mundo.

Objetivo
Capacitar o participante nas ferramentas que compõem a suite OpenSource Pentaho Business Analytics em sua versão gratuíta (Community Edition).

Duração
40 horas.

Público
Programadores, DBA`s, Cientistas de Dados e Curiosos em Geral.

Turmas

  • Reduzidas (até 10 alunos);
  • In-company (mínimo de 5 alunos);
  • EaD (em breve).

Programa

Deslize para o lado para ver o conteúdo completo


Materiais do Curso
Apostila digital com exercícios.
Slides utilizados no treinamento.
Materiais e documentações complementares produzidos pela comunidade Pentaho.

Pré-requisitos
Não há pré-requisitos. No entanto, para que haja um maior aproveitamento deste treinamento, recomenda-se que o participante tenha conhecimentos em bancos de dados, HTML, JavaScript e noções de lógica de programação.

Requisitos Mínimos de Hardware
O participante é responsável por providenciar seu seu próprio computador. Os computadores deverão ter as seguintes características e configurações:

  • Java JDK
  • Mínimo de 4 GB de Memória RAM;
  • Mínimo de 40 GB de espaço em disco (HD);
  • Sistema Operacional (Windows, Mac ou Linux com interface gráfica);
  • Possuir um usuário com privilégios de instalação de programas no sistema operacional.
Atendemos em todo o Brasil

Escrever um comentário (0 Comentários)

Administração de Dados

Administração de Dados

A qualidade do resultado de qualquer processo está intimamente ligada à confiabilidade, integridade, integração, conceituação, documentação, disponibilidade, acessibilidade e segurança dos dados, independente da plataforma utilizada.

Desta forma, a administração de dados é responsável por desenvolver e administrar de modo centralizado as estratégias, procedimentos e práticas para o processo de gerência dos recursos de dados e aplicativos, incluindo planos para sua definição, padronização, organização, proteção e utilização.

Portanto, cabe à administração de dados gerenciar os dados como recursos de uso comum da empresa, promovendo-lhes os valores de autenticidade, autoridade, precisão, acessibilidade, seguridade e inteligibilidade.

A função de administração de banco de dados tem a responsabilidade de projetar o armazenamento de dados de forma a atender às necessidades de acesso, sempre tendo em vista o modelo de dados lógico, que incorpora as necessidades atuais e futuras do negócio.

Garantir que todo o processo ocorra com eficácia é o objetivo da e-Setorial.

Vantagens

  • Obtenção de conhecimentos do contexto do negócio.
  • Modelagem de dados corporativa.
  • Disponibilização e compartilhamento de dados de forma organizada.
  • Base para sistemas de informações flexíveis, integrados e eficientes.
  • Segurança e integridade.
  • Desempenho maximizado.
Escrever um comentário (0 Comentários)

Enriquecimento de Dados

O serviço de enriquecimento e atualização de dados permite adicionar ou atualizar informações existentes ou complementares na sua base de clientes, tornando seus registros mais completos e atualizados. Desta forma, otimizando os resultados e possibilitando ações de marketing segmentadas.

Com informações mais ricas, será possível analisar o comportamento de seus potenciais clientes, seus hábitos de consumo, estilo de vida, poder de compra, dentre diversos outros atributos.

Os dados também poderão ser enriquecidos através de rotinas periódicas, possibilitando a existência de dados sempre atualizados.

Como funciona

ED
  1. Base de dados: recebimento da base de dados desatualizada.
  2. Higienização: os dados duplicados, corrompidos e incompletos são retirados.
  3. Captação e enriquecimento de diversas fontes: os dados desatualizados ou incorretos são corrigidos e as informações em branco são preenchidas - como, por exemplo, a inclusão do 9º dígito de celulares.
  4. Atualização dos dados: a base de dados é atualizada ou reconstruída.
  5. Base dados atualizada!

Vantagens

  • Confiabilidade na origem da informação.
  • Melhoria da qualidade da base de dados.
  • Rotinas de cruzamento de bases.
  • Direcionamento na prospecção de clientes.
  • Informações para inteligência de mercado.
  • Maior assertividade na oferta de produtos e serviços.
  • Maior objetividade nos processos de gestão na entrada em novos mercados.
  • Diminuição nos registros de inadimplência.
  • Maior sucesso na execução das políticas de crédito e cobrança.
  • Redução de gastos com correspondências e com telemarketing.

Atributos

Através do processo de enriquecimento de dados, atualizamos atributos diretamente em seu banco de dados, tais como:

Pessoa Jurídica Pessoa Física
  • CNPJ;
  • Razão social;
  • Inscrição estadual;
  • CNAE;
  • Natureza jurídica;
  • Porte empresarial;
  • Nome fantasia;
  • Data de abertura;
  • Matriz/filial;
  • Endereço;
  • Telefones;
  • E-mails;
  • Quantidade de funcionários;
  • Restrição financeira;
  • Quadro societário;
  • Principal executivo.
  • CPF;
  • Nome;
  • Nome da mãe;
  • Data de nascimento;
  • Gênero;
  • Estado civil;
  • Profissão;
  • Grau de escolaridade;
  • Telefones;
  • E-mail;
  • Situação do CPF.

Escrever um comentário (0 Comentários)

Migração de Dados

MD

Com o implemento de novas tecnologias e o aumento da competitividade, é de se esperar que todas as organizações passem por um processo de evolução de seus sistemas de informação. Independente de ser motivada pelas deficiências do sistema atual ou pelos ganhos que o novo sistema trará, a preocupação em não perder informação é unânime.

É normal que os sistemas tenham estruturas de dados e regras distintas entre si e, por isso, o processo de migração pode ser bastante trabalhoso e o risco de haver uma restrição que impeça este processo de ser executado até o fim é muito grande. Esta diferença exige um conhecimento elevado na extração, transformação, transporte e carga dessas informações para que o processo ocorra sem problemas.

Utilizando ferramentas de última geração, fazemos a migração entre quaisquer bancos de dados do mercado, mesmo entre estruturas com modelagens distintas.

Vantagens

  • Redução de riscos.
  • Agilidade.
  • Confiabiliade.
  • Confidencialidade.
  • Hot Migration - com o sistema destino em funcionamento.
  • Sincronização de dados periódica entre sistemas.
Escrever um comentário (0 Comentários)

Soluções de Apoio à Decisão - Business Intelligence-BI

A especialidade da e-Setorial é transformar dados em informações úteis para auxiliar a tomada de decisões, utilizando software livre para criar soluções de alto desempenho e tecnologia de ponta, sem custos de licença.

Estudamos e mapeamos todos os processos envolvidos, entregando soluções completas de acordo com a sua necessidade. Inclusive os requisitos de segurança e registro dos sistemas de gestão ISO 9001, 14001 e 18001.

A partir da integração de dados oriundos de diversas fontes, é possível organizá-los, categorizá-los e filtrá-los em uma única plataforma, assegurando a confiabilidade da decisão tomada.

Também chamados de Decision Suport System (DSS), os Sistemas de Apoio à Decisão (SAD) se utilizam de uma série de conceitos, técnicas e ferramentas para transformar dados em informações úteis para auxiliar a tomada de decisões. Aqui na e-Setorial gostamos de chamar o resultado do nosso trabalho de Soluções de Apoio à Decisão devido ao carater definitivo, eficaz e eficiente que atingem nas instituições onde atuamos.

TabletPara a elaboração de um sistema deste tipo, normalmente muitos profissionais são envolvidos, principalmente nas áreas da Tecnologia da Informação e Comunicação (TIC) e de Negócios e, especificamente, nas áreas de Business Intelligence (BI), Business Analytics (BA), Data Mining, Machine Learning, Estatística, Banco de Dados, Infraestrutura de Software, Inteligência Competitiva, Marketing, Engenharia e Gestão do Conhecimento, entre outras.

A interação de distintos perfis de profissionais garante, além da performance e segurança, que os pontos importantes para a instituição (Indicadores Chave - KPI) sejam definidos pelas áreas que têm o devido conhecimento, maximizando o sucesso dos projetos.


Workflow SAD

  1. Fontes: extração de dados de qualquer origem.
  2. Coletor: responsável pela coleta dos dados.
  3. Transformação: limpa, desnormaliza e pré-calcula os dados antes de serem carregados ao data warehouse. Assim, as análises são otimizadas - possuindo dados mais fáceis, limpos e consistentes.
  4. Data Warehouse: bancos de dados analíticos.
  5. Cache em memória: as métricas mais utilizadas são lidas e calculadas com antecedência a fim de assegurar uma performance otimizada.
  6. Camada de metadados: capacidade de alteração nas nomenclaturas dos dados, de forma a facilitar a compreensão da equipe tomadora de decisões.
  7. Visualização: depois de processados, os dados estão prontos para serem consumidos. Oferecemos ferramentas visuais intuitivas que permitem a análise e compartilhamento das informações com sua equipe em toda a rede.
  8. Insights inteligentes para melhorar seus resultados.

Vantagens

  • Painéis interativos, com informações concisas.
  • Confiabilidade nas informações.
  • Percepções oportunas, precisas, valiosas e práticas.
  • Integração de dados de diversas fontes em um único armazém de dados.
  • Todos os dados são atualizados diariamente.
  • Agilidade no processo de tomada de decisões.
  • Simplificação de processos e redução de custos.
  • Entenda quem são seus melhores clientes, funcionários e produtos.
  • Informação detalhada e de fácil acesso.
  • Possibilidade de integração com softwares pré-existentes.

Cubo Analítico

Com todos os Indicadores Chave (KPI) definidos, todas as regras de negócio documentadas e a origem de todos os dados conhecida, se inicia o desenvolvimento do SAD. A primeira etapa consiste em ler os dados de todas as fontes definidas no projeto, integrando-os em um grande armazém de dados, o Data Warehouse (DW). Nestas etapas contemplamos os itens 1 a 4 do workflow.

A partir daí vem a grande sacada do Business Intelligence: são criados os Cubos Analíticos, também chamados de Cubos Multidimensionais, um para cada fato a ser analisado e sem limite de quantidade de Dimensões.

Um único cubo deve ser capaz de oferecer, com muita agilidade, todas as informações que um gestor necessita sobre o fato que o cubo analisa. #Todas.

Cubo Analítico

O exemplo ao lado é uma representação gráfica (gif) de um cubo de Movimentações Financeiras composto por apenas 3 dimensões:

  • Tipo de Movimentação Financeira (o que);
  • Data (quando);
  • Localidade (onde).

Cada uma das dimensões pode ser utilizada para filtrar os dados e selecionar apenas o período desejado. A porção em vermelho corresponde a seleção feita e no último quadro do gif percebemos o quadrado que indica a intersecção de todos os filtros, ou seja, a resposta desejada.


Filtros aplicados:
  • Tipo de Movimentação = Vendas;
  • Data = Ano de 2017;
  • Localidade = Estado de São Paulo.

Painéis Interativos

Agora que o cubo analítico é capaz de dar todas as respostas necessárias ao gestor, a próxima etapa é criar painéis interativos (dashboards) que permitam ao próprio usuário refinar suas consultas, simplesmente selecionando por exemplo o Ano e o Mês, sempre com a possibilidade de filtrar ainda mais os dados, clicando nos gráficos (de barras, pizza, etc.) e obtendo respostas precisas e praticamente automáticas, pois todas as técnicas e ferramentas utilizadas permitem que estes dados sejam pré-computados e de fácil acesso.

Tendências e desvios do padrão nos dados da instituiçao são facilmente encontrados, visualmente, de forma clara e intuitiva, conforme exemplos de dashboards abaixo, alguns da e-Setorial e outros da Pentaho:

Conclusão

"Uma Solução de Apoio à Decisão não precisa custar milhões de dólares tampouco exigir a venda casada de equipamentos, treinamentos, consultorias e serviços. Pelo contrário, com software livre pode-se atingir resultados excelentes e sustentáveis utilizando o equipamento já existente, com qualquer sistema operacional do mercado, podendo ser acessado desde celulares e computadores até mesmo em grandes painéis televisores. Isso tudo com toda a segurança e liberdade de quem tem todo o código fonte em seu poder."

E você?
Vai tomar melhores decisões e se destacar da concorrência?
Tome decisões inteligentes.





Go open source



Escrever um comentário (0 Comentários)