Aplicaciones de BI con

Ing. Andrs Eyherabide @aEyherabide

www.datalytics.com

2das Jornadas de Data Mining UTN FFRO Noviembre 2011

La Empresa

Datalytics es una empresa de servicios profesionales independiente, orientada exclusivamente a las prcticas de:

Data Integration Business Intelligence Data Mining

Fundada en el ao 2007. Oficinas en las ciudades de Buenos Aires y Medelln. Nuestros servicios incluyen la consultora, capacitacin, implementacin y el apoyo necesario para asegurar una solucin exitosa que soporte los procesos de negocios. +20 profesionales de diversas reas

Datalytics ha certificado su Sistema de Gestin de calidad para la Provisin de Servicios de Business Intelligence y Data Mining bajo la norma ISO 9001:2008 por Bureau Veritas.

Nuestros Servicios
ETL
VSAM MQSeries AS/400

DW

OLAP & Reporting

Pentaho, Oracle/Hyperion, Microstrategy, SAS, Etc.

DB2 UDB Informix Oracle Microsoft ... Siebel PeopleSoft SAP R/3 XML Archivos Planos FTP

Extract Transform Clean Load

Datastage Informatica Oracle DI Pentaho DI SAS DIS Etc.

DW ODS
Oracle IBM DB2 SQL Server Teradata Sybase IQ Etc.

Data Mart

Data Mining
SAS, SPSS, Rapid Miner

Web Logs

Nuestras Soluciones

Consultora y diseo de estrategias de BI. Implementacin de Soluciones de Business Intelligence. Capacitacin y cursos oficiales de Pentaho. Integracin de Datos de mltiples fuentes y migracin desde aplicaciones legacy. Procesos de limpieza, estandarizacin y normalizacin de datos de sistemas existentes o fuentes de datos externas (bases de clientes, prospects, etc). Utilizacin de herramientas de BI para la mejora de procesos y soluciones no tradicionales como:

Conciliacin inteligente de cuentas (bancarias, ttulos valores, acciones, ...). Herramienta de gestin de Fuerza de Ventas. Solucin de gestin de evaluaciones de desempeo. Implementacin/reingeniera de herramientas de planeamiento colaborativo.

Desarrollo de modelos de Data Mining.

Algunos de nuestros Clientes

Pentaho Partnership

Primer y nico Platinum Reseller, Systems Integration and Training Partner en Amrica Latina. Partners desde Marzo 2008 Oferta de cursos oficiales y a medida, presenciales y va web. Ms de 40 instalaciones realizadas en 6 pases. Ms de 15 consultores especializados en la Plataforma. Implementaciones en varios pases de Latinoamrica en clientes de distinta escala.

BI propietario

SAP compra a Sybase por USD 5.800 Millones SAP compra a BO por USD 6.800 Millones

IBM compra a SPSS por USD 1.200 Millones

IBM compra a Netezza por USD 1.700 Millones IBM compra a Cognos por USD 4.900 Millones Oracle compra a Hyperion por USD 3.300 Millones

Open Source en la actualidad

Open Source en todas partes

Para

el 2012, el 80% de todo software comercial incluir algn elemento Open Source
Hay variedad de herramientas/software open source en un estado maduro, estable y bien soportadas. Ellas proveen una significativa oportunidad para vendedores y usuarios de bajar el costo total de ownership e incrementar el ROI.

Ignorar esta realidad pondr a las compaas en una sera posicin de desventaja competitiva. Embeber sofware Open Source se convertir en la inversin mnima que muchos grandes vendors encontrarn necesaria para mantener su ventaja competitiva durante los prximos 5 aos.
Gartner Group, ao 2008

Open Source en el mundo BI

5 aos despus, los megavendors de BI le hicieron caso al Grupo Gartner. SAP/Business Objects:

Apache Tomcat, MySQL, Eclipse, Python, Subversion, etc Apache Tomcat, Apache Derby, PostgreSQL, iSeries Appliance (Talend) PostgreSQL, Proyecto R, Map/Reduce Magnify (Lucene), Rstat (Proyecto R), Open Portal Services (Apache Jetspeed)

IBM/Cognos:

Greenplum:

Information Builders:

Por qu Open Source?

Fuente: Open Source Adoption in the BI Market, 3rd Nature, 2009

Reduciendo Costos
En un proyecto de 5 aos, open source BI cuesta 82% menos que los BI Megavendors y 77% menos que empresas dedicadas a BI
(Fuente: BI Platform Licensing Models and Negotiating Strategies, Abril 2010)

En un perodo de 3 aos, la reduccin de costos de Pentaho respecto a otros productos propietarios:

Implementaciones Grandes (500 usuarios): 95% Implementaciones Medianas (100 usuarios): 72% Implementaciones Pequeas (25 usuarios): 55%
(Fuente: Lowering the Cost of Business Intelligence With Open Source, 2010)

Adopcin OSBI por mdulos

50%

Fuente: Open Source Adoption in the BI Market, 3rd Nature, 2009

Uso de herramientas analticas

El futuro del Open Source BI

Que es Pentaho?

Pentaho es la empresa lder en Commercial Open Source Business Intelligence & Data Integration

Compaa americana fundada en 2004, con HQ en Orlando (FL)

Modelo Low Cost y metodologa gil de implementacin, acelerando generacin de valor y ROI Auspiciada por Benchmark Capital, Index Ventures and NEA + de 160 partners, entre ellos algunas de las empresas de tecnologa ms innovadoras del mercado

Presencia internacional en aumento

+ 8.000 implementaciones en +185 pases + 1.200 clientes +400 nuevos clientes en el 2010.

En promedio 1 descarga cada 30 segundos (!)

Las suscripciones se duplicaron el 2010

Q1 2009

Q2 2009

Q3 2009

Q4 2009

Q1 2010

Q2 2010

Q3 2010

Q4 2010

Proyeccin 2011

Q1 '09

Q2 '09

Q3 '09

Q4 '09

Q1 '10

Q2 '10

Q3 '10

Q4 '10

Q1 '11

Q2 '11

Q3 '11

Q4 '11

Liderazgo en Open Source BI

# 1 OS BI # 1 en OS DI/ETL # 2 en OS Data Mining Fuente TDWI y BeyeNetwork

Modelo de negocio
Write Build

Contribute

Test

Open Source Community

Enterprise Edition

Pentaho contrata los principales desarrolladores de cada mdulo, y dirige el desarrollo de cada uno de los proyectos La comunidad contribuye nueva funcionalidad, testeo e innovacin Lo anterior mejora la calidad del producto mediante la rpida deteccin de defectos

Software certificado, listo para ambientes de produccin Mdulos exclusivos, funcionalidad adicional y facilidades de uso Soporte tcnico oficial Modelo de suscripcin que minimiza la inversin inicial

Desde los datos hasta el anlisis

 guiado por una metodologa gil

Single Development Environment

Metodologa

Acelerando la generacin de valor

La misin de Agile BI es crear soluciones de calidad de manera rpida y sencilla, promoviendo la participacin del usuario final durante el desarrollo y reduciendo los riesgos de desvos en la implementacin. Una plataforma integrada reduce los tiempos de desarrollo.

Rpidas iteraciones promueven la participacin de los analistas de negocio.

La agilidad para adaptarse a nuevos requerimientos y a un entorno cambiante es vital para satisfacer las necesidades del negocio.

Pentahos Agile BI initiative is a leap forward for the industry, and I expect businesses will be able to dramatically reduce the time it takes for them to create and update BI applications.
Mark Smith, President

Conceptos claves

Anlisis de la informacin: la solucin debe ser una herramienta que permita el anlisis de la informacin, y no simplemente un medio para descargar miles de datos crudos sin valor agregado.

Disponibilidad: acceso va web a informacin actualizada protegida con usuario y contrasea desde cualquier lugar, 24x7.
Autoservicio: los usuarios deben poder acceder a la informacin y analizarla a diferentes niveles de detalle, sin necesidad de recurrir al departamento de sistemas o recursos informticos especializados. gil y evolutiva: la solucin debe ser gil, escalable y evolutiva, para acompaar a la compaa en los cambios incorporando constantemente informacin de nuevos sistemas, nuevos indicadores y permitir anlisis cada vez de mayor valor para la institucin.

Pentaho BA Suite

Pentaho est compuesta por un conjunto de herramientas, una por cada etapa de su proyecto de BI.

Estructura modular y embebible:

Data Integration Pentaho Reporting Pentaho Analysis

Pentaho Dashboards
Pentaho Data Minina

Arquitectura multiplataforma Soporte para Mobile BI

nfasis en Big Data (Hadoop, bases analticas, NoSQL, etc.).

Pentaho Data Integration

Permite tomar informacin de diferentes fuentes, consolidarla y cargarla en un repositorio analtico. Su entorno de trabajo visual y drag & drop se traduce en un menor tiempo de desarrollo y un mantenimiento ms sencillo y agilidad para incorporar nuevas fuentes de informacin e indicadores.

Plug-in de Agile BI:

Data Discovery: Anlisis y visualizacin de informacin en tiempo real Data Modeling: Modelado y publicacin de cubos OLAP

Pentaho Data Integration

+ de 150 steps para manipulacin, enriquecimiento de datos y generacin de reportes. Repositorio integrado: control de versiones y scheduling.

Conectividad nativa contra:

Tpicas: SQL Server, Oracle, DB2, Teradata, Sybase IQ, SAP, MySQL, PostgreSQL, etc. No tan tpicas: AS/400, Hadoop, LDAP/Active Directory, SalesForce, Google Analytics, etc. Soporte para MongoDB. ElasticSearch. Archivos HL7. Capacidad de documentacin automtica. cliente REST.

Nuevos Features:

etc

Portal Web

Los usuarios pueden acceder a la informacin mediante la web en cualquier momento, desde cualquier lugar con conectividad. 100% personalizable e integrable. El Portal integra todos los mdulos de la solucin y provee servicios crticos para los usuarios como son:

Fcil acceso a informacin del negocio.

Anlisis de tipo Ad-Hoc. Scheduling de reportes de manera intuitiva. Descarga de informacin. Anlisis offline.

Tambin provee servicios para administradores:

Administracin de usuarios y seguridad. Auditoria y monitoreo de rendimiento, etc.

Portal Web

Pentaho Report Designer

Conectividad con mltiples fuentes de informacin:

Bases de datos (SQL Server, Oracle, DB2, Teradata, Sybase, ). Transformaciones de Pentaho Data Integration. Otros: Metadata de Pentaho, OLAP (XML/A, MDX), XML.

Principales Caractersticas:

Reportes pixel-perfect. Desarrollo 100% drag & drop. Utilizacin de parmetros y variables. Posibilidad de descargar la informacin en diversos formatos (html, pdf, xls, etc.).

Pentaho Report Designer

Pentaho Interactive Reporting

Capacidad de los analistas de negocio de generar sus propios reportes operativos desde la web. Seleccin de campos, totales por columna, filtros, ordenamiento, etc. Posibilidad de descargar la informacin en diversos formatos (html, pdf, excel, etc.) La Capa de negocios permite presentar la informacin a los usuarios en trminos de negocio: los usuarios ven Ventas y Clientes en vez de CUST_TBLE u ORDR_TBLE.

Pentaho Analysis

Los cubos OLAP permiten a los usuarios visualizar la informacin de manera dimensional

Ejemplo: ventas por regional, por unidad de negocio, por ao fiscal.

Navegar y explorar la informacin de manera 100% intuitiva:

Anlisis Ad-Hoc, Self-Service BI.

Drill-down, Drill-up.
Pivot, Slice and Dice. Seleccionar miembros especficos para el anlisis.

Interactuar con un alto rendimiento:

Tecnologa optimizada para manipular grandes volumenes de informacin en seg.

Pentaho Dashboards

Dashboards interactivos en minutos.

El Usuario de negocio generan su propio

Dashboard, sin interaccin de perfiles tcnicos.

Desarrollo amigable y 100% web.

Mashups de reportes & anlisis en conjunto con la generacin grficos nuevos.

Mashup de: Pentaho Reporting, Pentaho Analysis, Google Maps, websites, componentes AJAX, etc. Generacin de grficos/tablas desde scratch utilizando el esquema de metadata centralizado de Pentaho.

Link entre objetos:

Dentro del mismo Dashboard

Entre Dashboards u otros reportes de Pentaho

Pentaho Dashboards

Pentaho Dashboards

Pentaho Data Mining

Manejo sencillo e intuitivo:

Modelado drag & drop Ejecucin de experimentos

Visualizacin grfica

Funciones estadsticas y algoritmos:

Clustering y Segmentacin. Clasificaciones y regresiones. Arboles de decisin y redes neuronales.

Soporte PMML. Filtros predeterminados utilizables:

Discretizacin, normalizacin. Muestreo, seleccin de atributos. Transformacin y combinacin de atributos.

Pentaho Data Mining

Usuario: Data Miner

Enterprise Administration Console

Administracin centralizada de la plataforma:

Creacin de usuarios y grupos:

Integracin de seguridad con Active Directory/LDAP.

Configuracin de fuentes de informacin Reportes de Auditora. Monitoreo de performance de la plataforma y actividad de usuarios. Administracin de backups.

Pentaho Data Integration Console:

Ejecucin y monitoreo remoto de procesos ETL:

Anlisis de tiempos, trends, histricos.
Configuracin de umbrales de alerta

Enterprise Administration Console

Pentaho BA Suite
Pentaho Dashboards Pentaho Reporting
KPI interactivos, Mtricas y Visualizatcin

Analistas de Negocio

Reportes Operacionales

Desarrolladores

Pentaho Analysis

Data Discovery y Ad-Hoc Anlisis

Analistas de Negocio

Pentaho Data Mining

Optional Add-on

Modelos Descriptivos y Predictivos

Mineros de Datos

Pentaho Data Integration

Data Integration y Cleansing de Alta Performance

Desarrolladores y DBAs

Por qu los clientes eligen Pentaho?

Velocidad de Implementacin

ROI menor a 1 mes

Time to market de 2 semanas

Time to market de 8 semanas

Desarrollo e implantaicn en 90 das

Innovacin y escalabilidad

Archivos de + de 20 mil fuentes

Reporting operacional en 2.000 tiendas/sucursales

Brinda servicios a 2.500 brokers

Anlisis de 500.000 historias clnicas

Servicios profesionales

mejor funcionalidad y mejor soporte

soporte profesional world class

El soporte de Pentaho es tan bueno como el soft

un gran partner en cada fase de nuestro proyecto

Valor total
Costo de adquisicin 75% menor + de 350K de ahorro en licencias ROI alcanzado junto al Go Live Ahorro de USD 600K

Muchas Gracias
http://blog.datalytics.com @DatalyticsBI DatalyticsBI Datalytics Pentaho en espaol

www.datalytics.com

2das Jornadas de Data Mining UTN FFRO Noviembre 2011