15_manual de Data Warehouse

BANCO NACIONAL DE PANAMÁ, BANCO DE DESARROLLO AGROPECUARIO Y BANCO HIPOTECARIO NACIONAL LICITACION ABREVIADA POR PONDERACIÓN Nº 2010-7-01-0-08-AV-000001

MANUAL DE DATA WAREHOUSE

e-IBS Data Warehouse

Manual de Guia de Usuario para Crear Reportes

Como crear Reportes utilizando el browser de e-IBS DWH Area de Trabajo De acuerdo al role asignado el usuario podra tener diferentes funcionalidades para su trabajo diario. Login : Ingrese su usuario y password asignado.

Funcionalidades segun el role asignado

a. Si es el Administrador el sistema mostrara la siguiente pantalla.

b. Si es el Diseñador de Reportes esta sera la pantalla que el sistema motrara despues de su ingreso.

c. Si es usuario o invitado esta sera la pantalla que el sistema le mostrara.

Crear Reporte

1. Vaya a la opcion Create New Report

2. Esta es pantalla donde Ud. podra crear el reporte

Sobre la izquierda, la coneccion a la fuente de datos, nombre del cubo que se utilizara. Las Dimensiones y Medidas se encuentra en la zona inferior izquierda.

1. Seleccion de los valores de las columnas del reporte.

Para este ejemplo . colocaremos los valores de la Dimension Tiempo en las columnas.

2. Luego Colocamos las Cuentas en las filas de la zona de trabajo. Esta seria la apariencia de nuestro reporte.

3. Completar el reporte agregando el valor del Balance y la moneda como filtro. El reporte muestra el

balance de las cuentas del banco para todas las oficinas , Año, Trimestre y Mes. Este modelo incluye hasta saldos por dia y la moneda se encuentra como filtro.

4. Guardar el Reporte

5. Luego de seleccionar el icono para graba el reporte, la aplicacion mostrara esta pantalla que le permitira indicar donde quedara grabado el reporte, el nombre del reporte y una breve descripcion del reporte. Ver las zonas marcadas en amarillo.

6. Este sera el resultado final, cuando vuelva a su Folder de Reportes, asi sera como la aplicacion mostrara sus reports.

Drill To en los reportes La propiedad de Drill to nos permite navegar a traves de las dimensiones, pasando de nivel en nivel para poder obtener mayor detalle de los valores o medidas. Existen dos formas de poder hacer uso de esta propiedad, right click sobre el nivel que quiere mostrar mayor detalle, luego seleccione el nivel deseado. Ejm. La Dimension del Plan de cuentas presenta tres niveles, Clase -> Tipo -> Cta Contable. Si hacemos click sobre la Clase de Cuenta, podremos seleccionar el Tipo de Cta o la Cuenta Contable. Ver. Pantalla siguiente.

Otra forma de obtener el Drill Down es hacer click en el icono marcado con una pequeña cruz. Inmediatamente el detalle siguiente o nivel sera mostrado.

Uso de Filtros en los reportes Establecer filtros es una tarea muy sencilla, click derecho sobre la dimension que quiere evaluar y solo tendra que marcar o desmarcar los valores deseados. Ver figura.

El Segundo paso para establecer el filtro, es seleccionar los valores deseados, para mostrar la data.

Esta segunda pantalla muestra la opcion de Filtros Avanzados. Brinda mas opciones a la hora de definir un filtro.

Uso de Alertas en los reportes A traves de las alertas podemos reflejar en los reportes condiciones establecidas por el usuario que no se cumplen. Ejm. Si la condicion ideal de un valor esta entre un rango determinado Ejm. Valor de Venta >= 1000 el incumplimiento de esta condicion generara una alerta en el reporte. Este valor se mostrara en diferentes colores que los demas que si cumplen dicha regla o condicion, de esta forma el usuario determinara una accion para establecer correcciones.

Alerta Simple

Ingrese la siguiente informacion, donde sea requerido :

• Nombre de la Formula : Establece el nombre de la Alerta • Activa : Establece si la alerta sera mostrada en la hoja de trabajo. Esta opciones esta marcada por

defecto. • Formula : Establece el algoritmo , regla o formula que define la alerta. • Operador : Establece la relacion entre los valores que forman la alerta. Operadores disponibles.

Menor que Menor que o Igual Igual Diferente Mayor que o Igual Mayor que Entre

• Medida o Valor : Se refiere al valor disponible del Cubo mostrado en el browser. Seleccione un valor de la lista de valores mostrada en la caja de seleccion.

• Constante: Sirve para establecer un valor constante que usara la regla de la alerta.

• Color de Caracteres : Establece el color de los caracteres que se mostraran cuando la alerta se cumpla

• Background color : Color de fondo de los valores que cumplan la alerta.

Existen otro tipo de alertas mas sofisticadas , las alertas MDX, estas alertas requieren el uso del lenguaje de programacion para OLAP MDX. Algo realmente muy util, cuando es necesario establecer algoritmos mas complejos.

Colaboracion Compartir informacion desde el mismo entorno de trabajo, sera una tarea sencilla. Solo envie el reporte por correo electronico desde su misma area de trabajo y haga todos los comentarios que necesita compartir. Alguna pregunta sobre un resultado, el poder conocer mayor detalle, solicitar algun punto de vista diferente. La propiedad de Colaboracion hace esto posible. Ejm. Este reporte muestra un balance, donde algunas celdas fueron marcadas de color Amarillo y otras de color verde. El administrador envia este correo a dos de sus colaboradores responsables de las ctas. Para poder pedir mayor detalle del resultado mostrado. Al parecer , el administrador no encuentra un comportamiento normal en dichos valores, luego de revisar su reporte y ver las alertas activas.

Crear un Grafico en un Reporte Luego de definir el diseño del reporte, podremos crear un grafico. En este caso, crearemos un reporte basado en Años , prestamos y moneda en dolares. Nota. Tambien es posible crear directamente un grafico en el area de trabajo.

Escogemos el tipo de grafico de lineas.

La hoja de trabajo muestra los datos y el grafico creado.


Manual de Referencia Servicios de Analisis - OLAP

Veriones SQL Server 2005 – SQL server 2008

e-IBS DWH basado en SQL Server Analysis Services de Sql Server – Componentes BI

e-IBS DWH emplea Microsoft SQL Server Analysis Services (SSAS) para la creacion de sus bases de datos OLAP o cubos.

SSAS ofrece funciones de procesamiento analítico en línea (OLAP) y minería de datos para aplicaciones de Business Intelligence. Analysis Services admite OLAP y permite diseñar, crear y administrar estructuras multidimensionales (Sin restricciones para el numero de Dimensiones dentro de los modelos y multiples agrupaciones de valores or measures) que contienen datos agregados desde otros orígenes de datos, como bases de datos relacionales, flat files, spread sheets, etc. En el caso de las aplicaciones de minería de datos, Analysis Services permite diseñar, crear y visualizar modelos de minería de datos que se construyen a partir de otros orígenes de datos mediante el uso de una gran variedad de algoritmos de minería de datos estándar del sector.

Arquitectura de SSAS utilizada por el e-IBS DWH. Los Servicios de Analisis de SQL Server utiliza componentes de servidor y de cliente para proporcionar la funcionalidad de procesamiento analítico en línea (OLAP) y de minería de datos para aplicaciones de Business Intelligence:

• El componente de servidor de Analysis Services se implementa como servicio de Microsoft Windows. SQL Server Analysis Services admite varias instancias en el mismo equipo, con cada instancia de Analysis Services implementada como instancia independiente del servicio de Windows.

• Los clientes se comunican con Analysis Services mediante el estándar público XML for Analysis (XMLA), protocolo basado en SOAP para emitir comandos y recibir respuestas, que se expone como servicio Web. Además, se proporcionan modelos de objetos de cliente en XMLA, a los que se puede obtener acceso mediante un proveedor administrado, como ADOMD.NET, o un proveedor OLE DB nativo.

• Pueden emitirse comandos de consulta mediante los siguientes lenguajes: SQL; MDX (Expresiones multidimensionales), un lenguaje de consulta estándar para el análisis; o Extensiones de minería de datos (DMX), un lenguaje de consulta estándar orientado a la minería de datos. También se puede utilizar el lenguaje ASSL (Analysis Services Scripting Language) para administrar objetos de base de datos de Analysis Services.

• Analysis Services también admite un motor de cubo local que permite a las aplicaciones en clientes desconectados examinar datos multidimensionales almacenados localmente. Offline Cubes

Conceptos de Analysis Services Escoger SSAS para el desarrollo de e-IBS DWH, le permite contar con funciones de procesamiento analítico en línea (OLAP), reporting y minería de datos.

Analysis Services combina los mejores aspectos del análisis tradicional basado en OLAP y la elaboración de informes basada en relaciones al permitir a los programadores definir un único modelo de datos, denominado Unified Dimensional Model (UDM), a partir de uno o más orígenes de datos físicos. Todas las consultas de usuario final desde aplicaciones OLAP, de elaboración de informes y de BI personalizadas obtienen acceso a los orígenes de datos subyacentes a través del modelo UDM, que proporciona una única vista empresarial de estos datos relacionales.

Analysis Services proporciona un amplio conjunto de algoritmos de minería de datos para permitir a los usuarios recopilar los datos mediante la búsqueda de patrones y tendencias específicos. Estos algoritmos de minería de datos se pueden utilizar para analizar los datos a través de un modelo UDM o directamente a partir de un almacén de datos físico.

Objetos de Analysis Services Una instancia de Microsoft SQL Server Analysis Services (SSAS) contiene ensamblados y objetos de base de datos para su uso con procesamiento analítico en línea (OLAP) y minería de datos.

• Las bases de datos contienen objetos OLAP y de minería de datos como orígenes de datos, vistas de

origen de datos, cubos, medidas, grupos de medida, dimensiones, atributos, jerarquías, estructuras de

minería de datos, modelos de minería de datos y funciones.

• Los ensamblados contienen funciones definidas por el usuario que amplían la funcionalidad de las

funciones intrínsecas suministradas por los lenguajes Expresiones multidimensionales (MDX) y

Extensiones de minería de datos (DMX).

Orígenes de datos (Analysis Services) usados por el e-IBS DWH Un origen de datos de Microsoft SQL Server Analysis Services (SSAS) representa una conexión a un origen de datos y contiene la cadena de conexión que define el modo en que Analysis Services conecta con un almacén de datos físico mediante un proveedor Microsoft .NET Framework administrado o un proveedor OLE DB nativo. La cadena de conexión contiene información sobre el nombre del servidor, la base de datos, la seguridad, el tiempo de espera y otra relacionada con la conexión. Analysis Services admite directamente muchos orígenes de datos. Entre los orígenes de datos admitidos se incluyen las bases de datos de Microsoft SQL Server y las creadas mediante otros productos, como Oracle, DB2, SAP, Teradata, etc. Ver. Manual de Referencia de Conectividad

Vistas de origen de datos (Analysis Services). Definicion de Relaciones entre las Fact y Dimensions en e-IBS DWH. Para SSAS de Sql Server MS una vista de origen de datos contiene el modelo lógico del esquema que utilizan los objetos de las bases de datos de Analysis Services: cubos, dimensiones y estructuras de minería de datos. Una vista de origen de datos es la definición de metadatos, almacenada en formato XML, de estos elementos de esquema que utilizan el modelo UDM (Unified Dimensional Model) y las estructuras de minería de datos. Una vista de origen de datos:

• Contiene los metadatos que representan objetos seleccionados a partir de uno o más orígenes de

datos subyacentes, o bien los metadatos que se utilizarán para generar un almacén de datos

relacional subyacente.

• Se puede generar con uno o más orígenes de datos, lo que permite definir objetos OLAP y de minería

de datos que integren datos de varios orígenes.

• Puede contener relaciones, claves principales, nombres de objeto, columnas calculadas y consultas

que no están presentes en un origen de datos subyacente y que son independientes de los orígenes

de datos subyacentes.

• No está visible ni disponible para que las aplicaciones cliente realicen consultas.

La vista de origen de datos le ofrece flexibilidad a la hora de crear objetos en SQL Server Analysis Services (SSAS), SQL Server Integration Services (SSIS) y SQL Server Reporting Services (SSRS), dado que los objetos de bases de datos Analysis Services están vinculados a los objetos lógicos contenidos en la vista de origen de datos en lugar de estar directamente vinculados a los objetos físicos subyacentes definidos en el origen de datos subyacente. Por lo tanto, el usuario puede definir objetos lógicos, como columnas calculadas o consultas con nombre, que no existen en un origen de datos subyacente y a los que es posible que no tenga permisos para definir en un origen de datos subyacente.

Cubos de SSAS Un cubo es un conjunto de medidas (valores, cantidades provenientes de sistemas transaccionales, etc) y dimensiones relacionadas que se usa para analizar datos. Las medidas se obtienen de las columnas de una o varias tablas de origen y se agrupan en grupos de medidas.

Una dimension, no existe restriccion para el numero de dimensiones, es un grupo de atributos que representa un área de interés relacionada con las medidas o valores del cubo y que se usan para analizar el comportamiento de las organizaciones. Por ejemplo, una dimensión Customer podría tener los atributos Customer Name, Customer Gender y Customer City, permitiendo conocer , descubrir el comportamiento de nuestro negocio. Los atributos se obtienen de las columnas de una o varias tablas de origen. Los atributos de cada dimensión se pueden organizar en jerarquías, tratando de representar de la mejor manera a las estructuras reales de los negocios de esta forma conseguir modelos que brinden soporte a la estrategia de negocios para la toma de decisiones.

Un cubo se compone de calculus, sumatorias, indicadores de rendimiento (KPI), acciones, particiones, perspectivas y tambien la posibilidad de Multilenguage. Los cubos son esencialmente sinónimos de un modelo UDM (Unified Dimensional Model). Para obtener más información acerca de los modelos UDM, vea Unified Dimensional Model. En Microsoft SQL Server Analysis Services (SSAS), los cubos se desarrollan en función de tablas y vistas modeladas en una vista de origen de datos. Los cubos pueden desarrollarse con o sin un origen de datos relacional subyacente.

Los Valores o Medidas de un Cubo se pueden relacionar a todas las dimensiones, en función de las jerarquías de dimensiones.

http://technet.microsoft.com/es-es/library/ms174783(SQL.90).aspx


Dimensiones (Analysis Services) En Microsoft SQL Server Analysis Services (SSAS), las dimensiones constituyen un componente fundamental de los cubos. Las dimensiones organizan los datos en función de un área de interés para los usuarios, por ejemplo clientes, almacenes o empleados. Las dimensiones en Analysis Services contienen atributos que corresponden a columnas de tablas de dimensiones. Estos atributos aparecen como jerarquías de atributo y se pueden organizar en jerarquías definidas por el usuario, o bien se pueden definir como jerarquías de elementos primarios y secundarios basadas en columnas en la tabla de dimensiones subyacente. Las jerarquías se utilizan para organizar las medidas incluidas en un cubo. En los siguientes temas se proporciona información general acerca de las dimensiones, los atributos y las jerarquías.

Medidas y grupos de medida Una medida representa una columna que contiene datos cuantificables, normalmente numéricos, que se pueden agregar. Por lo general, una medida se asigna a una columna de una tabla de hechos.

También se puede utilizar una expresión de medida para definir el valor de una medida, en función de una columna de una tabla de hechos modificada por una Expresión multidimensional. Una expresión de medida habilita la ponderación de valores de medida; por ejemplo, se puede utilizar la conversión de moneda para ponderar una medida de ventas mediante una tasa de cambio.

Las columnas de atributo de las tablas de dimensiones pueden utilizarse para definir medidas, pero generalmente son de suma parcial o no aditivas en términos de comportamiento de agregación. Para obtener más información acerca del comportamiento de suma parcial, vea Definir el comportamiento de suma parcial.

También puede definirse una medida como un miembro calculado mediante Expresiones multidimensionales (MDX) para proporcionar un valor calculado para una medida en función de otras medidas del cubo. Los miembros calculados agregan flexibilidad y capacidad de análisis a un cubo de Analysis Services. Para obtener más información acerca de los cálculos, vea Cálculos y Definir y configurar un cálculo.




Arquitectura e-IBS Data Warehouse

Arquitectura Microsoft Componentes para Business Intelligence

Modelos disponibles por el e-IBS DWH. Mapas de Dimensiones

Finanzas Balance General Tiempo Moneda Banco Plan Cuentas

Año Moneda Banco Clase Trimestre Oficina Tipo Mes Cuenta Contable Dia Medidas :

Balance Balance Neto Balance Promedio

Nota: Incluye plan de Ctas Completo

Finanzas, Cost Center Tiempo Moneda Banco Centro Costo Plan Cuentas

Año Moneda Banco Region Clase Trimestre Oficina Oficina Tipo Mes Centro Costo Cuenta Contable Dia Measures :


Nota: Centro de Costo dependera de la implementacion e-IBS Core

Finanzas, Income and Expenses Tiempo Moneda Banco Centro Costo Ctas. Ingresos & Gastos



Nota: Muestra solamente las Ctas de Ingresos y Gastos

Finanzas, Treasury Tiempo Moneda Banco Centro Costo Ctas. Tesoreria



Nota: Perspectiva Ctas de Ingresos y Gastos. Flag en definicion de Ctas.

Prestamos

Time Product Customer Banco Moneda Oficial Pais Riesgo

Uso Fondos Fuente Fondos

Call Report Purpose Rollover Plan Cuentas GL

Centro Costo

Año Clase Tipo Bank Moneda Oficial Pais Riesgo

Uso de Fondos

Fuente Fondos

Report Purpose Rollover Clase Centro Costo

Trimestre Tipo Industria Oficina Tipo

Mes Producto Cliente Cuenta

Dia Cuenta

Measures : Monto Original Prestamo Tasa Base Tasa Flotante Tasa Re Inicio Saldo Monto Principal Interes Acumulado YTD Interes Acumulado LTD

Interes Pagado YTD Interes Pagado LTD Cargos Acumulados por Retrazo LTD Cargos por Retrazo Pagados YTD Comisiones Pagadas YTD Comisiones Pagadas LTD Deducciones Acumuladas LTD

Deducciones Pagadas YTD Deducciones Pagadas LTD Impuestos Acumulados LTD Impuestos Pagados YTD Impuestos Pagados LTD Principal Moroso Interes Moroso

Num. Veces Vencido Pago Principal Mensual Pago Interes Mensual Cargos por Retraso Mensual Comisiones Mensual Taxes Mensual Deducciones Mensual

Iva Mensual Garantia del Principal Mensual Interes de la Garantia Mensual Cargos por Retrazo Garantia Mensual Comisiones Garantia Mensual Impuestos Garantia Mensual Deducciones Garantia Mensual

Depositos


Plan Cuentas GL

Centro Costo

Call Report RollOver


Clase Centro Costo

Call Report RollOver



Dia Cuenta

Measures : Monto Original Deposito Interes Base Interes Flotante

Revision de Tasa Monto Actual del Principal Interes Acumulado YTD

Interes Acumulado LTD Interes Pagado YTD Interes Pagado LTD

Impuestos Retenidos QTD Impuestos Retenidos YTD

Retail


Plan Cuentas GL

Centro Costo


Clase Centro Costo



Dia Cuenta

Measures : Balance Neto Balance Bruto Balance No Recolectado Cantidad Retenida

Balance Bruto Promedio Balance Promedio Neto Tasa Interes Promedio OD Interes Acumulado LTD

Interes Acumulado Interes Pagado Mensual Total Credito Mensual Num. de Cheques Depositados

Num Chqs. Rechazados Fondos Num Chqs. Rechazados Otros Total Comision Mensual Impuetos Retenidos QTD

Impuestos Retenidos YTD

Maturity – Vencimiento de Activos y Pasivos


Plan Cuentas GL

Centro Costo

Rangos Vencimiento


Clase Centro Costo

Rangos



Dia Cuenta

Measures : Principal Payout Due Interest Payout Due

Principal Rcpt. Due Interest Rcpt. Due

Rangos Vencimiento : 1 – 30 Dias 31 – 60 Dias 61 – 90 Dias 90 – Mas Dias

Estos valores dependeran de la definicion en el core.

Morosidad - Delinquency


Plan Cuentas GL

Centro Costo

Call Report Collateral


Clase Centro Costo

Call Report Collateral



Cuenta

Measures : Monto Total Prestamo Principal Moroso Interes Moroso Principal Vencido Mensual

Interes Vencido Mensual Cargos por Retrazo Vencido Mensual Comisiones Vencidas Mensual Impuestos Vencidos Mensual

Principal Recolectado a Tiempo Mensual Interes Recolectado a Tiempo Mensual Principal Arrear Recolectado Mensual Interes Arrear Recolectado Mensual

Cargos por Retrazo Recolectados Mensual Comisiones Recolectadas Mensual Impuestos Recolectados Mensual Tasa para Recoleccion a Tiempo Arrear Tasa de Recoleccion

Morosidad por Rangos - Delinquency Bucket


Plan Cuentas GL

Centro Costo

Rangos Morosidad


Clase Centro Costo

Rangos



Cuenta

Measures : Principal Moroso Interes Moroso Comisiones Vencidas

Deducciones Morosas Impuestos Vencidos

Rangos Morosidad :

1 – 30 Dias 31 – 60 Dias 61 – 90 Dias 90 – Mas Dias

Estos valores dependeran de la definición en el core.

Analisis Variacion Tasa Interes - Interest Rate Gap Analysis


Plan Cuentas GL

Centro Costo


Clase Centro Costo



Cuenta

Measures : Gap Fijo Gap Variable

Nota. Gap entre Tasa Fija de Activos y Tasa Activa de Pasivos, Gap entre Tasa Variable Activos y Tasa Variable de Pasivos.

Compliance – Regulatorio – Lavado Dinero


Plan Cuentas GL

Centro Costo


Clase Centro Costo



Cuenta

Measures : Cash Deposit Limit Other Deposit Limit Cash Witholding Limit Gross Avg Balance Actual

Checks Paid Limit Outgoing Wires Limit Incoming Wires Limit Number of Transac Blocked

Net Average Balance Limit Gross Average Balance Limit Cash Deposit Actual Total Amount Blocked

Other Deposit Actual Cash Witholding Actual Checks Paid Actual Outgoing Wires Actual

Incomming Wires Actual Net Avg Balance Actual

Rendimiento Oficiales – Officer Performance

Time Product Customer Banco Moneda Oficial Centro Costo

Geo

Año Clase Tipo Bank Moneda Oficial Centro Costo

Pais

Trimestre Tipo Industria Oficina Estado

Mes Producto Cliente Ciudad

Dia Cuenta Comuna

Measures : Nuevas Ctas Abiertas Cuentas Cerradas Mes in Libro

Cuentas Estado Dormant Balance Bruto Promedio Balance Neto Promedio

Num Deposito RollOver Monto Deposito RollOver Prestamos Morosos

Principal Moroso Prestamos Cerrados Rentabilidad

Rentabilidad Clientes – Customer Profitability

Time Product Customer Banco Moneda Oficial Centro Costo

Risk Country Geo

Año Clase Tipo Bank Moneda Oficial Centro Costo

Risk Country Pais

Trimestre Tipo Industria Oficina Estado

Mes Producto Cliente Ciudad

Cuenta Comuna

Measures : Balance Promedio Mensual Balance Fin de Mes Interes Ganado

Interes Pagado Costo de Fondos Yield de Fondos

Costo de Operacion Pago por Ingreso Renta Neta Cliente

Variacion de Liquidez - Liquidity Gap Analysis Cube


Plan Cuentas GL

Centro Costo

Rangos Vencimiento


Clase Centro Costo

Rangos



Dia Cuenta

Measures : Principal Payout Due Interest Payout Due Gap

Principal Rcpt. Due Interest Rcpt. Due

Rangos Vencimiento : 1 – 30 Dias 31 – 60 Dias 61 – 90 Dias 90 – Mas Dias

Estos valores dependeran de la definicion en el core.


Manual de Referencia Elementos de Flujo de Datos

(Origen, Transformacion, Destino)

Elementos de Flujo de Datos SQL Server Integration Services entrega tres tipos de componentes para el flujo de datos : Origen de Datos, Componentes para Transformar datos y Componentes para determiner el destino de los datos.

Origen de Datos, extraen la data desde diferentes Fuentes, tablas y vistas en base de datos relacionales, archives and Bases de datos multidimensionales (OLAP).

Los components de transformacion de datos modifican, sumarizan, y limpian los datos, finalmente los componentes para determiner el destino de datos , como su propio nombre lo indica, determinan el destino final de los datos or tambien ayuda a crear datasets en memoria permitiendo mejorar el rendimiento de los procesos de extraccion, transformacion y carga.

Adicionalmente, los servicios de integracion de Sql Server, permiten enlazar estos componentes , permitiendo crear desde la mas sencilla conversion hasta complejos flujos de transformacion de datos.

El siguiente diagrama muestra un diagram de flujo de datos que tiene una fuente, un componente de transformacion con una entrada, una salida y un componente destino. El Diagrama incluye las entradas, salidas y la salida de un mensaje de error que acompana a la salida del componente.

Componentes de Origen de Datos o Fuentes

En los Servicios de Integración, el origen o fuente es el componente de flujo de datos que permite la disponibilidad de los datos de diferentes origenes, permitiendo iniciar el proceso de flujo de datos y sirviendo de insumo para los demas componentes de transformacion y destino.

El origen o fuente de un flujo de datos tipicamente tiene por lo general una salida. Esta salida esta formada por columnas, las cuales son agregadas al flujo de datos.

La salida o “output” entrega columnas externas. Una columna externa es una columna del origen de datos. Ejm. La columna Account Class de la tabla de Product de la base de datos del Core system es una columna externa que puede ser agregada a la salida del component de Origen de Datos. Los datos acerca de esa columna o medatada hacen referencia al Nombre, Tipo de Dato y longitud de la columna.

Un error dentro del proceso de flujo de datos , tambien puede ser controlado por el Componente de Origen de Datos, las columnas disponibles para producir una salida de datos y obtener la informacion de dicho evento, es igual a la salida regular de datos. Ejm. Si hacemos la consistencia o validacion de un Codigo de Producto antes de ser llevado a la base de datos y esta tarea produce error podremos contar con toda la informacion acerca de las columnas que forman el registro.

Todas las columnas que forman la salida de un componente de Origen o fuente de Datos quedaran disponibles para ser utilizadas como el input o entrada de datos del proximo component dentro del flujo.

Componentes de Transformacion de Datos

La capacidad de transformacion de datos son muy variadas. Los Componentes de Transformación pueden realizar tareas de Actualizacion, Sumarizacion, Limpieza , Merging y Distribucion de Datos.

Las Entradas y Salidas de una Transformacion definen nuevas entradas o salidas de datos. Dependiendo de la operacion realizada sobre los valores dentro del component, algunas transformaciones tienen solo una entrada y multiples salidas, mientras que otras transformaciones tienen multiples ingresos y una sola salida. Los componentes de Trasnformacion pueden también incluir salidas de errores (logs), las cuales brinda informacion acerca de algun inconveniente o error dentro del proceso, esta informacion estara acompañada de los datos que presentaron el problema. Ejm. Una conversion de un valor numerico a una cadena de caracteres o fecha .

Los servicios de integracion de datos de Sql Server de Microsoft no restringe el numero de Ingresos, Salidas Normales o Salidas product de algun error (Log) que los componentes de transformacion pueden contener. En el desarrollo de un flujo de datos, el usuario puede crear tranformaciones personalizadas que incluyan cualquier combinacion de Entradas , Salidas y Salidas de Error (logs).

The input of a transformation is defined as one or more input columns. Some Integration Services transformations can also refer to external columns as input. For example, the input to the OLE DB Command transformation includes external columns. An output column is a column that the transformation adds to the data flow. Both regular outputs and error outputs contain output columns. These output columns in turn act as input columns to the next component in the data flow, either another transformation or a destination.

La Entrada de un Componente de Transformacion esta definido por una o mas columnas de entrada. Algunas Transformaciones de los Servicios de Integracion de Datos de Sql Server tambien pueden hacer referencia a columnas externas como Input o Entradas. Por ejemplo, la entrada para el OLE DB Command Tranformation incluye columnas externas. Una Salida de datos es una columna que el Componente de Trasnformacion agrega al Flujo de Datos. Ambos Salidas Regulares y Salidas por Errores contienen Columnas de Salida. Estas columnas pueden servir como entrada para el proximo componente en el flujo de datos o tambien como producto final del proceso.

Componentes Destino de los Servicios de Integracion de Datos

El Destino es un Componente de Flujo de Datos de los Servicios de Integracion de SQL server de Microsoft, que llevara los datos a un destino final o almacen de datos. Ejm. Un base de datos relacional, una base de datos multimensional, un file , un spreadsheet, etc. , tambien puede crear grupos de datos (dataset) en memoria, mejora el rendimiento del proceso.

Un Componente de Destino de los Servicios de Integracion de Sql Server debe tener al menos una Entrada. La entrada esta formada por varias columnas de “Input”, las cuales vienen de otro Componente del Flujo de Datos. Las Columnas de “Input” son trasnferidas a comlumnas equivalente en el Destino. Mapeo de Datos.

Muchos Componentes Destino tambien tienen una Salida de Error. La Salida de Error, contiene informacion acerca de los errores que ocurren cuando se escriben los datos es en su destino final. Los errores pueden ocurrir por diferentes razones. Ejemplo, una columan podria contener un valor nulo y ser enviada a una columna que haya sido declarada para no recibir valores nulos.

Los Servicios de Integracion de datos de Sql Server Ms no restringen el numero de Inputs y Salidas de Error que un Componente destino podria tener, ademas se puede crear Destinos personalizados que permitan multiples Entradas y Salidas de Errores.

Metadata Externa Cuando Ud. Crea un flujo utilizando el diseñador de SSIS, los datos de las columnas de los Componentes Origen and Destino se copian a columnas externas de los mismo componentes, sirviendo de esta forma como una fotografia del esquema de trabajo. Cuando los Servicios de Integracion de datos valida los flujos, el Servicio de Integracion de datos de MS compara esa fotografia del esquema contra el esquema de los componentes de Origen o Destino, de esta forma publica los errores y avisos, dependiendo de los cambios realizados.

Los Servicios de Integracion de Datos de Ms brinda la posibilidad de trabajar bajo un modo OFFLINE. Cuando Ud trabaja bajo el modo Offline no se establece ninguna conexion a las Fuentes de datos o destino de datos, asi la informacion de las columnas de datos (metadata) no es actualizada.

Inputs and Outputs

Los Componentes de Origen o Fuentes tienen Salidas (Output), los Componentes Destino tienen Entradas (Inputs), y los componentes de Transformacion tienen ambos, Entradas y Salidas. Adicionalmente, muchos Componentes de los flujos de datos pueden ser configurados para usar las Salidas de Error (Logs).

Entradas (Inputs) Los Componentes de Destino y Transformacion tienen Entradas. Una Entrada (Input) contiene una o mas Columnas de entrada, las cuales pueden hacer referencia a columnas externas si el Componente flujo de datos ha sido configurado para usarlas. Las entradas pueden ser configuradas para monitorear y controlar el Flujo de Datos: Por ejemplo, Ud. Puede especificar si el Componente deberia de detenerse en respuesta a un error, ignorar el error, o redireccionar los registros con problemas a los files de logs. Ud puede tambien asignar una descripcion a la Entrada (Input) o actualizar su nombre.

Salidas (Outputs) Los Componentes de Origen y Transformacion siempre tienen Salidas (Outputs). Una Salida contiene una o mas Columnas de Salida, las cuales pueden hacer referencia a columnas externas si los componentes han sido configurados para usarlos. Por ejemplo, Ud. puede indicar si la Salida debera ser ordenada. Ud. Puede tambien asignar descripciones a las salidas, o actualizar su nombre.

Salidas de Error (Error Outputs) Los componentes de origen , destino y tranformacion pueden incluir Salidas de Error. Ud puede especificar como el componente del flujo de datos responde a errores en cada Entrada o Columna a traves de uso de la Configuracion de Salida de Errores. Si un error o impedimento de carga de los datos ocurre en el momento de ejecucion y el componente de flujo de datos ha sido configurado para redireccionar los registros, todas las filas seran enviadas a la Salida de Error. Por defecto, una Salida de Error contiene las Columnas de Salida y dos columnas de error: ErrorCode and ErrorColumn. Las Columnas de Salida contienen las data con problemas , ErrorCode entrega el Codigo de Error, y ErrorColumn identifica la columna con problemas.

Columnas Entradas, Salidas, y Salidas de Error son colecciones de columnas. Cada columna es configurable y depende del tipo de columna – Entrada, Salida, o Externa – Los servicios de integracion de datos de Sql Server permite asignar diferentes propiedades a las columnas.

Paths Los Paths conectan los Componentes de Flujo de Datos. En el diseñador de servicios de integracion de datos, Ud puede ver y modificar las propiedades de los path, ver la informacion de la data de salida, y crear los Data Viewers, que nos ayudaran a ver los resultados de las salidas antes de pasar al proximo componente dentro del flujo.

Fuentes de los Servicios de Integracion del e-IBS DWH basado en SQL Sever Componentes BI. Las Fuentes son los componentes de Flujo de Datos que hace posible la disponibilidad de data de diferentes origentes para el flujo de datos. Las Fuentes tienen una Salida y muchas pueden contar tambien con una Salida de Error.

Existent res tipos de Fuentes de Datos:

• Fuentes (Drivers que establecer conexion con origen de datos) que se establecen al momento de instalar

los componentes de Servicios de Integracion

• Fuentes que estan disponibles desde el mismo site de Microsoft

• Fuentes personalizadas, pueden ser creadas por el propio equipo de trabajo.

Built-In Sources

La siguiente lista de Sources se establecen al momento de la instalacion de los componentes de Integracion de Datos. e-IBS DWH puede usar cualquiera de ellos, si asi lo require.

Source Description

ADO NET Source Consumes data from a .NET Framework data provider. Excel Source Extracts data from an Excel file. Flat File Source Extracts data from a flat file. OLE DB Source Consumes data from an OLE DB provider. Raw File Source Extracts raw data from a file. Script Component Uses script to extract, transform, or load data. XML Source Extracts data from an XML file.

http://msdn.microsoft.com/en-us/library/ms137897.aspx







Fuente Descripcion Oracle Source

The Oracle source is the source component of the Microsoft Connector for Oracle by Attunity. The Microsoft Connector for Oracle by Attunity also includes a connection manager and a destination. For more information, see the download page, Microsoft Connectors for Oracle and Teradata by Attunity.

SAP BI Source

The SAP BI source is the source component of the Microsoft Connector for SAP BI. The Microsoft Connector for SAP BI also includes a connection manager and a destination. For more information, see the download page, Microsoft SQL Server 2008 Feature Pack.

Teradata Source

The Teradata source is the source component of the Microsoft Connector for Teradata by Attunity. The Microsoft Connector for Teradata by Attunity also includes a connection manager and a destination. For more information, see the download page, Microsoft Connectors for Oracle and Teradata by Attunity.

Custom Sources Ud. Tambien podra escribir su propio codigo para establecer alguna conexion espeficica.

http://go.microsoft.com/fwlink/?LinkId=131006






Manual de Referencia Conectividad

(Drivers Disponibles)

Proveedores de Conectores de Datos y los Servicios de Integracion de Datos

e-IBSDWH puede utilizar cualquiera de estos conectores para el acceso y escritura de datos. e-IBSDWH utiliza los servicios de integracion de datos de SQL Server , componente BI.

Fuente de Datos

Fabricado por

Data Access API

Versiones que Soporta

Soporte del fabricante de base

datos para SSIS?

Soporta 64-bit?

SQL Server Microsoft OLE DB 2000 and later versions Y x64, IA64

SQL Server Microsoft ADO.NET 2000 and later versions Y x64, IA64

SQL Server Microsoft ODBC 2000 and later versions Y x64, IA64

SQL Server Attunity OLE DB 2000 and later versions Y

SQL Server DataDirect OLE DB 2000 and later versions Y

DB2 Microsoft OLE DB All DRDA compliant versions

Y x64, IA64

DB2 IBM OLE DB z/OS and UDB 7.0 and later, AIX 5.0 and later, AS400 4.5 and later versions

Y

DB2 Attunity OLE DB 6.1, 7.x, 8.0 on z/OS

7.x, 8.0 on UNIX

7.x, 8.0 on Windows

Y

DB2/400 Attunity OLE DB On AS/400 5.1 and later versions

Y

DB2 DataDirect ADO.NET z/OS and UDB 7.0 and later,

AIX 5.x, AS400 4.5 and later versions

Y

DB2 ETI Bulk Load 8.0 and later versions Y

Oracle Microsoft ADO.NET 8.0 and later versions Y x64, IA64

Oracle Oracle Corp

OLE DB 8i and later versions Y x64, IA64

Oracle Oracle ADO.NET 8i and later versions Y x64, IA64

Corp

Oracle Attunity OLE DB 9i and later versions Y

Oracle DataDirect OLE DB 8i and later versions Y

Oracle DataDirect ADO.NET 8i and later versions Y

Oracle ETI Bulk Load 9.0 and later versions Y

SAP1 Microsoft ADO.NET R/3 4.6C and later versions

Y

SAP Theobald OLE DB R/3 Y

Access Microsoft OLE DB 2003 and earlier versions

Y

Excel Microsoft OLE DB 2003 and earlier versions

Y

Office 2007 Microsoft OLE DB 2007 Y

Sybase Attunity OLE DB 12.0 and later versions Y

Sybase DataDirect OLE DB 11.5 and later versions Y

Sybase DataDirect ADO.NET 11.5 and later versions Y

Informix Attunity OLE DB 7.31, 9.x, 10 Y

Teradata ETI Bulk Load 2.5 and later versions Y

Teradata ETI Bulk Extract

2.5 and later versions Y

FoxPro Microsoft OLE DB 8.0 and later versions N

File DBs Microsoft OLE DB Any Jet 4.0 compatible version

N

Adabas Attunity OLE DB 6.2.2 to 7.4.x on z/OS

3.3 to 5.1 on Open Systems (UNIX, Windows, OpenVMS)

Y

CISAM Attunity OLE DB On UNIX Y

DISAM Attunity OLE DB On UNIX, Linux, and Windows

Y

Ingres II Attunity OLE DB 2 to 2.56 Y

Oracle Rdb Attunity OLE DB 7.1.x, on OpenVMS Alpha and Integrity (Itanium)

Y Y (HP Integrity)

RMS Attunity OLE DB On OpenVMS Alpha and Y Y (HP

1 Product is in beta

Integrity (Itanium) Integrity)

Enscribe Attunity OLE DB On HP NonStop G-Series and H-Series

Y Y (HP Integrity)

SQL/MP Attunity OLE DB On HP NonStop G-Series and H-Series

Y Y (HP Integrity)

IMS/DB Attunity OLE DB 6.1 and later versions Y

VSAM Attunity OLE DB On z/OS 1.1 and later versions

Y


Hoja de Datos Analyzer by Strategy Companion

La combinacion de Analyzer y SQL

Server de Microsoft ha creado una de las mejores aplicaciones para Business Intelligence, ofreciendo avanzadas funcionalidades de una manera facil de usar y administrar, con una habilidad probada de soportar grandes ambientes de trabajo y todo a un bajo costo de adquisicion.

Los gerentes de Tecnologia de Informacion aprecian la flexibilidad de la arquitecutra de Analyzer para el desarrollo. Dependiendo de la preferencia de la organizacion y usuarios, Analyzer puede ser utilizado sin la necesidad de instalar ninguna otra aplicacion en su pc –zerofootprint- directamente desde un web browser como Internet Explorer o tambien a traves de los portales de SharePoint.

La configuracion mas comun de Analyzer considera la opcion de tener un web server bajo IIS, este se conecta al OLAP Server (SSAS) – por lo general se utliza diferentes servidores - . Analyzer tambien presenta un excelente rendimiento en un ambiente load-balanced, donde el IIS recibe una carga balanceada de varios servers.

Esto funciona muy bien para el manejo de multiples, usuarios concurrentes en grandes organizaciones, y ofrece a los usuarios alta disponibilidad. Analyzer tambien se integra con su actual Active Directory y tambien puede

integrarse con LDAP y otras configuraciones de seguridad tal como Kerberos.

Analyzer tambien se integra directamente con los accesos de datos definidios por los servicios de Analysis Services, encargados del soporte de sus cubos, para poder entregar solo la data necesaria a los usuarios indicados.

Analyser es ASP.NET / DHTML puro y fue escrito especificamente para SQL Server Analysis Services componente BI de SQL Server 2005 /2008.

Los usuarios pueden crear Paginas Web de SharePoint personalizadas tan solo añadiendo “web parts” que muestren los resultados de Analyzer. Los usuarios tambien pueden llegar hasta Analyzer a traves de una pagina de SharePoint . Analyzer tambien fue creado para integrarse facilmente a Microsoft Officer PerformancePoint Server, Microsoft Excel, Microsoft Internet Explorer, Microsoft SQL Server Reporting services, y otras mas. Esta flexibilidad permite a las organizaciones operar en ambientes de trabajo familiars, asegurar un rapido aprendizaje y establecer relaciones duraderas con los usuarios.

“Las Compañias que compiten analiticamente no encargan estas actividades a solo un grupo dentro de la compañia o a diferentes empleados a traves de la organizacion. Estas administran el analisis como una organizacion, bajo un enfoque holistico asegurando que ningun proceso o unidad de negocio es optimizado a cuestas de otro al menos que asi lo requiera”. –Thomas H. Davenport & Jeanne G. Harris 2007. Competing on Analytics: The New Science of Winning. Boston: Harvard Business School Press.

El valor de la informacion esta siendo extendido mas haya de los usuarios internos de negocios , llegando a los clientes, partners, distribuidores y proveedores. Esto es conocido como “pervasive BI” (que se esparce por todos , que llega a todos). Para que el proceso de BI se convierta en un proceso que vaya mas haya de la organizacion, necesita ser de facil acceso, de facil entendimiento, y facil de compartir con todos los usuarios, dentro y fuera de la compañia. Hoy, todos se benefician de este tipo de BI asi como ayudan al mejor manejo del rendimiento en los negocios.

BI, Hagalo Ud. mismo

Obtener data y desarrollar reportes puede tomar una cantidad de tiempo considerable y tambien recursos de TI. Muchos departamentos de Tecnologia de Informacion tienen colas de espera para la entrega de trabajos de informes , semanas y aveces meses de espera, ahora las compañias no

pueden esperar tanto. Aun cuando TI pueda resolver rapidamente estas colas de trabajo, los usuarios finales no pueden predecir cada reporte que ellos podrian necesitar en el futuro. En la actualidad

Facil de Aprender

Muchas herramientas de BI requieren cursos de entrenamiento en persona, limitando el desarrollo a un selecto pequeño grupo de usuarios y limitando a todos los demas. Con Analyzer, cualquier usuario , en cualquier nivel de la empresa puede empezar inmediatamente a crear reportes. No es necesario un entrenamiento formal. El diseño amigable de Analyzer, su interfase de trabajo facil de usar con tan solo usar el mouse y su intuitivo entorno, hace muy sencilla la tarea de crear reportes de alto rendimiento.

Reducir la carga de trabajo de TI y los costos

El desorrollo de reportes no es la unica carga del departamento de Tecnologia. Estan los costos iniciales para desarrollar herramientas para crear reportes, asi como la instalacion y las actividades de configuracion. El costo de mantener Herramientas para la creacion de reportes puede rapidamente sobrepasar los costos de desarrollo iniciales. Llevar BI mas haya de la paredes de la organizacion se convierte en una tarea mas dificil cuando hay poco o no existe control sobre los usuarios. Analyzer, elimina

esas cargas en TI, haciendo esta tarea simple de desarrollar, administrando y llevando BI para todos dentro y fuera de la organizacion.

Rapido Desarrollo

Analyzer eleva la existencia de su infraestructura de TI, integrandose facil y directamente con las tecnologias de Microsoft.

Analyzer se instala facilmente sobre un servidor de Microsoft con IIS . No hay necesidad de hardware adicional, porque los usuarios solo necesitan de un browser como el Internet explorer para poder ver su informacion. Zero-footprint , no se necesita instalar nada adicional en el cliente para usar el Analyzer.

No se usaran mas los escasos recursos de TI para la instalacion, configuracion y soporte a los usuarios finales.

Una solucion segura

Una seguridad basada en roles entrega a los usuarios niveles de acceso que atienden sus necesidades. Analyzer utilize Active Directory para controlar el acceso, pero tambien puede trabajar con otros mecanismos de seguridad tal como LDAP.

Analyzer tambien le permitira controlar el acceso a data specifica para cada usuario, asi como acceso a

reportes y dashboards. Esto quiere decir que cada Reporte y dashboard es capaz de mostrar dierentes grupos de datos a diferentes usuarios. Ejm. El uso de perspectivas.

De simple mantenimiento

No solo es facil de instalar y desarrollar, sino que una vez que este en produccion su mantenimiento es una tarea simple. Los requerimientos de Analyzer no necesitan un monitoreo especial porque esta basado en las tecnologias de Microsoft y puede ser supervisado utilizando las mismas herramientas que utilize SQL Server y IIS.

Una solucion Escalable

Una solucion exitosa de BI debe ser capaz de manejar , de atender cientos o miles de usuarios simultaneamente. Analyzer ha sido diseñado con estas consideraciones importantes en mente y es capaz de soportar las mas exigente carga de usuarios.

Facil de hacer crecer

Cualquier usuario autorizado con un web browser puede tener acceso a todas las funcionalidades de Analyzer, de acuerdo a los niveles o permisos que se le haya asignado, haciendo facil extender el proceso de BI mas haya de las paredes de la organizacion.

System Requirements

Prior to installing Analyzer, you need to ensure that the following hardware and software are already installed on your machine.

Antes de realizar la instalacion de Analyzer, necesitara asegurar que el siguiente Hardware y Software este instalado.

Hardware (Minimo)

The hardware requirements to install Analyzer include:

• Procesador : Intel Dual Core or higher, Analyzer support 64x.

• Memory: 1 GB RAM minimo (Mayor igual de 2 GB is recomendado)

• Sistema Operativo: Microsoft Windows Server 2003

Nota:

Analyzer puede trabajar con arquitecturas de two-tier y three-tier

• Arquitectura Two-tier – SQL Server y Analyzer estan en el mismo sistema. Los usuarios usaran una conexion de cliente para accede al Analyzer

• Arquitectura Three-tier - SQL Server se encuentra en el servidor de datos, Analyzer se encuentra en un servidor medio (web server). Los usuarios usaran un aplicacion cliente para acceder a la data . Ejm. Web Browser.

Software

Aun cuando el producto pueda ejecutarse sobre versiones antiguas de SQL server , es conveniente utilizar las versiones mas actualizadas. Antes de instalar Analyzer, instale y configure las siguientes aplicaciones:

• Microsoft SQL Server 2000 Service Pack 4 (SP4) or higher



• Microsoft Analysis Server 2000 Service Pack 4 (SP4) or higher



• Internet Information Services (IIS) version 6 or IIS 7.0 with IIS 6.0 compatibility turned on

• Microsoft .NET framework version 2.0

• Microsoft ADOMD.NET 9.0

Configuracion de Ambiente o entorno

Antes de instalar Analyzer asegurese que las siguientes aplicaciones esten ejecutandose :

• SQL Server

• Analysis Services

• IIS

• Haya ingresado al sistema como Administrador o como un usuario con privilegios de Administrador

• Los privilegios de un Administrador OLAP son asignados al Administrador del sistema por default.

The user who installs and configures Analyzer is the Administrator for the application. If you want to grant this privilege to another user, you would need to log into the user‟s account (ensuring appropriate Administrator privileges for that user) and perform the installation as that user.

15_manual de Data Warehouse

Documents

siguiente pantalla

pantalla siguiente

folder de reportes

diseador de reportes

nivel sera mostrado

usuario podra

valores deseados

banco nacional