migración y ecosistemaimagenes.telematica.net/2009/tech1group/2009.07.21/t3.pdf · 2009-07-30 ·...

24
14 de Julio de 2009 Migración y Ecosistema

Upload: others

Post on 20-May-2020

2 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

14 de Julio de 2009

Migración y Ecosistema

Page 2: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Objetivo

El objetivo de esta presentación es dar una mirada muy general a los principales

problemas que surgen en la implementación de un sistema de gestión.

Vamos a focalizar nuestra atención en los puntos más relevantes, mostrando las herramientas que permiten encontrar

soluciones rápidas y eficientes.

Page 3: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Agenda

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 4: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Visión General

Sistemas Operacionales : Fuente origen de los datos.

Extracción, Transformación y Carga : Herramientas que ayudan a la movilización de los datos desde las fuentes de origen hacia el sistema de gestión.

Servidor Analítico : Servidor Sybase IQ.

Modelo de gestión : Modelo de datos tipo estrella, copo de nieve o constelación.

Visualización : Herramientas que permiten extraer la información de nuestro sistema de gestión.

Monitoreo : Herramientas que permiten revisar el estado de salud del servidor de gestión, mediante el monitoreo de los recursos de nuestro servidor Sybase IQ y con ello obtener buenos tiempos de respuesta.

PowerDesigner : Herramienta que permite modelar un Sistema de Gestión, permite extraer los modelos de datos desde los sistemas operacionales, modificarlos y crear las tablas en Sybase IQ.

Page 5: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Migración y Ecosistema

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 6: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

PowerDesigner

El producto PowerDesigner permite:

• Extraer los modelos de datos desde más de 50 tipos de Bases de Datos distintas• Visualizar los modelos de datos de forma gráfica• Permite fácilmente hacer modificaciones a los modelos• Genera de forma sencilla los script de creación del modelo físico.

PowerDesigner facilita el modelamiento todo el Sist ema de Gestión:

• Permite realizar un Diseño Conceptual, independiente de la tecnología a utilizar.• Permite realizar un Modelamiento de Requerimientos de Negocio, con Diagramas UML para los Casos de Uso.• Permite el modelar el Sistema de Gestión como un flujo de procesos BPM, generando diagramas BPEL, definiendo roles y responsabilidades.

Page 7: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Migración y Ecosistema

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 8: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Servidor Sybase IQ

Servidor Analítico SYBASE IQ, especialmente diseñado para sistemas que requieren consultar

grandes volúmen de datos, obteniendo inmejorables tiempos de respuesta.

Page 9: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Migración y Ecosistema

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 10: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Herramientas ETL

Traspasar datos hacia un Sistema de Gestión no es una tarea sencilla, los modelos de datos entre sistemas cambian, por ejemplo: Un Sistema

Operacional puede estar contenido en un modelo en tercera forma normal y un sistema de gestion en

un modelo tipo estrella.

Por tal motivo los registros deben ser previamente transformados antes de su ingreso al sistema de

gestión. Esta tarea requiere de un alto consumo de tiempo y gran capacidad de procesamiento, lo cual

conlleva un elevado costo.

Page 11: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Herramientas ETL

Resolviendo el problema:

Mediante código SQL y comandos Unix : Tiene la ventaja de ser un método por todos conocido, pero con muchas desventajas, es muy difícil su mantenimiento y modificación, no existe posibilidad de incorporar meta-información, muy compleja la implementación de funciones avanzadas de transformación y no es fácil la programación del control y manejo de alertas.

Mediante la Construcción Procesos con Herramientas ETL : Estos son ambientes especializados, que permiten la definición y manipulación de objetos típicos de aplicaciones de intercambio de datos, poseen facilidades para su mantenimiento y la modificación de los procesos, permite generar meta-información y su objetivo principal es facilitar el desarrollo y la reutilización de aplicaciones que migran datos aplicando transformaciones.

Page 12: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Herramientas ETL

Page 13: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Herramientas ETL

Page 14: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Migración y Ecosistema

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 15: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Visualización

La obtención de información desde un Sistema de Gestión implementado con Sybase IQ, se puede

lograr mediante la utilización de cualquier herramienta que utilice el lenguage ANSI SQL e

implemente los estándares de conexión ODBC y JDBC.

Page 16: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Visualización

Page 17: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Visualización

Page 18: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Visualización

Page 19: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Migración y Ecosistema

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 20: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Monitoreo

El objetivo es que el Sistema de Gestión funcione correctamente siempre y para ello debemos entender que los recursos con los cuales se cuenta no son ilimit ados.

Con Bradmark Surveillance es posible:

•Monitorear Servidores en tiempo real (Sybase IQ, Sybase A SE, Sybase Replication Server, Oracle, SQLServer, DB2 y sus Sistemas Operativos.•Detectar la tasa de crecimiento de cada uno de los re cursos.•Detectar las consultas que hacen un uso intensivo d el sistema. •Anticipar las acciones mediante alertas tempranas.•Visualizar el comportamiento histórico del servidor medi ante la obtención de reportes.

Page 21: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Monitoreo

Bradmark Surveillance

Page 22: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

Monitoreo

Page 23: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

¿Consultas?

Otras Fuentesde Datos

IBMDataStage

EDW

Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

SistemasOperacionales

ExtracciónTransformación

y Carga

ServidorAnalítico

Modelode Gestión

Visualización Monitoreo

Page 24: Migración y Ecosistemaimagenes.telematica.net/2009/Tech1Group/2009.07.21/t3.pdf · 2009-07-30 · Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados,

FIN

Muchas Gracias