🚀PROMO #PLANCARRERA2024| 🔥Bonificaciones, Precios Congelados y Cuotas
✒️SAP BI / BW BO Introducción al ETL
SAP BI / BW BO Introducción al ETL
Proceso ETL = Flujo de datos.
El proceso ETL está constituido por los pasos que deben seguir los datos en su estado inicial (sistema fuente) para que sean extraídos, transformados y cargados en SAP BW.
Proceso de Extracción: Aquí se extraen los datos desde los sistemas fuente, hay que tomar en cuenta que un Datawarehouse puede estar formado por datos provenientes de diferentes sistemas fuente, una parte muy importante en este proceso es que se deben analizar los datos a extraer para ver cuales nos pueden ser útiles y cuales no y así evitar datos innecesarios en nuestro sistema, también se debe tomar en cuenta cual es el impacto que genera una extracción de datos en el sistema fuente, ya que podría perjudicar a los sistemas transaccionales y complicar la operatoria diaria de la empresa.
Proceso de Transformación: Este proceso busca adaptar los datos extraídos en datos que finalmente serán cargados en el Datawarehouse, estos datos se adaptarán en base a las reglas preestablecidas del negocio, entre las modificaciones que pueden ocurrir tenemos:
Codificación, por ejemplo que se establezca que el producto "Chocolate" será almacenado con "CH".
Generar registros con cálculos totales u otro tipo de cálculo, por ejemplo: Importe_Total = Importe_Producto Impuestos.
Armar varias columnas partiendo de una sola o viceversa, por ejemplo, si tenemos los campos Nombre = "Juan" y Apellido = "López" se pueden almacenar en un solo campo Nombre = "Juan López".
Establecer algún otro tipo de cambio basado en la estructura en la cual llegan los datos extraídos y como se quieren hacer llegar al sistema, por ejemplo, si un campo viene del sistema fuente de la siguiente forma: Nombre = "Juan#López" y no queremos el separador # podemos hacer que llegue al sistema como Nombre = "Juan López".
Generar campos claves en el destino de datos, por ejemplo si determinamos que los caramelos serán representados por el valor 000321 entonces el campo Producto podría tener los siguientes valores para determinar un mismo producto con su respectivo sistema fuente: SAP000321, FIL000321 (FIL = Archivo/File).
Proceso de Carga: Este es el proceso en el cual los datos ya han pasado por la fase de transformación y son cargados en el sistema SAP BW, en algunos casos se sobreescriben los datos que se obtienen y en otros se va almacenando un historial de los registros para determinar como va cambiando un determinado valor a lo largo del tiempo, las cargas pueden ser realizadas de 2 maneras:
Cargas Full: Este tipo de cargas generalmente se realizan inicialmente y es cuando queremos que pasen todos los datos de la fuente al destino.
Cargas Delta: Con este tipo de carga sólo traeremos a nuestro sistema los datos que aún no han sido almacenados. Estas cargas son importantes ya que con ellas evitamos que se sobrecargue el sistema fuente mediante todas las veces que realizamos una carga.
Importante: El proceso de ETL se verá reflejado de dos maneras, la versión 3.x y la versión 7.0 (la que se utilizará a lo largo de la carrera), entre las ventajas de esta última tenemos: Mejora en el performance de las cargas ya que se pueden paralelizar procesos, es mas sencillo el proceso de creación y mantenimiento del flujo y se mejora el manejo de errores en caso de encontrar registros erróneos en la PSA.
Sobre el autor
Publicación académica de Jose Daniel Gomez Durand, en su ámbito de estudios para la Carrera Consultor en SAP BI / BW BO.
SAP SemiSenior
Jose Daniel Gomez Durand
Profesión: Consultor Sap Bi/analista de Gestión de Documentos. - Venezuela - Legajo: PW65Z
Continúe aprendiendo sobre el tema "Introducción al ETL" de la mano de nuestros alumnos.
SAP SemiSenior
Unidad 2: Proceso de ETL Lección: Introducción al ETL 1. Proceso ETL Llamado tambien Flujo de Datos. Extracción, transformación y carga en SAP BI. 2. Proceso de Extracción Busca inicialmente obtener datos y dejarlos listos para que se pueda aplicar algun proceso de transformación. Debe existir una fase de análisis. Determinar impacto para evitar afectar el sistema fuente, generalmente son sistemas transaccionales. Proceso de Transformación Busca adaptar los datos extraídos que finalmente serán cargados en el DW. Adaptaciones de los datos basándose en reglas preestablecidas del negocio. - Codificar - Obtener nuevos valores - Generar campos claves - Generar registros...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Senior
Introducción al proceso ETL (Extract, Transformation, Load) Tambien se le puede llamar Flujo de datos, es el proceso que debemos realizar para tomar los datos que necesitamos de los sistemas fuentes, transformarlos y cargarlos a la bodega de datos, en nuestro caso SAP BI. Extracción: Es el proceso de extraer los datos que necesitamos llevar a la bodega de datos y que se encuentran en los sistemas origen. A tener en cuenta el momento en que realizamos la extracción de los sistemas origen para no afectar la transaccionalidad de éstos (por lo general se programa para que este proceso se realice en la madrugada) Transformación: Es el proceso de realizar la transformación de los datos que extraímos...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Senior
Introducción al Proceso ETL Proceso ETL. Tambien llamado flujo de datos, que son los pasos que deben seguir los datos en su estado inicial(Sistema Fuente) para que sean extraidos, transformados y finalmente cagados en SAP BI. Proceso de Extracción: Es la primera parte en el proceso de ETL, consiste en extraer los datos desde los sistemas de origen. La extracción busca en primer momento obtener loa datos y dejarlos listos para que se les pueda aplicar algún proceso de transformación. Parte importante en este proceso es que se deben analizar los datos a extraer para determinar cuales son útiles o cuales no. Importante determinar el impacto que puede generar esta extracción en el sistema fuente...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP SemiSenior
Un punto importante en el proceso ETL es determinar cuales datos son los ideales para el Datawarehouse ya que no se deben llevar natos innecesarios por su almacenaje. En ETL se debe planificar la extraccion de datos para no afectar el sistema transaccional diario y la operación, coordinar horas y fechas de procesos ojala en horarios no laborales. La codificación o estandarización de los codigos de productos juegan un papel importante en la extracción, procesamiento y carga de datos, se pueden colocar codigos nemotécnicos para determinar de donde provenía por ejemplo el material inicialmente.
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP SemiSenior
opcion 1 ,etl=ETL -Es el proceso que permite a las organizaciones mover datos desde múltiples fuentes, reformatearlos y limpiarlos, y cargarlos en otro repositorio para apoyar procesos de negocios. -etl= flujo de datos= diferentes sistemas fuentes(base de datos), los datos son extraidos,transformados y finalmente cargados en sap bi. -psa=PSA La PSA (Persistent Staging Area=Área de organización persistente) es la área de almacenamiento de entrada de datos proveniente del sistema fuente dentro del sistema SAP BI. Las peticiones de datos son almacenadas sin realizar cambios desde el sistema fuente. -dtp: DTP Objeto SAP BI. Un DTP determina cuántos datos son transferidos entre dos objetos SAP...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP SemiSenior
Proceso ETL = Flujo de datos. El proceso ETL está constituido por los pasos que deben seguir los datos en su estado inicial (sistema fuente) para que sean extraídos, transformados y cargados en SAP BW. Proceso de Extracción: Aquí se extraen los datos desde los sistemas fuente, hay que tomar en cuenta que un Datawarehouse puede estar formado por datos provenientes de diferentes sistemas fuente, una parte muy importante en este proceso es que se deben analizar los datos a extraer para ver cuales nos pueden ser útiles y cuales no y así evitar datos innecesarios en nuestro sistema, también se debe tomar en cuenta cual es el impacto que genera una extracción de datos en el sistema fuente,...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Senior
ETL = Extracción, transformación y Carga: Extracción: Se obtienen los datos de los sistemas fuentes (SAP, NO SAP) hacia el PSA Transformación: se aplican reglas,procedimientos, filtros de la información. Carga: es pasar la información del PSA a nuestro DW (ODS o Cubos) , Existe carga Delta y Carga Full. Carga Inicial: trae casi una replica de la tabla del sistema hacia el DW Carga Delta: trae solo información que aún no tenemos en el DW
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
La importancia del proceso ETL (extract - transform - load) radica en asegurar una calidad, consistencia de datos, la homogeneización de los datos de sistemas divergentes, para que de este modo puedan ser utilizados de forma conjunta, procesando y transformando la información, con lo que finalmente se generan los datos en el formato apropiado para que puedan ser utilizados por las herramientas de analisis (business inteligence).
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
Proceso de ETL: Consiste en extraer información de diferentes fuentes de datos (Archivo planos, excel, bases de datos relacionales), realizar procesos de transformación en la cual se buscar adaptar los datos según las reglas de negocio y posteriormente ser cargados ya sea de manera en que se sobre escriben los datos existente o se va almacenando el historial y así poder identificar sus variaciones en el tiempo
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Master
Proceso ETL (Extraccion, Transformacion y Carga) = Flujo de Datos = proceso por el cual los datos en su estado inicial son extraidos del sistema fuente para luego ser transformados y finalmente cargados en nuestro sistema SAP BI Extraccion: se extraen los datos desde los sistemas de origen sin importar las diferentes formas de almacenamiento de los mismos en sus respectivos sistemas (ficheros Excel, texto plano, fichero XML, bases de datos relacionales, etc). El objetivo de este proceso es dejar los datos listos para el siguiente proceso (Transformacion), para esto se deben analizar los datos a extraer y determinar cuales nos seran utiles y cuales no, y asi evitar datos innecesarios en nuestro sistema. Tambien se debe determinar el impacto generado...
👌Genial!, estos fueron los últimos artículos sobre más de 79.000 publicaciones académicas abiertas, libres y gratuitas compartidas con la comunidad, para acceder a ellas le dejamos el enlace a CVOPEN ACADEMY.
Disponibilidad Laboral: FullTime
