🚀PROMO SEPTIEMBRE en CVOSOFT United States Of America
✒️SAP BI / BW BO Introducción al ETL
SAP BI / BW BO Introducción al ETL
Proceso ETL = Flujo de datos.
El proceso ETL está constituido por los pasos que deben seguir los datos en su estado inicial (sistema fuente) para que sean extraídos, transformados y cargados en SAP BW.
Proceso de Extracción: Aquí se extraen los datos desde los sistemas fuente, hay que tomar en cuenta que un Datawarehouse puede estar formado por datos provenientes de diferentes sistemas fuente, una parte muy importante en este proceso es que se deben analizar los datos a extraer para ver cuales nos pueden ser útiles y cuales no y así evitar datos innecesarios en nuestro sistema, también se debe tomar en cuenta cual es el impacto que genera una extracción de datos en el sistema fuente, ya que podría perjudicar a los sistemas transaccionales y complicar la operatoria diaria de la empresa.
Proceso de Transformación: Este proceso busca adaptar los datos extraídos en datos que finalmente serán cargados en el Datawarehouse, estos datos se adaptarán en base a las reglas preestablecidas del negocio, entre las modificaciones que pueden ocurrir tenemos:
Codificación, por ejemplo que se establezca que el producto "Chocolate" será almacenado con "CH".
Generar registros con cálculos totales u otro tipo de cálculo, por ejemplo: Importe_Total = Importe_Producto Impuestos.
Armar varias columnas partiendo de una sola o viceversa, por ejemplo, si tenemos los campos Nombre = "Juan" y Apellido = "López" se pueden almacenar en un solo campo Nombre = "Juan López".
Establecer algún otro tipo de cambio basado en la estructura en la cual llegan los datos extraídos y como se quieren hacer llegar al sistema, por ejemplo, si un campo viene del sistema fuente de la siguiente forma: Nombre = "Juan#López" y no queremos el separador # podemos hacer que llegue al sistema como Nombre = "Juan López".
Generar campos claves en el destino de datos, por ejemplo si determinamos que los caramelos serán representados por el valor 000321 entonces el campo Producto podría tener los siguientes valores para determinar un mismo producto con su respectivo sistema fuente: SAP000321, FIL000321 (FIL = Archivo/File).
Proceso de Carga: Este es el proceso en el cual los datos ya han pasado por la fase de transformación y son cargados en el sistema SAP BW, en algunos casos se sobreescriben los datos que se obtienen y en otros se va almacenando un historial de los registros para determinar como va cambiando un determinado valor a lo largo del tiempo, las cargas pueden ser realizadas de 2 maneras:
Cargas Full: Este tipo de cargas generalmente se realizan inicialmente y es cuando queremos que pasen todos los datos de la fuente al destino.
Cargas Delta: Con este tipo de carga sólo traeremos a nuestro sistema los datos que aún no han sido almacenados. Estas cargas son importantes ya que con ellas evitamos que se sobrecargue el sistema fuente mediante todas las veces que realizamos una carga.
Importante: El proceso de ETL se verá reflejado de dos maneras, la versión 3.x y la versión 7.0 (la que se utilizará a lo largo de la carrera), entre las ventajas de esta última tenemos: Mejora en el performance de las cargas ya que se pueden paralelizar procesos, es mas sencillo el proceso de creación y mantenimiento del flujo y se mejora el manejo de errores en caso de encontrar registros erróneos en la PSA.
Sobre el autor
Publicación académica de Jose Daniel Gomez Durand, en su ámbito de estudios para la Carrera Consultor en SAP BI / BW BO.
SAP SemiSenior
Jose Daniel Gomez Durand
Profesión: Consultor Sap Bi/analista de Gesti?n de Documentos. - Venezuela - Legajo: PW65Z
Continúe aprendiendo sobre el tema "Introducción al ETL" de la mano de nuestros alumnos.
SAP SemiSenior
En esta lección se hace una introducción al proceso ETL. Consiste en un flujo de datos que va desde la extracción de la información, su transformación en un formatoestándar y su carga al datawarehouse. a. Proceso de extracción: - Distintas fuentes. Determinar el impacto b. Proceso de transformación: - Se estandarizan los datos para que puedan ser manipulados. c. Proceso de carga. - Se sube la información al sistema datawarehouse. Se sube mediante carga full (completa y se usa a las primeras veces) y cargas delta (modificaciones sobre las cargas iniciales)
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
Unidad 2 - Introducción al ETL ETL = Extracción / Transformación / Carga (Load) 1.- Proceso de Extracción: Es el paso en que se extraen los datos desde diferentes sistemas de información. Estos datos pueden estar almacenados en diferentes formatos (excel, txt, xml, bd transaccional...) y se dejan preparados para que se pueda aplicar algún proceso de transformación. En este paso es necesario hacer un estudio previo para discernir los datos que nos interesan y despreciar los que no serán de utilidad. 2.- Proceso de transformación: Es el paso en que se adaptan los datos extraídos, aplicando reglas de negocio, para cargarlos al DW. Algunas de las adaptaciones que se suelen...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Junior
Unidad 2. El proceso ETL 2.1 Introducción al ETL El ETL también es llmado fujo de datos y son los pasos que se deben seguir para que los datos sean extraidos, transformados y cargads al sistema SAP. Paso 1 . Extracción: esta es la primera parte del proceso de ETL y busca principalmente obtener los datos y dejarlos listos para poder realizarles el proceso de transformación. En la extracción es importate hacer la selección de los datos que se van a utilizar para no tener datos innecesarios en el sistema fuente. Paso 2. Transformación: Busca adaptar los datos exraidos en los datos que finalemnete seran cargados en el Datawarehouse. En las trasnfomaciones se puede dar las siguientes modificaciones:...
Creado y Compartido por:Claudia De La Hoz / Disponibilidad Laboral: PartTime
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Master
Unidad 2: Introducción al ETL 1. Proceso ETL ETL también llamado flujo de datos, son los pasos que debe seguir la informacion (datos) contenbida en los sistemas fuentes (SAP y NO SAP), para que la misma sea extraida, transformada y cargada a nuestro sistema SAP BI El flujo seria: FUENTES / area Staging / transformaciones / cargas (ODS y Cubos) 2. Proceso de Extracción: La extracción puede ser de diferentes sistemas. (SAP y NO SAP) El almancenamiento puede hacerse desde archivos excel, en texto plano, en ficheros XML, en bases de datos relacionales, entre otros. La idea es obtener los datos y dejarlos listos para que se pueda aplicar algún proceso de transformación. Se deben analizar los datos a extraer...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Senior
Introducción a ETL Proceso ETL El proceso ETL también se lo denomina flujo de datos, que son los pasos que deben seguir los datos en su estado inicial (Sistema fuente) para que sean extraidos, transformados y finalmente cargados en nuestro sistema SAP BI. Proceso de Extracción La primera parte del proceso ETL consiste en extraer los datos desde los sistemas de origen. Los proyectos que se realizan para generar un Datawarehouse extraen datos de diferentes sistemas y estos están almacenados de maneras diferentes como por ejemplo Excel, xml bases de datos. Proceso de Transformación Busca adaptar los datos extraídos en datos que finamente sean cargados en el Datawarehouse. Estas transformaciones serán...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP SemiSenior
INTRODUCCIÓN ETL Proceso ETL Son los pasos que debe seguir los datos en su estado inicial para que sean extraídos, transformados y cargados a SAP BI Proceso de Extracción La primer parte del proceso de ETL consiste en extraer los datos desde el sistema de origen. La mayoría de los proyectos obtienen datos provenientes de diferentes sistemas y cada uno puede almacenarlos de una manera diferente, es decir en excel, txt, xml, etc. La extracción busca en primer momento obtener los datos y dejarlos listos para que se les pueda aplicar un proceso de transformación, por lo tanto se debe determinar cuáles serán útiles y cuales no y de esta manera evitar datos innecesarios...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Master
El proceso de (E)xtraction, (T)ransform y (L)load, consume entre el 60 y el 80% del tiempo de un proyecto de Business Inteligence. Por lo tanto este fase del proyecto puede representar el fracaso o el exito de proyecto. Por ende debemos comprender y utilizar multiples estrategias para garantizar el exito del mismo. En esta fase se realizan multiples tareas tales como Validar los datos Limpiar los datos Transformar los datos Agregar los datos Cargar los datos Todos estos pasos son importantes para garantizar la consistencia de los datos para la etapa de reporte y analisis. A continuacion explicare los pasos anteriores 1. Extraccion: En esta fase nos conectamos a los diferentes origenes de datos, bien sea archivos planos, base de datos...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Senior
ETL (Extraer, Transformar y Cargar): Es el proceso que permite el tratamiento de los datos provenientes desde diferentes fuentes, a traves del proceso de extracción tomando estos datos, reformateando, depurando, y cargando la información a bases de datos o data warehouse para el analisis de los mismo en otro sistema operacional y así brindar conocimiento y datos de calidad al negocio. El proceso de ETL juega un papel muy importante con relacion a la integracion de datos, ya que este proceso aplicado en el Business Intelligence puede tomarse decisiones para mejoras del negocio gracias a la precision de la información que podamos llegar a obtener luego del proceso de extracción y carga de los datos a la warehouse....
Ingeniera de sistema,con conocimientos y manejo del ?rea de programaci?n con conexi?n a motores de base de datos. reportes en herramienta powerbi con conexion a fuentes externas: excel - mysql - sap
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Master
ETL (Extracción, Transformación, Load (Cargar)) Al proceso de ETL también se le conoce como Flujo de Datos que se deben seguir para que los datos sean extraídos, transformados y cargados en SAP BIacción: Busca en primer momento obtener los datos y dejarlos listos para que se les pueda aplicar alguna transformación. Transformación El proceso de transformación busca adaptar los datos extraídos en los datos finalmente serán cargados en BW. Modificaciones que pueden ocurrir: Codificar Obtener Nuevos Valores Generar campos claves en el destino de datos. Generar registros con cálculos totales. Armar varias...
*** CVOSOFT - Nuestros Alumnos - Nuestro Mayor Orgullo como Academia ***
SAP Training
Proceso ETL > Flujo de datos. Proceso de transformación: Adaptación de los data al datawarehouse necesario para la aplicación Codificar Nuevos valores (importe_total = Importe_producto + impuestos) Campos clave: Genera in ID con un dato concreto que se quiere destacar como por ejemplo el origen de datos. Registros con cálculos totales: Almacena los totales de los registros Unir un registro en varias columnas: ejemplo Nombre = "juan" Apellido= "López" se almacena como nombre = "Juan Lopez" Conversión: Modificar el registro original, pero sin cambiarle el la descripción ni el nombre técnico...
👌Genial!, estos fueron los últimos artículos sobre más de 80.000 publicaciones académicas abiertas, libres y gratuitas compartidas con la comunidad, para acceder a ellas le dejamos el enlace a CVOPEN ACADEMY.
Disponibilidad Laboral: PartTime
