Introducción al proceso ETL - Trabajando con el editor de consultas - Power Query. Acceso al Panel de Excel Consultas y Conexiones. |
|
100a Caso Nuestro 1º informe |
Casos básicos con TD y GD con Excel. Comenzando a aprender Data Science y Business Intelligence con Excel.
Resumen: Comenzando a aprender Data Science y Business Intelligence con Excel.
Convirtiendo rango de datos en tablas. Asignando o cambiando nombre a las tablas. Formato a las tablas. Formato condicional.
Creando tablas y graficos dinámicas basicas. trabajando con columnas dinámicas.Creación y configuración de segmentadores. Conexiones de los segmentadores con las tablas y graficos dinámicos |
ETL
Original
Propuesta |
100b Ventas Limpieza Basica V 2.4/2.5 |
Limpieza y transformación de datos básica. Cambiar tipo, quitar columna, auditoria de datos, remplazar valores, poner en mayúsculas cada palabra, recortar quitar espacios en blanco sobrantes… |
ETL
Datos
Solución |
101 Empleados |
Creacion de una consulta, conexión a un fichero fuente no normalizado.
Uso de las opciones “Quitar Filas Superiores“ y “Encabezados Promovidos” opcion Usar la Primera fila como encabezado
Aplicamos filtros para no disponer de determinadas filas, por ejemplo que contiene null en una determinada columna.
Uso de la opcion “Rellenar Abajo” que accedemos usando el botón derecho sobre la columna deseada y nos da acceso entre otras opciones a esa.
Limpieza. Eliminar los registros que tienen espacios al comienzo y o al final, usando la opcion Transformar-Recortar.
Separar nombre y apellido, con la opcion “Dividir Columnas por delimitador”
Uso de “Remplazar Valores”, por ejemplo, cambiar null por 0
Cambiar tipo de datos de las columnas a traves del icono izquierdo |
ETL
Original
Propuesta |
102 Ventas 7009 dos tablas |
Creacion de una consulta, conexión a un fichero fuente no normalizado. Relacionar dos consultas. Combinar-Combinar Consultas Uso de las opciones “Quitar Filas Superiores “y “Encabezados Promovidos” opcion Usar la Primera fila como encabezado. Quitar filas en blanco Quitar columnas. Cambiar tipo. Dividimos columnas por número de caracteres y creación de una columna personalizada por ejemplo: [Compañía Cliente.1]&" "&[Compañía Cliente.2] Limpieza. Eliminar los registros que tienen espacios al comienzo y o al final, usando la opcion Transformar-Recortar. Uso de “Remplazar Valores”, por ejemplo, cambiar null por 0. Quitar espacios en blanco y caracteres no deseados como guiones, puntos, etc. Transformación sobre campo fecha, en año, trimestre, semanas, etc. |
ETL
Original
Propuesta |
103 Quantity |
Muy sencillo. Creacion de una consulta, conexión a un fichero fuente no normalizado tipo CSV.
Uso de las opciones “Encabezados Promovidos” opcion Usar la Primera fila como encabezado
Aplicamos filtros para no disponer de determinadas filas, por ejemplo, que contiene NA en una determinada columna. Quitar vacíos Cambiar tipo de datos de las columnas a traves del icono izquierdo, pasamos de texto a numero entero |
ETL
Original
Propuesta |
104 SABI - Revisado |
Fundamental. Encabezados promovidos, quitar columnas, columna de anulación de dinamización, dividir columnas por transición de caracteres o separando por últimos caracteres, columnas por nombre cambiado, tipo cambiado de columnas (texto por numero), quitar errores, etc. Notas sobre el SABI de Jggomez |
ETL
Original
Propuesta |
105 ETL Produccion R24/25 |
Anulando dinamización, conversión a modelo tabular.
Resumen: integración en una sola consulta el fichero de datos aplicando anulación de dinamización.
Técnicas y palabras clave: Anular dinamización |
ETL
Original
Propuesta |
105b ETL Zonas Comerciales R24/25 |
Técnicas y palabras clave: Transponer - Remplazar Valores- Transforma Cualquier Columna – Rellenar Hacia Abajo - Combinar Columnas – Transponer - Anular dinamizacion de colunas - Dividir Columna - Cambiar nombre a las columnas y tipo |
ETL
Datos
Sin Solución |
106 Diario y Plan txt |
Cambiar manualmente el nombre a las columnas. Agregar Columna – Columna Condicional agregando condiciones y fórmulas. Combinar dos Consultas. Creacion de una consulta referenciada. Otras acciones como Transformar-Agrupar por. |
ETL
Original
Propuesta |
107 EBI Diario PQ y PPivot |
Power Query y Power Pivot. “Agregar Columna – Extraer – Primeros Caracteres”. Eliminamos aquellas columnas vacías. Remplazamos null por 0 con Inicio-Remplazar Valores,
Combinar dos Consultas. Creacion de una consulta referenciada
Creacion de nuestro primer modelo de datos con Power Pivot. Creación de nuestra primera tabla dinámica basada en modelo de datos. |
ETL
Original
Propuesta |
108 Ventas por empleados Años |
Anexar varias consultas en una sola. Combinar consulta con relación múltiple, varios campos. Conectar Carpetas
Realizar una consulta dos orígenes de datos fichero Excel. |
ETL
Original
Propuesta |
109 ETL Pais |
Anulando dinamización de otras columnas a modelo tabular.
Técnicas y palabras clave: Anulando dinamización de otras columnas |
ETL
Original
Propuesta |
111 ETL Integración de carpetas |
Resumen: Integración de todos los ficheros actuales y futuros contenidos en una carpeta. integración en una sola consulta de la información de los ficheros contenidos en una misma carpeta
Técnicas y palabras clave: Crear conexiones a una carpeta, cambiar tipo a columna fecha de numero a fechas |
ETL
Original
Propuesta |
111b RentCar dias de alquiler por trimestre |
Integración de todos los ficheros actuales y futuros contenidos en una carpeta. Integración en una sola consulta de la información de los ficheros contenidos en una misma carpeta Técnicas y palabras clave: Crear conexiones a una carpeta, cambiar tipo a columna fecha de numero a fechas, Recortar espacios en blanco |
ETL
Dataset
Propuesta |
112 ETL Combinar Consultas |
Combinar consultas en PQ.
Resumen: Combinar consultas en PQ. El sustituto de BuscarV o relacionando tablas.
Técnicas y palabras clave: Grupo Combinar, combinar consultas |
ETL
Original
Propuesta |
113 ETL Agrupar por dos criterios o mas, |
Agrupar una consulta por dos o más criterios p.e : por doble criterio, nº de factura y máxima fecha ULTIMA Fecha de Factura, nos servira para medir la ultima compra y tiempo transcurrio
Técnicas y palabras clave: Crear conexiones y utilizar las opciones de agrupar por avanzada |
ETL
Original
Propuesta |
114a Combinar Consultas base I |
Combinar consultas en PQ. El sustituto de BuscarV o relacionando tablas.Tipos de Combinación de consultas en PQ |
ETL
Datos
Solución |
114b Combinar Consultas base II |
Combinar consultas en PQ. Tipos de Combinación de consultas en PQ. |
ETL
Datos
Solución |
115 Combinar Consultas base III |
Relación entre las tablas basadas en varias columnas. Combinar varias columnas |
ETL
Datos
Solución |
118 ETL Consolidar Hojas Excel Base |
Quitar filas superiores. Usar la primera fila como encabezado. Convertir los tipos de datos. Filtrar valores con null o en blanco. Rellenar hacia abajo. Dividir columna. Crear columnas condicionales, crear tabla de datos, combinar consultas |
ETL
Datos
Solución |
119 ETL Consolidar Hojas Excel del Diario A3 |
Creacion de conexión. Quitar filas superiores. Usar la primera fila como encabezado. Convertir los tipos de datos. Filtrar valores con null o en blanco. Rellenar hacia abajo. Dividir columna. Crear columnas condicionales, crear tabla de datos, combinar consultas |
ETL
Datos
Solución |
120 Movimientos de almacen. |
Resumen: Usar PQ con el editor avanzado para copiar conexiones y pasos aplicados a cada consulta con el Editor Avanzado de Consulta de PQ (Power Query – Vistas – Editor Avanzado). Función muy útil aplicable por ejemplo para el caso de los diarios contables de A3 cuando aparecen diario por mes en pestañas u hojas distintas.
Técnicas y palabras clave: Copiar y pegar consulta asi como copiar y pegar pasos aplicados en las consultas a traves del Editor Avanzado de Power Query. Quitar filas superiores. Usar primera fila como encabezado. |
ETL
Original
Propuesta |
130 Diario A3 Tabluar |
Creación de una plantilla para el diario de A3. Consolidar las hojas de un diario de A3. Creación de una plantilla para el diario de A3 “Diario A3 tabular”. Consolidar las hojas (meses) de un diario A3 para un periodo con el Editor Avanzado de Power Query.
Resumen: Contienen muchas de las opciones de uso más frecuente en el Proceso ETL con Power Query. Caso diario de contabilidad de A3.
Técnicas y palabras clave: Creacion de conexión. Quitar filas superiores. Usar la primera fila como encabezado. Convertir los tipos de datos. Filtrar valores con null o en blanco. Rellenar celdas en blanco. Dividir columna – crear una columna condicional - crear columna personalizada. Trabajando con el editor avanzado de PQ, copiando y pegando codigo. Analisis del codigo M generado en PQ. Anexar consultas |
ETL
Original
Propuesta |
131 Neumáticos y Sucursales. V 2.4/2.5 |
Contiene opciones de uso más frecuente en el Proceso ETL con Power Query. Técnicas y palabras clave: Creacion de conexión. Quitar filas superiores. Usar la primera fila como encabezado. Convertir los tipos de datos, Dividir columna – Agregar columna, crear columnas personalizadas - crear columna calcuadas. Tablas y Gráficos Dinámicos Básicos |
ETL
Datos
Sin Solución |
132 Limpieza de Datos R24/25 |
Contiene opciones de uso más frecuente en el Proceso ETL con Power Query. Técnicas y palabras clave: Dividir columnas, 1º fila como encabezado, eliminar filtrar, cambiar tipos. Menú vistas (mostrar espacios en blancos y otras propiedades, calidad de columnas, distribución de columnas y perfil de columnas). Quitar espacios en blanco, formato y recortar texto |
ETL
Datos
Sin Solución |
133 Remplazar valores meses de español a ingles V 2.4/2.5 |
Acciones Power Query tratadas. Conexiones, Anular dinamizacion de columnas, Cambiar nombres a las columnas, Cambiar tipo a las columnas, Agregar columna personalizada, concatenando columnas, Remplazar valores (meses de español a inglés) |
ETL
Datos
Sin Solución |
134 Limpieza Profunda V 2.4/2.5 |
PQ Limpieza de datos de 1º grado, técnicas de depuración sobre filas y columnas: reducción, formateo y rellenar.
Power Query. Creando parámetros de conexión
Proceso Transformación: Entre algunos ajustes a realizar básicos como: Quitar filas superiores, encabezados promovidos, quitar columnas, quitar errores, columnas con nombre cambiado, tipo de datos cambiado, etc.. hay otros a prestar atencion como: Filtrar filas que contienen errores o incongruencias. Dividir columna por nº caracteres y por delimitador. Remplazar valores, poner En Mayúsculas Cada Palabra, etc.. |
ETL
Datos
Sin Solución |
135 Transponer V 2.4/2.5 |
PQ Limpieza de datos de 1º grado, técnicas de depuración reajustar el formato de tabla, Transponer.
Power Query. Creando parámetros de conexión
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, etc., Creación de una columna personalizada Uds/hra |
ETL
Datos
Sin Solución |
136 1 Encabezado de Columna V 2.4/2.5 |
PQ Limpieza de datos de 1º y 2º grado, técnicas de depuración. Anulación de la dinamizacion. Unpivot: Un nivel de Encabezado de Columna. Power Query. Creando parámetros de conexión
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, etc., Creación de una columna personalizada Uds/hra |
ETL
Datos
Sin Solución |
137 2 Encabezados de Columna V 2.4/2.5 |
PQ Limpieza de datos de 1º y 2º grado, técnicas de depuración. Anulación de la dinamizacion. Unpivot: Dos nivel de Encabezado de Columna Power Query. Creando parámetros de conexión
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, quitar filas en blanco, filtros (quitar totales, null..), quitar columnas vacías, rellenar, crear columna combinada, dividir columnas, etc.Técnicas avanzadas: Transponer, anulamos dinamizacion de columna, etc.. |
ETL
Datos
Sin Solución |
138 1 Encabezado de Fila V 2.4/2.5 |
PQ Limpieza de datos y un nivel de Encabezado de Fila.
Power Query. Creando parámetros de conexión
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, quitar filas en blanco, filtros (quitar totales, null..), quitar columnas vacías, rellenar, crear columna combinada, dividir columnas, etc.Técnicas avanzadas: Transponer, anulamos dinamizacion de columna, etc.. |
ETL
Datos
Sin Solución |
139 Dinamización de Columnas V 2.4/2.5 |
PQ Dinamización de Columna.
Power Query. Creando parámetros de conexión
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, quitar filas en blanco, filtros (quitar totales, null..), quitar columnas vacías, rellenar, crear columna combinada, dividir columnas, etc.Técnicas avanzadas: dinamizacion de columna, etc.. |
ETL
Datos
Sin Solución |
140 Conexion Carpetas Facturas V 2.5/2.6 |
PQ Doble conexión a carpeta con transformación. Crear consulta combinada. Creando parámetros de conexión
Conexión a carpeta: doble conexión para dos procesos ETL distinto para cabecera de factura y detalle. Crear consulta combinada
Proceso Transformación: Aplicación de técnicas de depuración sobre filas y columnas basicas como formateo, encabezado promovidos, tipos cambiado, quitar filas en blanco, filtros (quitar totales, null...), quitar columnas vacías, dividir columnas, etc.Técnicas avanzadas: transposición, combinar consultas, etc... |
ETL
Datos y Solución |
|
|
|