Data cleaner

Jefatura de Gabinete de Ministros

Data cleaner es una herramienta desarrollada por el gobierno argentino para optimizar la gestión y federación de metadatos de catálogos de datos públicos. Facilita a los usuarios la tarea de limpiar archivos CSV mediante un conjunto de reglas predefinidas, promoviendo la transparencia y accesibilidad de la información gubernamental. Data cleaner forma parte de una iniciativa más amplia de datos abiertos que busca mejorar la precisión, organización y utilidad de los datos disponibles públicamente.

Data cleaner soluciona el problema de la desorganización y errores en los metadatos de registros públicos, facilitando una gestión más eficiente y transparente de datos abiertos. Esta mejora es vital para la integridad y accesibilidad de la información gubernamental, fomentando la transparencia pública.

Limpieza de datos automatizada basada en reglas predefinidas. Métodos para tareas de limpieza de datos individuales, como normalización de cadenas y formato de correo electrónico. Reglas personalizables para la limpieza de datos, incluido el cambio de nombre y la eliminación de columnas, y el manejo de duplicados. Soporte para varios formatos de datos, incluidos archivos CSV y SHP. Integración con pandas para manipulación de DataFrame.

Desarrollado en Python 3.6, aprovecha pandas y geopandas para la manipulación eficiente de datos. Cumple con los estándares de codificación UTF-8, asegurando una gestión de datos precisa. Soporta formatos de archivo CSV, GeoJson y KML, promoviendo la interoperabilidad. Emplea flecha para el análisis y formato de fechas, optimizando el procesamiento temporal.