Automatización de recolección de datos
Budget: $15 – $25 USD
Necesito crear un flujo automatizado que recolecte información desde bases de datos académicas sobre un tema específico, valide su exactitud por comparación de fuentes múltiples y la guarde en una base SQL estructurada.
Alcance
• Desarrollar un script en Python que rastree, extraiga y normalice datos académicos.
• Validar cada registro con cruces automáticos entre al menos dos fuentes para reducir errores.
• Cargar los resultados –texto y números– en tablas claras, con claves primarias y relaciones bien definidas.
• Generar reportes de control de calidad en Excel o Google Sheets que muestren discrepancias y registros pendientes de revisión.
• Implementar un mecanismo de actualización periódica (cron o similar) para que la información se mantenga vigente.
Entregables
1. Código fuente documentado (Python) y archivo .sql con la estructura de la base.
2. Script de validación con lógica de comparación de fuentes.
3. Reporte de prueba que evidencie la carga correcta de datos texto y numéricos.
4. Instrucciones paso a paso para desplegar el flujo en un entorno local o servidor.
Acepto propuestas que incluyan sugerencias de librerías, mejoras de rendimiento o pruebas adicionales.
Alcance
• Desarrollar un script en Python que rastree, extraiga y normalice datos académicos.
• Validar cada registro con cruces automáticos entre al menos dos fuentes para reducir errores.
• Cargar los resultados –texto y números– en tablas claras, con claves primarias y relaciones bien definidas.
• Generar reportes de control de calidad en Excel o Google Sheets que muestren discrepancias y registros pendientes de revisión.
• Implementar un mecanismo de actualización periódica (cron o similar) para que la información se mantenga vigente.
Entregables
1. Código fuente documentado (Python) y archivo .sql con la estructura de la base.
2. Script de validación con lógica de comparación de fuentes.
3. Reporte de prueba que evidencie la carga correcta de datos texto y numéricos.
4. Instrucciones paso a paso para desplegar el flujo en un entorno local o servidor.
Acepto propuestas que incluyan sugerencias de librerías, mejoras de rendimiento o pruebas adicionales.
Related categories:
Python
Data Processing
SQL
MySQL
SQLite
Data Extraction
Data Analysis
Data Management