← Experiencia profesional
Oviedo, Principado de Asturias, España
Junior Data Engineer · Betterplace
may 2023 · may 2024Oviedo, Principado de Asturias, España
Desarrollé pipelines de scraping y streaming para datos inmobiliarios a gran escala.
Responsabilidades
- Construcción y mantenimiento de pipelines de scraping y normalización.
- Procesamiento en tiempo real con tecnologías de streaming.
- Despliegue y monitorización en AWS y Azure.
- ETL y modelado de datos para analítica.
- Automatización con Docker, Kubernetes y CI/CD.
Logros
- Pipelines de scraping estables y escalables.
- Mejora del tiempo de actualización de datos críticos.
Tecnologías
Data Engineering
PythonSQLData Streaming
Kubernetes
GitLabCI
AWS
AzureNetwork Administration
JavaScriptPostGISDevOps
Selenium
Argo WorkflowsApache IcebergApache SparkETLSystem Monitoring
React.js
PostgreSQL
PythonSQLData StreamingKubernetesGitLabCIAWSAzureNetwork AdministrationJavaScriptPostGISDevOpsSeleniumArgo WorkflowsApache IcebergApache SparkETLSystem MonitoringReact.jsPostgreSQLMás experiencias