Farò progetti di data engineering e data analytics
Sviluppatore Full Stack, Data Engineer
Informazioni su questo servizio
Sono un Data Engineer e Data Analyst specializzato nella creazione di pipeline di dati scalabili e pronte per la produzione, oltre a soluzioni basate sui dati. Progetto, sviluppo e automatizzo workflow ETL/ELT che trasformano dati grezzi in insight utili, sfruttando piattaforme cloud e strumenti moderni per permettere un'elaborazione efficiente dei dati su larga scala.
Competenze & Tecnologie
ETL & Pipelines: Python, PySpark, Pandas, Apache Airflow, NiFi, Kafka, RabbitMQ, AWS Glue, Dataflow, Azure Data Factory
Storage dei dati: Amazon Redshift, Snowflake, BigQuery, SQL & NoSQL (MongoDB, Cassandra, Elasticsearch)
Integrazione e reporting dei dati: ingestione tramite API, dashboard automatizzate (Tableau, Power BI, personalizzate)
Piattaforme cloud: AWS, Google Cloud, Azure
Analisi dei dati & ML: pulizia dei dati (Pandas, NumPy), visualizzazione (Matplotlib, Seaborn), ML/DL (Scikit-learn, TensorFlow, PyTorch), deployment dei modelli (MLflow, Docker, Kubernetes, CI/CD)
Servizi che offro
Automazione e ottimizzazione delle pipeline di dati
Soluzioni di Data Engineering basate su cloud
Configurazione di Data Warehouse e Data Lake
Streaming in tempo reale e messaging (Kafka, RabbitMQ)
Reporting e integrazione di dashboard
Progettazione di database e ottimizzazione delle performance
FAQ
Traduzione automatica.
Che tipo di progetti di data engineering gestisci?
Lavoro su tutti i tipi di progetti di data engineering, inclusi sviluppo di pipeline ETL/ELT, configurazione di data warehouse e lake, streaming in tempo reale, integrazione di piattaforme cloud di dati e automazione dei workflow di dati.
Su quali piattaforme cloud e strumenti ti specializzi?
Sono specializzato in AWS, Azure, Google Cloud, Databricks, Snowflake, Apache Airflow, Kafka, NiFi e tecnologie correlate di data engineering.
Puoi lavorare con la mia infrastruttura dati esistente?
Assolutamente! Posso ottimizzare, estendere o ricostruire pipeline di dati e infrastrutture esistenti per migliorare performance e scalabilità.
Offri servizi di analisi dei dati e machine learning?
Sì, offro analisi dei dati, pulizia, visualizzazione e sviluppo e deployment di modelli ML per completare le tue pipeline di data engineering.
Come garantisci affidabilità e monitoraggio delle pipeline di dati?
Implemento test automatizzati, gestione degli errori, alert e monitoraggio usando strumenti come Airflow, CloudWatch e dashboard personalizzati.
Come gestisci dati sensibili e conformità di sicurezza?
Seguo le migliori pratiche di crittografia, controllo degli accessi e conformità agli standard come GDPR e HIPAA, dove applicabile.
