Costruirò pipeline ETL in Python e automatizzerò i tuoi flussi di lavoro sui dati
Senior Data Engineer e Fullstack Developer
Informazioni su questo servizio
Hai bisogno di una pipeline ETL affidabile o di un flusso di lavoro sui dati?
Costruirò una pipeline di dati in Python pulita e scalabile per estrarre, trasformare e caricare i tuoi dati.
### Ciò che posso fare
- Pipeline ETL / ELT in Python
- Integrazione API, CSV, JSON e database
- Pulizia e trasformazione dei dati
- Sviluppo SQL e database
- Workflow Apache Airflow / NiFi
- Integrazione con data warehouse
- Automazione e gestione degli errori
### Tecnologie
- Python
- SQL
- Airflow
- NiFi
- Spark
- AWS
- Snowflake
- BigQuery
- PostgreSQL
- MySQL
- dbt
- Airbyte
Con oltre 10 anni di esperienza in data engineering, mi concentro su soluzioni affidabili, manutenibili e scalabili.
Contattami prima di ordinare per discutere le tue esigenze.
FAQ
Traduzione automatica.
Con quali origini dati puoi lavorare?
Posso lavorare con API, CSV, JSON, Excel, database SQL, database NoSQL e altre fonti di dati strutturati.
Puoi collegare la mia API a un database?
Sì. Posso costruire una pipeline Python che estrae dati dalla tua API, li trasforma, li convalida e li carica nel tuo database.
Puoi automatizzare la pipeline?
Sì. Posso usare strumenti come Apache Airflow per pianificare e automatizzare flussi di lavoro ricorrenti sui dati.
Puoi lavorare con data warehouse cloud?
Sì. Ho esperienza con AWS Redshift, BigQuery, Snowflake, ClickHouse e altre piattaforme di dati moderne.
Puoi lavorare con set di dati di grandi dimensioni?
Sì. Ho esperienza nella progettazione di soluzioni di dati per ambienti su larga scala, inclusa una soluzione di data warehousing che elabora circa 100TB di dati al giorno.
Fornite documentazione?
Sì. La documentazione può essere inclusa a seconda del pacchetto scelto.
Devo contattarti prima di ordinare?
Sì. Inviami le tue fonti di dati, il database/piattaforma di destinazione, il flusso di lavoro previsto e eventuali codici o documentazioni esistenti, così posso consigliarti il pacchetto più adatto.
