Costruirò una pipeline di dati di mercato personalizzata con Python e Polars
Architetto Quantitativo Ingegnere di Dati Finanziari Specialista in Trading Algoritmico
Informazioni su questo servizio
Questa è una pipeline di dati di mercato personalizzata con Python e Polars creata intorno alle tue fonti, al flusso di lavoro e ai requisiti di ricerca.
Selezioni la fonte dei dati, lo schema, la frequenza di aggiornamento, le regole di trasformazione, il formato di output, la struttura di archiviazione e l'ambiente di deployment. Io progetterò quindi il workflow ETL per ingerire, pulire, normalizzare, validare, trasformare e archiviare i tuoi dati.
A seconda del pacchetto, la pipeline può includere ingestione API o file, gestione di timestamp e fuso orario, controlli di duplicati e null, validazione dello schema, mapping dei contratti, filtraggio delle sessioni, elaborazione incrementale, output partitionato in Apache Parquet, logging, scheduling, logica di riavvio, test e documentazione.
Ogni consegna documenta l'architettura, la configurazione, i controlli di validazione, le assunzioni e le limitazioni. Standard e Premium includono codice funzionante e materiali di consegna; Basic fornisce un audit e un piano di implementazione.
Dettagli importanti:
- Lavoro con dati forniti dal cliente o debitamente autorizzati.
- Le tariffe per vendor, exchange, cloud e abbonamenti non sono incluse.
- La logica di trading live, la ricostruzione avanzata L2/MBO e il monitoraggio continuo richiedono un scope separato.
Scrivimi un messaggio prima di ordinare per discutere le tue esigenze.
Il mio portfolio
FAQ
Traduzione automatica.
Quali parti della pipeline posso personalizzare?
Puoi personalizzare la fonte dei dati, lo schema, la frequenza di aggiornamento, le regole di trasformazione (come il filtraggio delle sessioni o il mapping dei contratti), il formato di output, la struttura di archiviazione e l'ambiente di deployment.
Cosa include il pacchetto Basic (Starter)?
Ricevi un audit tecnico del tuo flusso di lavoro attuale e un piano di implementazione completo e un design dell'architettura. Questo pacchetto non include codice funzionante.
Cosa devo fornire prima di iniziare il lavoro?
Devi fornire le tue fonti di dati, schemi, regole di trasformazione, ambiente di deployment target e criteri di accettazione chiari.
Quali fonti e formati di dati puoi supportare?
Supporto API, CSV, file Parquet, database, file SCID e altro, elaborandoli tramite Python e Polars.
Riceverò il codice sorgente e la documentazione?
Sì, per i pacchetti Standard e Premium (Avanzato), riceverai il codice Python/Polars completamente funzionante, i file di configurazione, i risultati dei test e la documentazione completa.
