
Cerchiamo Data Engineer (GCP) - Full Remote con le seguenti caratteristiche
In CGM Consulting cerchiamo un/una Data Engineer (GCP) per contribuire allo sviluppo e all’evoluzione di soluzioni software in contesti strutturati.
Lavorerai su Google Cloud (BigQuery, Dataflow/Beam, Pub/Sub, Composer/Airflow) occupandoti di implementazione, integrazione e qualità del rilascio.
Ci interessa un approccio concreto: collaborazione, responsabilità sul risultato e attenzione ai dettagli. Posizione Full Remote.
Requisiti richiesti
• Esperienza nella progettazione e realizzazione di data pipeline batch e streaming su Google Cloud
• Ottima conoscenza di BigQuery (modellazione, ottimizzazione performance/costi, partizionamento e clustering)
• Esperienza con Dataflow (Apache Beam), Pub/Sub, Cloud Storage, Dataproc (Spark) (almeno alcuni)
• Sviluppo in Python e/o Java e utilizzo di SQL avanzato
• Orchestrazione e scheduling con Cloud Composer (Airflow) o strumenti equivalenti
• Conoscenza di ELT/ETL, data quality, data validation e gestione errori/ri-processamenti
• Esperienza con CI/CD, Git, packaging e automazioni (es. Cloud Build o equivalenti)
• Competenze su IAM, gestione permessi, service account e principi di security-by-design
• Conoscenza di monitoring & logging (Cloud Monitoring/Logging) e pratiche di observability per pipeline dati
• Familiarità con Docker e, preferibilmente, GKE
Conoscenze/Esperienze gradite
• Esperienza con Dataform o strumenti dbt-like su BigQuery
• Conoscenza di Vertex AI (integrazione dati per ML) o feature store / MLOps
• Certificazioni Google Cloud (es. Professional Data Engineer)
Mansioni previste
• Progetterai e realizzerai data pipeline batch e streaming su Google Cloud
• Implementerai ingestion e processing con servizi GCP (Dataflow/Apache Beam, Pub/Sub, Cloud Storage, Dataproc/Spark) in base alle esigenze
• Modellarai e ottimizzerai dataset su BigQuery (performance/costi, partizionamento, clustering)
• Scriverai trasformazioni e query con SQL avanzato, sviluppando componenti in Python e/o Java
• Gestirai orchestrazione e scheduling con Cloud Composer (Airflow) o strumenti equivalenti
• Implementerai controlli di data quality e data validation, gestendo errori e re-processamenti
• Collaborerai su CI/CD, versioning Git, packaging e automazioni (es. Cloud Build o equivalenti)
• Curarai aspetti di sicurezza (IAM, permessi, service account) e monitoring/logging per pipeline dati
Benefits:
Buoni pasto, computer aziendale
Altri dati
- Sede: FULL REMOTE
- Titolo di studio: Laurea
- Tipologia di impiego: Full time
- Tipologia contratto: Tempo indeterminato
Cosa offriamo:
• Inserimento in CGM Consulting su progetti strutturati e sfidanti
• Collaborazione con team tecnici e confronto continuo sulle scelte implementative
• Contesto orientato a qualità, standard e miglioramento continuo
Candidati ora e raccontaci la tua esperienza su pipeline dati in Google Cloud.
Invia la tua candidatura
Tag annuncio:
- Airflow ,
- Apache Beam ,
- Data Engineer ,
- GCP ,
- Dataflow ,
- Pub/Sub ,
- Dataproc ,
- Cloud Composer ,
- Python ,
- BigQuery ,