Tech Lead Big Data Senior

Pour un client dans le secteur financier et basé à Paris, nous recherchons un Teach Lead pour participer à la mise en oeuvre d'un systmèe Big Data.
Les compétences attendues sont les suivantes :

- Expertise avérée en Spark et des principes/utilisations des bases de données (SQL, NoSQL)

- Expertise en langage Python et des principes ETL/ELT

 - Maîtrise des principes de l'écosystème CDP, des bases SQL (Hive, DB2, PostgreSQL, Oracle, …), des
bases NoSQL (HBase, Elasticsearch…), des systèmes de fichiers et de stockage (HDFS, Minio, …),
d'Apache Airflow, de Git , de Message Broker (Kafka) 

- Connaissances de Jenkins, Prometheus/Grafana, Stack Elatic/Opensearch, du développement CI/CD,
d'Hashicorp Vault, Linux, JIRA et de la sécurité des SI.

1) Conception technique

-  Animation des affinages techniques et proposition de
solutions techniques et prise en charge des travaux conjoints avec les
équipes fournisseurs.

Participation active aux affinages techniques des besoins et
proposition de solutions techniques 

2) Développement

Pilotage des réalisations et suivi des risques. 

 â€¢ Définir les bonnes pratiques de développement et d'utilisation
du produit pour l'ensemble des clients

 â€¢ Développer de nouveaux composants d'ingestion et de
traitements de la donnée répondant à des patterns définis
(connecteurs) 

• Accompagnement pour l'intégration de ces composants sur
la réalisation de pipelines de données dans les règles de l'art et
le respect des bonnes pratiques définies

• Documenter les méthodes d'utilisation de ces composants de
manière simple et intuitive (HowTo, tutoriaux…)

• Mettre en œuvre des pipelines de données à partir de nos
composants et nos méthodes

3) Tests

Participation à l'élaboration du cahier de recette, des jeux de test et des
fiches de tests
PV de recette