Expert Opensearch - Kafka H/F - Huxley
- Freelance
- Huxley
Les missions du poste
Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Le profil recherché
Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Cette évolution repose notamment sur :
- La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
- L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
- La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
- L'automatisation et l'industrialisation des déploiements via Ansible / AWX.
Dans ce contexte, un renfort expert est recherché pour accompagner la mise en oeuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.
- Audit de l'architecture existante.
- Analyse des choix techniques mis en oeuvre et identification des axes d'amélioration.
- Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
- Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
- Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
- Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
- Industrialisation via Ansible / AWX.
- Documentation et accompagnement des équipes.
Profil recherché :
La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.
Compétences attendues :
- Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
- Expertise confirmée de Kafka :
- Administration et exploitation de clusters,
- Optimisation des performances et des flux,
- Capacité à accompagner les évolutions d'architecture.
- Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
- Expérience dans des contextes de migration ELK vers OpenSearch
- Maîtrise d'Ansible / AWX.
- Capacité à formuler des recommandations claires et réalisable.
- Bon niveau de communication et capacité à accompagner des équipes techniques.
Compétences requises
- Cluster
- Optimisation des performances
- Ansible
- Gestion de la performance
- Amélioration des flux
- KAFKA