INGENIEUR DEVOPS / AWS

INGENIEUR DEVOPS / AWS

PSIT_05009099
Expériences : +3 ans

3 ans d\'expériences

Langages : Python, SQL, Java, Matlab, C++
Cloud Computing: Amazon Web Services
Framework/API: Python FLASK, Numpy, pandas, scikit-learn, matplotlib, Tensorflow, Keras.
Big DATA: Spark, Yarn,Hadoop, HDFS, AWS Glue, EMR, AWS S3 (Simple Storage Service), ELK(Elasticsearch, Logstash, and Kibana)
Events: SQS, Kafka, Kinesis Data Streams (KPL, KCL, Kinesis API), Kinesis Data Firehose, Kinesis Stream Videos, Kinesis Data Analytics
Devops
Terraform, Ansible, Git, Cloud Formation,Jenkins, Serverless Framework, AWS CodeCommit, AWS Code Build, AWS Code Deploy
Containerisation et serverless: Docker, AWS ECS, AWS ECR, Dockerfile, Lambda
Base de données et Datawarehouse : Mysql, Hbase, DynamoDB, MongoDb, RDS, Redshift, Athena, Timestream, DocumentDB, Hive
Security: AWS IAM, AWS KMS, AWS VPC, Security groups
Web Services: REST, AWS API Gateway, Lambda, FLask
Monitoring: Nagios, Cloudwatch, ELK ( Elasticsearch, logstash, Kibana)
OS : Environnement Unix (CentOs, Fedora, Solaris, Ubuntu), microsoft
Autres: Jupyter, git, bitbucket, Github, Gitlab
Mise en place d une solution (ELK) de centralisation des logs AWS (en préservant l allègement des coûts) pour assurer la surveillance des accès et des ressources :
Capture des logs de conformité ainsi que l audit opérationnel des risques (CloudTrail)
Collecte des informations de trafic IP E/S dans le réseau avec VPC Flow Logs
Déploiement de la solution scalable (ASG et ELB) ELK (Elasticsearch, logstash, kibana) et préconfiguré pour la collecte, agrégation, traitement, analyse et visualisation des données :
Configuration de logstash pour le parse et la lecture des données
Indexation sur ElasticSearch et visualisation sur Kibana
Création de dashboard sur Kibana
Mise en place et configuration des alertes SNS en temps réel basées sur des évènements spécifiques
Création et automatisation du déploiement des architectures Serverless via Terraform et provisionnement de différentes services Lambda, queus SQS, Glue Job, de la base des données DynamoDB Single Table et de l API Gateway ( stages, alias , deployments, integration )
Automatisation du déploiement via des configurations Terraform
Mise en place d un data lake Serverless Event Driven via (S3, SQS, SNS, Lambda, Python et Glue)
Architecture Big Data Serverless
Développement de jobs Python, Spark Glue
Automatisation, création et déploiement d API RESTful multi-stage dans une architecture serverless composée d Amazon API Gateway, AWS Lambda , Cloudfront, Dynamodb
Développement de nouvelles fonctionnalités et Déploiement (en IaaS) d une application Flask (python)
Configuration d une instance EC2 pour une application Flask
Développement d une application Flask
Configuration du Nginx web server
Gestion des Security groups de l instance EC2
Création des Elastic IP address
Exécution de l application Flask sur différents ports EC2
Gestion des permissions IAM des ressources AWS
Migration d une base des données Nosql (Dynamodb) multi-tables en base de données Nosql DynamoDB Single Table :
Modélisation du diagram ERD (Entity Relationship Diagram)
Définition des modèles d\'accès (Access patterns)
Création de la base des données Single Table avec NoSQL Workbench
Développement des Serverless Lambda functions permettant de tester le modèle de base de donnée selon les access patterns
Création d\'un modèle conceptuel de bout en bout afin de résoudre et représenter tous les aspects importants du problème
Conversion de modèle conceptuel en modèle logique
Modélisation et définition de l architecture fonctionnelle de la solution
Cadrage du besoin et analyse de l existant
Etude et conception de l architecture fonctionnelle
Rédaction de documentation technique et fonctionnelle
Fonction
Autre
Consultant
Consultant Developpement
Developpeur
Systèmes exploitation
UNIX
WINDOWS
Base de donnée
MONGO DB
MYSQL
Certification
AWS
DEVOPS
Cloud
AMAZON AWS