Accueil > Formations > Data Science – Deep learning > BIG DATA Intégration SQL, Hive, SparkDataFrames

Formation BIG DATA Intégration SQL, Hive, SparkDataFrames

Domaine : Data Science – Deep learning

DURÉE
2.0 jour(s)

OBJECTIFS

Connaître les caractéristiques techniques des bases de données NoSQL, les différentes solutions disponibles. Identifier les critères de choix.

Pré-requis

Connaissance générale des systèmes d’informations et des bases de données.

Participants

Expert en bases de données, chef de projet et toute personne souhaitant comprendre le fonctionnement et les apports des bases NoSQL.

coût

Nous contacter pour une formation sur mesure ou en intra

programme

Télécharger le plan de cours

Consulter le plan de cours

LIEUx de formation

Notre centre de formation à Grenoble Notre centre de formation à Moirans Notre centre de formation à Sophia Antipolis

Sur votre site en formation intraEn classe distancielle

PROGRAMME DE FORMATION
BIG DATA Intégration SQL, Hive, SparkDataFrames

Présentation

Besoin (Comment concilier le quoi et le comment ?, Faciliter la manipulation de gros volumes de données en conservant une approche utilisateurs)
Rappels sur le stockage (HDFS, Cassandra, Hbase)
Formats de données (Parquet, orc, raw, clés/valeurs)
Les outils (Hive, Impala, Tez, Presto, Drill, Pig, Spark/QL)

Hive et Pig

Présentation (Mode de fonctionnement, Rappel sur map/reduce)
Hive (Le langage HiveQL)
Pig (Le langage pig/latin)
Exemples

Impala

Présentation (Cadre d’utilisation, Contraintes, Liaison avec le métastore Hive)
Travaux pratiques (Mise en évidence des performances)

Presto

Cadre d’utilisation (Sources de données utilisables)
Travaux pratiques (Mise en oeuvre d’une requête s’appuyant sur Cassandra, HDFS et PostgreSQL)

Spark Data Frame

Les différentes approches (Syntaxe Spark/SQL, APIs QL)
Compilation catalyst (Syntaxe, opérateurs, Comparaisons avec Presto)
Travaux pratiques (Mise en oeuvre d’une requête s’appuyant sur Hbase et HDFS)

Drill/sqoop

Indépendance Hadoop
Contraintes d’utilisation
Performances

Comparatifs

Approches des différents produits
Critères de choix

dates des formations a grenoble

Du 14/10/21 au 15/10/21
Réserver
Du 16/12/21 au 17/12/21
Réserver

dates des formations a SOPHIA ANTIPOLIS

Du 14/10/21 au 15/10/21
Réserver
Du 16/12/21 au 17/12/21
Réserver

formations associées

Apache Flink
Flux de données avec Storm
Blockchain : Mise en pratique
Apache Pig : Développement de scripts
Apache Cassandra : Administration
BIG DATA Gestion et pilotage de projets
BIG DATA Architecture et technologies
BIG DATA Hadoop Infrastructure sécurisée
BIG DATA Cassandra
BIG DATA Hadoop - L’écosysteme
BIG DATA Elastic Stack : Présentation
BIG DATA Hadoop Stockage avec HBase
BIG DATA Elastic Stack pour administrateurs
BIG DATA Hadoop Cloudera Administration
BIG DATA Kafka : Ingestion et traitement de messages
BIG DATA NEO4J Graphes et analyse
BIG DATA Hadoop Développement
BIG DATA Hadoop EMR
BIG DATA Programmation R et intégration Big Data
BIG DATA Hadoop Hortonworks Administration
BIG DATA Spark : Traitement de données
BIG DATA Supervision
BIG DATA La synthèse