(+33)1 55 60 76 72
Toutes nos formations sont disponibles en classe virtuelle. Contactez-nous pour plus d’informations : formation@oxiane.com

nouveauté Big Data : intégration SQL, Hive, Spark/Dataframe

Vous cherchez une formation et vous ne l'avez pas trouvée...Faites une suggestion
Accueil » Formations » Data » Big Data : intégration SQL, Hive, Spark/Dataframe
1225 € HT 2 jours DB-BDI

Programme

Présentation

  • Besoin
  • Adéquation entre les objectifs et les outils
  • Faciliter la manipulation de gros volumes de données en conservant une approche utilisateurs
  • Rappels sur le stockage : HDFS, Cassandra, HBase et les formats de données : parquet, orc, raw, clés/valeurs
  • Les outils : Hive, Impala, Tez, Presto, Drill, Pig, Spark/QL

Hive et Pig

  • Présentation
  • Mode de fonctionnement. Rappel sur map/reduce
  • Hive : le langage HiveQL. Exemples
  • Pig : le langage pig/latin. Exemples

Impala

  • Présentation
  • Cadre d’utilisation
  • Contraintes
  • Liaison avec le métastore Hive

Travaux pratiques : mise en évidence des performances

Presto

  • Cadre d’utilisation
  • Sources de données utilisables

Travaux pratiques : mise en œuvre d’une requête s’appuyant sur Cassandra et PostgreSQL

Spark DataFrame

  • Les différentes approches
  • Syntaxe Spark/SQl
  • APIs QL
  • Compilation catalyst
  • Syntaxe, opérateurs

Travaux pratiques : mise en œuvre d’une requête s’appuyant sur HBase et HDFS

Drill

  • Utilisation d’APIs JDBC, ODBC
  • Indépendance Hadoop
  • Contraintes d’utilisation
  • Performances

Comparatifs

  • Compatibilité ANSI/SQL
  • Approches des différents produits
  • Critères de choix

Profils des intervenants

Toutes nos formations sont animées par des consultants-formateurs expérimentés et reconnus par leurs pairs.

Modalités d'évaluation

Evaluation des acquis de la formation par le biais de cas pratiques et/ou mises en situation.
Attestation de formation remise à chaque participant.

Démarche qualité

Questionnaire d’évaluation de satisfaction à chaud complété par chaque participant à l’issue de la formation.

Moyens pédagogiques

Salle équipée de PC (1 poste par stagiaire), vidéo-projecteur.
Espace de pause.
Dernière mise à jour le 17/11/2020