QCM sur Big Data corrigé – Hadoop, Spark, Hive, HDFS – Partie 19

Questions d’Entretien sur Big Data avec des réponses pour la préparation des entretiens d’embauche, tests en ligne, examens et certifications. Ces questions et réponses sur Big Data comprennent divers sujets tel que les principes de base du Big Data, Hadoop, l’écosystème et ses composants, l’analyse, Hypervisor, etc… Et sont tirés d’un vrai entretien écrit et certaines parties sont en direct. Cette méthode d’apprentissage systématique préparera facilement toute personne pour réussir son test sur Big Data.
 
 

1. En MapReduce, que contient le fichier _SUCCESS ?

A Les résultats du Reducer

B Une preuve que le job s’est terminé sans erreur

C L’historique du job

D Un résumé des statistiques du Mapper

2. Quelle fonction permet de compter des lignes dans Hive ?

A COUNTLINES()

B NUMROWS()

C COUNT(*)

D SIZE(*)

SELECT COUNT(*) FROM ma_table;

3. Quelle commande permet de fusionner plusieurs fichiers dans HDFS en un seul fichier ?

A hadoop fs -merge

B hadoop fs -getmerge

C hadoop fs -join

D hadoop fs -combine

4. En Hive, que fait la commande MSCK REPAIR TABLE ?

A Vide les partitions

B Répare les données corrompues

C Redémarre le moteur d’exécution

D Ajoute au métastore les partitions HDFS manquantes

5. Quelle est la taille par défaut d’un bloc HDFS dans Hadoop 3.x ?

A 64 Mo

B 128 Mo

C 256 Mo

D 512 Mo

6. Quelle commande permet d’afficher l’espace libre dans le cluster HDFS ?

A hdfs dfsadmin -free

B hadoop fs -df

C hdfs dfs -diskspace

D hdfs dfsadmin -report

7. En MapReduce, comment appelle-t-on les fichiers intermédiaires entre les phases Map et Reduce ?

A Fichiers split

B Fichiers sortants

C Fichiers intermédiaires triés (spill files)

D Fichiers de post-traitement

8. Dans YARN, un container est ______________

A Un conteneur Docker isolé

B Une instance de HDFS

C Une partition de cluster

D Une unité de ressources (mémoire + CPU) pour exécuter des tâches

9. En Spark, que fait la méthode .collect() sur un RDD ou un DataFrame ?

A Sauvegarde les données sur HDFS

B Envoie toutes les données vers le driver

C Distribue les données aux workers

D Compresse les résultats

10. Dans Hive, quel type de table supprime aussi les fichiers HDFS quand on la droppe ?

A MANAGED (ou INTERNAL)

B EXTERNAL

C TEMPORARY

D LOGICAL