web-dev-qa-db-fra.com

Comment vérifier Spark Version

Je veux vérifier la version spark dans cdh 5.7.0. J'ai cherché sur internet mais je ne suis pas capable de comprendre. S'il vous plaît aider.

Merci

44
Ironman

Ajout à @Binary Nerd

Si vous utilisez Spark, utilisez ce qui suit pour obtenir la version Spark:

spark-submit --version

ou

Connectez-vous à la page Cloudera Manager et allez à Hosts puis exécutez inspect hosts in cluster

79
BruceWayne

Vous pouvez obtenir la version spark à l'aide de la commande suivante:

spark-submit --version

spark-Shell --version

spark-sql --version

Vous pouvez visiter le site ci-dessous pour connaître la version spark utilisée dans CDH 5.7.0

http://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_rn_new_in_cdh_57.html#concept_m3k_rxh_1v

20

Selon la documentation Cloudera - Nouveautés de CDH 5.7. cela inclut Spark 1.6. .

2
Binary Nerd