hdfs數據導入及spark導入hdfs數據


spark特點

(1)spark基於scala語言開發的

(2)spark基於內存運算

(3)支持多種語言

導入數據到hdfs上:

pyspark加載:

spark結構

  主從結構   master

                   worker

                   worker

 


注意!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系我们删除。



 
粤ICP备14056181号  © 2014-2021 ITdaan.com