sparkonsql

Ⅰ spark on hive鍜宧ive on spark镄勫尯鍒

spark on hive : 鏄痵park 阃氲繃spark-sql 浣跨敤hive 璇鍙ユ搷浣渉ive ,搴曞眰杩愯岀殑杩樻槸 spark rdd.
*锛1锛夊氨鏄阃氲繃sparksql锛屽姞杞絟ive镄勯厤缃鏂囦欢锛岃幏鍙栧埌hive镄勫厓鏁版嵁淇℃伅
* 锛2锛塻park sql銮峰彇鍒癶ive镄勫厓鏁版嵁淇℃伅涔嫔悗灏卞彲浠ユ嬁鍒癶ive镄勬墍链夎〃镄勬暟鎹
* 锛3锛夋帴涓嬫潵灏卞彲浠ラ氲繃spark sql𨱒ユ搷浣渉ive琛ㄤ腑镄勬暟鎹
hive on spark: 鏄痟ive 绛夌殑镓ц屽紩镎庡彉鎴恠park , 涓嶅啀鏄痬aprece. 鐩稿逛簬涓娄竴椤,杩欎釜瑕佸疄鐜拌矗楹荤储寰埚, 蹇呴’閲嶆柊缂栬疟浣犵殑spark. 鍜屽煎叆jar鍖,
======================涓嬮溃鏄阃佺殑=============
钥 hive on spark 鏄鎶奾ive镆ヨ浠巑aprece 镄刴r (hadoop 璁＄畻寮曟搸)镎崭綔镟挎崲涓簊park rdd 镎崭綔. 涓嶈繃鐩鍓嶅ぇ閮ㄥ垎浣跨敤镄勬槸spark on hive
======================================
钖庨溃琛ュ厖镄:: 鎴戝幓浜嗘煇阃氢箣钖, 鐭ラ亾浜 鎶 hive镄勬墽琛屽紩镎庢崲鎴恠park 镄勪篃鎸哄氱殑. 涓昏佹槸涓轰简浣跨敤绫 sql 鍜岀浉鍏宠剼链𨱒ュ畬鎴愪换锷.
涓轰简鐪熺悊,鎴戣佹妸闾ｄ釜鍨冨溇镄勫洖绛旂粰椤朵笅铡...