hive与spark的匹配版本汇总
生活随笔
收集整理的這篇文章主要介紹了
hive与spark的匹配版本汇总
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
版本信息來自于hive的源碼包的pom.xml文件中,匯總下:
apache-hive-1.2.2-src <spark.version>1.3.1</spark.version>
apache-hive-2.1.1-src <spark.version>1.6.0</spark.version>
apache-hive-2.3.3-src <spark.version>2.0.0</spark.version>
apache-hive-3.0.0-src <spark.version>2.3.0</spark.version>
stackoverflow上可行的例子是:
spark 2.0.2 with hadoop 2.7.3 and hive 2.1
參考鏈接:
https://stackoverflow.com/questions/42281174/hive-2-1-1-on-spark-which-version-of-spark-should-i-use
?
qq群里網友給出的版本是:
Hive 2.6 spark2.2.0
?
?
我自己的當前版本如下,暫時沒發現有什么兼容性問題:
apache-hive-3.0.0-bin
hadoop-3.0.3
spark-2.3.1-bin-hadoop2.7
總結
以上是生活随笔為你收集整理的hive与spark的匹配版本汇总的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Pessimistic Error Pr
- 下一篇: sbt安装、配置、運行(scala sb