2019獨角獸企業重金招聘Python工程師標準>>>

升級 Impala

升級 Cloudera Impala 包括停止Impala 所有服務，使用操作系統的包管理工具升級 Impala 到最新版，重新啟動 Imapla 服務。

??注意：

• 假如升級Impala到 1.2.1，應同時升級 Cloudera Manager 到 4.8 及以上版本。Cloudera Manager 4.8 包括Impala 1.2中引入的目錄服務的管理支持
• 每次升級 Impala 到一個主要版本或次要版本前，應閱讀發現說明中的 不兼容改變，確定你的代碼、啟動腳本中需要做的修改
• 同樣應檢查發行說明中 Impala 的已知問題與解決辦法，了解需要解決的問題與限制

• 由于修改了1.1.1以后Impala中日志的實現，當通過Cloudera Manager安裝Impala服務之后，應當修改 logbuflevel 屬性的的默認值。在Cloudera Manager中，通過Services > Impala > Configuration > View and Edit > Impala Daemon (Default) > Logs到達Impala服務的日志設置頁面。將Impala守護進程日志緩存等級(logbuflevel)從 -1 修改為 0。假如你希望減少日志I/O開銷，也可以將這個值修改為大于0，但是發生崩潰時，可能會丟失一些低優先級的日志信息

• 為了資源管理功能可用（與CDH5、YARN、Liama組件協作），impala用戶需要是hdfs組的成員。當新安裝時這一設置會自動執行，但當從較早版本的Impala升級到1.2時不會自動執行。當你把一個已經安裝了1.0或1.1版本Impala的節點升級到的CDH 5時，需要手工添加impala用戶到hdfs組。

? 注意：因為Impala 1.2.1是與CDH 4協同工作，而CDH 5 beta發布時包含的是Impala 1.2.0，這樣從CDH 4升級到CDH 5 beta版時實際上是恢復到較早的Impala版本。CHD 5 beta版本中自帶的Impala beta版包含了基于CDH 5基礎架構的資源管理功能，以及急需的用戶定義函數功能和目錄服務。然后，它不包括Impala 1.2.1中的一些新功能，例如 SHOW CREATE TABLE 語句、 SHOW TABLE STATS 語句和 SHOW COLUMN STATS 語句、 OFFSET 和 NULLS FIRST/LAST 選項，以及SYNC_DDL 選項。

在 Cloudera Manager 管理環境，使用?parcels 升級?Impala:

假如你原來使用包安裝的 Impala，準備改用?parcels 方式，先刪除 Impala?所有的相關的包。根據系統的不同，使用下面的命令檢查已經安裝了哪些包： rpm -qa # RHEL, Oracle Linux, CentOS, Debian dpkg --get-selections # Debian 使用下面命令刪除所有包： sudo yum removepkg_names# RHEL, Oracle Linux, CentOS sudo zypper removepkg_names# SLES sudo apt-get purgepkg_names# Ubuntu, Debian

登錄到Cloudera Manager Admin Console

進入?Hosts < Parcels?頁，可以看到允許升級的 Impala 的 parcels

依次點擊?Download、Distribute?(當上一步驟完成后按鈕會變化)

點擊?Activate.

執行完以上步驟，點擊?Restart?來重啟所有 Impala 服務

在 Cloudera Manager 管理環境，使用包升級?Impala:

登錄到Cloudera Manager Admin Console

在?Services?頁面，點擊?Impala?服務

點擊?Actions?=>?Stop

在你集群的每一 Impala 節點上使用下面各組命令之一進行升級

RHEL, Oracle Linux, CentOS:

$ sudo yum update impala-server $ sudo yum update hadoop-lzo-cdh4 # Optional; if this package is already installed. $ sudo yum update impala-catalog # New in Impala 1.2; do yum install when upgrading from 1.1.

SUSE:

$ sudo zypper update impala-server $ sudo zypper update hadoop-lzo-cdh4 # Optional; if this package is already installed $ sudo zypper update impala-catalog # New in Impala 1.2; do zypper install when upgrading from 1.1.

Debian/Ubuntu:

$ sudo apt-get install impala-server $ sudo apt-get install hadoop-lzo-cdh4 # Optional; if this package is already installed $ sudo apt-get install impala-catalog # New in Impala 1.2.

在每臺安裝了 Impala shell 的節點上，使用下面各組命令之一升級 Impala shell：

For RHEL, Oracle Linux, or CentOS systems:

$ sudo yum update impala-shell

SUSE:

$ sudo zypper update impala-shell

Debian/Ubuntu:

$ sudo apt-get install impala-shell

登錄到 Cloudera Manager Admin Console

在?Services?頁面，點擊 Impala 服務

點擊?Actions?=>?Start

不使用 Cloudera ManagerTo upgrade Impala without :

停止 Impala 服務

停止集群中所有 Impala 節點上的 impalad?進程： $ sudo service impala-server stop

停止集群中 state store 服務的所有實例： $ sudo service impala-state-store stop

停止集群中目錄服務的所有實例： $ sudo service impala-catalog stop

檢查配置文件中是否有新的推薦或必須的設置，通常配置文件在?/etc/impala/conf 下。請參閱 Impala 安裝后配置了解性能和可擴展設置

在你集群的每一 Impala 節點上使用下面各組命令之一升級?Impala：

RHEL, Oracle Linux, CentOS:

$ sudo yum update impala-server $ sudo yum update impala-catalog # New in Impala 1.2; do yum install when upgrading from 1.1.

SUSE:

$ sudo zypper update impala-server $ sudo zypper update impala-catalog # New in Impala 1.2; do zypper install when upgrading from 1.1.

Debian/Ubuntu:

$ sudo apt-get install impala-server $ sudo apt-get install impala-catalog # New in Impala 1.2.

在每臺安裝了 Impala shell 的節點上，使用下面各組命令之一升級 Impala shell：

RHEL, Oracle Linux, CentOS:

$ sudo yum update impala-shell

SUSE:

$ sudo zypper update impala-shell

Debian/Ubuntu:

$ sudo apt-get install impala-shell

重啟 Impala 服務：

在集群中所需的節點上重啟 Impala state store 服務。假如服務啟動成功，則會看到?statestored 進程 $ sudo service impala-state-store start $ ps ax | grep [s]tatestored6819 ? Sl 0:07 /usr/lib/impala/sbin/statestored -log_dir=/var/log/impala -state_store_port=24000

在 Impala server 服務啟動之前啟動 state store 服務，可以避免運行?impala-shell 時報?"Not connected"?錯誤。

在集群的每一節點上重啟 Impala 目錄服務。假如服務啟動成功，則會看到?catalogd 進程 $ ps ax | grep [c]atalogd6068 ? Sl 4:06 /usr/lib/impala/sbin/catalogd

在集群的每一節點上重啟 Impala 守護進程服務。假如服務啟動成功，則會看到 impalad 進程 $ sudo service impala-server start $ ps ax | grep [i]mpalad7936 ? Sl 0:12 /usr/lib/impala/sbin/impalad -log_dir=/var/log/impala -state_store_port=24000 -use_statestore -state_store_host=127.0.0.1 -be_port=22000

??注意：

假如服務沒有啟動成（有可能 sudo 服務命令顯示 [OK]），檢查 Impala 日志中的錯誤信息，通常是在?/var/log/impala目錄。

轉載于:https://my.oschina.net/weiqingbin/blog/185185

總結

以上是生活随笔為你收集整理的升级 Impala（翻译）的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。