更新時間:2021-03-04 來源:黑馬程序員 瀏覽量:
本地和遠(yuǎn)程模式安裝配置方式大致相同,本質(zhì)上是將Hive默認(rèn)的元數(shù)據(jù)存儲介質(zhì)由自帶的Derby數(shù)據(jù)庫替換為MySQL數(shù)據(jù)庫,這樣無論在任何目錄下以任何方式啟動Hive,只要連接的是同一臺Hive服務(wù),那么所有節(jié)點訪問的元數(shù)據(jù)信息是一致的,從而實現(xiàn)元數(shù)據(jù)的共享。下面就以本地模式為例,講解安裝過程。
本地模式的Hive安裝主要包括兩個步驟:首先安裝MySQL服務(wù),再安裝Hive。具體步驟如下:
1.安裝MySQL服務(wù)
MySQL安裝方式有許多種,可以直接解壓安裝包進行相關(guān)配置,也可以選擇在線安裝,本節(jié)選用在線安裝MySQL方式。在線安裝MySQL的具體指令和說明如下:
// 下載安裝MySQL
$ yum install mysql mysql-server mysql-devel// 啟動MySQL服務(wù)
$ /etc/init.d/mysqld start// MySQL連接并登錄MySQL服務(wù)
$ mysql
上述指令中,首先通過“yum install”命令下載并安裝MySQL程序,并且啟動MySQL服務(wù),然后就可以使用MySQL命令連接到MySQL客戶端。
接下來,進入MySQL客戶端后,分別對MySQL數(shù)據(jù)庫密碼進行修改(可選),并設(shè)置允許遠(yuǎn)程登錄權(quán)限,具體指令如下:
// 修改登錄MySQL用戶名及密碼
mysql> USE mysql;
mysql> UPDATE user SET Password=PASSWORD('123456') WHERE user='root';
// 設(shè)置允許遠(yuǎn)程登錄
mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION;
// 強制寫入
mysql> FLUSH PRIVILEGES;
2.Hive的配置
(1)修改hive-env.sh配置文件,配置Hadoop環(huán)境變量
進入Hive安裝包下的conf文件夾,將hive-env.sh.template文件進行拷貝并重命名為hive-env.sh,具體指令如下:
$ cd /export/servers/apache-hive-1.2.1-bin/conf
$ cp hive-env.sh.template hive-env.sh
然后修改hive-env.sh配置文件,添加Hadoop環(huán)境變量,具體內(nèi)容如下:
export HADOOP_HOME=/export/servers/hadoop-2.7.4
上述操作是設(shè)置Hadoop環(huán)境變量,作用是無論系統(tǒng)是否配置Hadoop環(huán)境變量,在Hive執(zhí)行時,一定能夠通過hive-env.sh配置文件去加載Hadoop環(huán)境變量,由于在部署Hadoop集群時已經(jīng)配置了全局Hadoop環(huán)境變量,因此可以不設(shè)置該參數(shù)。
(2)添加hive-site.xml配置文件,配置MySQL相關(guān)信息
由于Hive安裝包conf目錄下,沒有提供hive-site.xml文件,這里需要創(chuàng)建并編輯一個hive-site.xml配置文件,具體內(nèi)容如下所示:
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
<description>Mysql連接協(xié)議</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>JDBC連接驅(qū)動</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
<description>用戶名</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
<description>密碼</description>
</property>
</configuration>
完成配置后,Hive就會把默認(rèn)使用Derby數(shù)據(jù)庫方式所覆蓋。這里需要注意的是,由于使用了MySQL數(shù)據(jù)庫,那么就需要上傳MySQL連接驅(qū)動的Jar包到Hive安裝包的lib文件夾下,本教材使用mysql-connector-java-5.1.32.jar,使用rz命令上傳即可。至此就完成了本地模式的安裝。
如果使用遠(yuǎn)程模式的安裝方式,只需要將hive-site.xml配置文件中的localhost修改為具有MySQL服務(wù)的節(jié)點IP即可,這樣無論用戶通過什么路徑下啟動Hive客戶端,都可以訪問相同的元數(shù)據(jù)信息。
猜你喜歡:
Redis、傳統(tǒng)數(shù)據(jù)庫、HBase和Hive幾種數(shù)據(jù)存儲的區(qū)別
RDD如何分區(qū),各種模式下的分區(qū)數(shù)目是怎樣的?