十年網(wǎng)站開(kāi)發(fā)經(jīng)驗(yàn) + 多家企業(yè)客戶 + 靠譜的建站團(tuán)隊(duì)
量身定制 + 運(yùn)營(yíng)維護(hù)+專(zhuān)業(yè)推廣+無(wú)憂售后,網(wǎng)站問(wèn)題一站解決
什么是 Hive
Hive 是一個(gè)翻譯器,它可以將SQL語(yǔ)句翻譯成一個(gè) MapReduce 程序
常見(jiàn)的數(shù)據(jù)分析引擎: Hive, Pig, Impala, Spark SQL
Hive 是一個(gè)基于Hadoop 之上的數(shù)據(jù)分析引擎(數(shù)據(jù)倉(cāng)庫(kù))
Hives HDFS
表 --------> 目錄
數(shù)據(jù) --------> 文件
分區(qū) --------> 目錄
環(huán)境部署:
部署前準(zhǔn)備:
環(huán)境變量:vi ~/.bash_profile
HIVE_HOME=/root/training/apache-hive-2.3.0-bin
export HIVE_HOME
PATH=$HIVE_HOME/bin:$PATH
export PATH
嵌入式部署:
(1)使用Hive自帶的Derby數(shù)據(jù)庫(kù)來(lái)存儲(chǔ)元信息
(2)Hive只支持一個(gè)連接
創(chuàng)建 conf/hive-site.xml
初始化MetaStore:
schematool -dbType derby -initSchema
遠(yuǎn)程模式(需要MySQL數(shù)據(jù)庫(kù)):
1. 安裝 MySQL數(shù)據(jù)庫(kù)(此處省略)
2. 配置 hive-site.xml (JDBC的參數(shù))
3. 把MySQL 數(shù)據(jù)庫(kù)的驅(qū)動(dòng)放到: Hive/lib 下
4. 初始化 MySQL數(shù)據(jù)庫(kù)
老版本的hive 在第一次運(yùn)行時(shí)自動(dòng)初始化 MySQL數(shù)據(jù)庫(kù)
新版本的hive 需要執(zhí)行命令:
schematool -dbType mysql -initSchema
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無(wú)理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專(zhuān)為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。