日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

HIVE快速入门

發布時間:2025/6/15 编程问答 23 豆豆
生活随笔 收集整理的這篇文章主要介紹了 HIVE快速入门 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
(一)簡單入門
1、創建一個表
create table if not exists ljh_emp(
name string,
salary float,
gender string)
comment 'basic information of a employee'
row format delimited fields terminated by ',’;

2、準備數據文件
創建test目錄且目錄只有一個文件,文件內容如下:
ljh,25000,male
jediael,25000,male
llq,15000,female

3、將數據導入表中
load data local inpath '/home/ljhn1829/test' into table ljh_emp;

4、查詢表中的內容
select * from ljh_emp;
OK
ljh?? ?25000.0?? ?male
jediael?? ?25000.0?? ?male
llq?? ?15000.0?? ?female
Time taken: 0.159 seconds, Fetched: 3 row(s)

(二)關于分隔符
1、默認分隔符
hive中的行默認分隔符為 \n,字段分隔符為 ctrl+A,此外還有ctrl+B,ctrl+C,可以用于分隔array,struct,map等,詳見《hive編程指南》P44。
因此,若在建表是不指定row format delimited fields terminated by ‘,’,則認為默認字段分隔符為ctrl+A。
可以有2種解決方案:
一是在創建表時指定分隔符,如上例所示,
二是在數據文件中使用ctrl+A,見下例

2、在數據文件中使用ctrl+A全分隔符
(1)創建表
create table ljh_test_emp(name string, salary float, gender string);
(2)準備數據文件
創建test2目錄,目錄下只有一個文件,文件內容如下:
ljh^A25000^Amale
jediael^A25000^Amale
llq^A15000^Afemale
其中的^A字符僅在vi時才能看到,cat不能看到。
輸出^A的方法是:在vi的插入模式下,先按ctrl+V,再按ctrl+A
(3)將數據導入表
create table ljh_test_emp(name string, salary float, gender string);
(4)查詢數據
hive> select * from ljh_test_emp;
OK
ljh?? ?25000.0?? ?male
jediael?? ?25000.0?? ?male
llq?? ?15000.0?? ?female
Time taken: 0.2 seconds, Fetched: 3 row(s)

3、未指定分隔符,且又未使用ctrl+A作文件中的分隔符,出現以下錯誤
(1)創建表
create table if not exists ljh_emp_test(
name string,
salary float,
gender string)
comment 'basic information of a employee’;
(2)準備數據
ljh,25000,male
jediael,25000,male
llq,15000,female
(3)將數據導入表中
load data local inpath '/home/ljhn1829/test' into table ljh_emp_test;
(4)查看表中數據
select * from ljh_emp_test;
OK
ljh,25000,male?? ?NULL?? ?NULL
jediael,25000,male?? ?NULL?? ?NULL
llq,15000,female?? ?NULL?? ?NULL
Time taken: 0.185 seconds, Fetched: 3 row(s)
可以看出,由于分隔符為ctrl+A,因此導入數據時將文件中的每一行內容均只當作第一個字段,導致后面2個字段均為null。

(三)復雜一點的表
1、創建表
create table employees (
??? name string,
??? slalary float,
??? suboddinates array<string>,
??? deductions map<string,float>,
??? address struct<stree:string, city:string, state:string, zip:int>
)
partitioned by(country string, state string);

2、準備數據
John Doe^A100001.1^AMary Smith^BTodd Jones^AFederal Taxes^C.2^BStateTaxes^C.05^BInsurance^C.1^A1 Michigan Ave.^BChicago^BIL^B60600
Mary Smith^A80000.0^ABill King^AFederal Taxes^C.2^BState Taxes^C.05^BInsurance^C.1^A100 Ontario St.^BChicago^BIL^B60601
Todd Jones^A70000.0^A^AFederal Taxes^C.15^BState Taxes^C.03^BInsurance^C.1^A200 Chicago Ave.^BOak Park^BIL^B60700
Bill King^A60001.0^A^AFederal Taxes^C.15^BState Taxes^C.03^BInsurance^C.1^A300 Obscure Dr.^BObscuria^BIL^B60100
注意? ^A:分隔字段 ^B:分隔array/struct/map中的元素 ^C:分隔map中的KV
詳見《hive編程指南》P44。

3、將數據導入表中
load data local inpath '/home/ljhn1829/phd' into table employees partition(country='us',state='ca');

4、查看表數據
hive> select * from employees;
OK
John Doe?? ?100001.1?? ?["Mary Smith","Todd Jones"]?? ?{"Federal Taxes":0.2,"StateTaxes":0.05,"Insurance":0.1}?? ?{"stree":"1 Michigan Ave.","city":"Chicago","state":"IL","zip":60600}?? ?us?? ?ca
Mary Smith?? ?80000.0?? ?["Bill King"]?? ?{"Federal Taxes":0.2,"State Taxes":0.05,"Insurance":0.1}?? ?{"stree":"100 Ontario St.","city":"Chicago","state":"IL","zip":60601}?? ?us?? ?ca
Todd Jones?? ?70000.0?? ?[]?? ?{"Federal Taxes":0.15,"State Taxes":0.03,"Insurance":0.1}?? ?{"stree":"200 Chicago Ave.","city":"Oak Park","state":"IL","zip":60700}?? ?us?? ?ca
Bill King?? ?60001.0?? ?[]?? ?{"Federal Taxes":0.15,"State Taxes":0.03,"Insurance":0.1}?? ?{"stree":"300 Obscure Dr.","city":"Obscuria","state":"IL","zip":60100}?? ?us?? ?ca
Time taken: 0.312 seconds, Fetched: 4 row(s)

5、查看hdfs中的文件
hadoop fs -ls /data/gamein/g4_us/meta/employees/country=us/state=ca
Found 1 items
-rwxr-x---?? 3 ljhn1829 g4_us??????? 428 2015-05-12 12:49 /data/gamein/g4_us/meta/employees/country=us/state=ca/progamming_hive_data.txt
該文件中的內容與原有文件一致。


(四)通過select子句插入數據
1、創建表
create table employees2 (
??? name string,
??? slalary float,
??? suboddinates array<string>,
??? deductions map<string,float>,
??? address struct<stree:string, city:string, state:string, zip:int>
)
partitioned by(country string, state string);

2、插入數據
hive>? set hive.exec.dynamic.partition.mode=nonstrict;
否則會出現以下異常:
FAILED: SemanticException [Error 10096]: Dynamic partition strict mode requires at least one static partition column. To turn this off set hive.exec.dynamic.partition.mode=nonstrict

insert into table employees2?
partition (country,state)
select name,slalary,suboddinates,deductions,address, e.country, e.state
from employees e;

總結

以上是生活随笔為你收集整理的HIVE快速入门的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

主站蜘蛛池模板: 91好色先生 | 亚洲情人网 | 久久久久久久久91 | 重口另类| 手机在线看永久av片免费 | 久久亚洲一区二区 | 九九九久久久久 | 久久久成人精品 | 综合激情视频 | 国产午夜大地久久 | 黄色免费网站视频 | 日本精品一二三 | 在线成人中文字幕 | 精品日本视频 | 91丨porny丨在线中文 | 青春草av | 免费超碰在线观看 | 中文字幕一区二区三区免费视频 | 在线色站| 青青草原亚洲 | 日本久久精品视频 | 屁股夹体温计调教play | 丁香六月综合 | 欧美激情中文字幕 | 黄视频免费在线看 | 国产视频在线观看一区 | 国产又粗又猛又大爽 | 青青草免费公开视频 | 香蕉国产999 | 国产精品九九 | 成人在线短视频 | 一色桃子juy758在线播放 | 国产精品久久一区二区三区 | 国产自产自拍 | 国产福利一区二区 | xxxxwww一片| 免费观看全黄做爰的视频 | 懂色av粉嫩av蜜乳av | 91免费视频免费版 | 精品乱码一区二区三区四区 | 成片免费观看 | 无码一区二区三区免费视频 | 亚洲大片免费观看 | 户外少妇对白啪啪野战 | 国产免费高清 | 欧美午夜一区 | 波多野结衣亚洲一区 | 少妇精品无码一区二区 | 欧美乱妇在线观看 | 中国精品视频 | 欧美成人aaa片一区国产精品 | 秋霞影院午夜伦 | 中文字幕视频免费 | 羞辱狗奴的句子有哪些 | 日韩精品三级 | 成人美女毛片 | 日韩美女国产精品 | 免费吸乳羞羞网站视频 | 一级做a爰片久久毛片潮喷 天天透天天干 | 亚洲一区在线观 | 欧美日韩激情视频在线观看 | 欧美一级黄色片 | 嫩草嫩草嫩草嫩草嫩草嫩草 | 亚洲一区二区在线免费观看 | 欧美日韩 一区二区三区 | 国产精品视频免费 | av播放在线 | 特级黄毛片 | 91午夜视频在线观看 | 丰满人妻一区二区三区四区 | 久操视频免费观看 | 动漫av一区 | 麻豆系列在线观看 | 日噜 | www.爆操 | 亚洲日本在线观看 | たちの熟人妻av一区二区 | 中文字幕一区二区三区门四区五区 | 91精品国产99久久久久久红楼 | 很黄的网站在线观看 | 蜜桃av影视| 日本欧美一区二区三区不卡视频 | 久久99九九 | 亚洲av永久无码精品一百度影院 | 日本一本在线视频 | 免费色网 | 久久大香焦 | 午夜精品久久久久久毛片 | av日韩高清 | 99久久一区 | 性色av浪潮 | 日韩精品视频免费看 | 国产又黄又| 樱花草涩涩www在线播放 | www.成人 | 成人手机在线视频 | 九月婷婷综合 | 在线天堂中文在线资源网 | 二区在线视频 |