sqoop的導(dǎo)入工具使用

目前用到的sqoop 是從oracle 導(dǎo)入數(shù)據(jù)到hbase中的。

“只有客戶發(fā)展了，才有我們的生存與發(fā)展！”這是創(chuàng)新互聯(lián)的服務(wù)宗旨！把網(wǎng)站當(dāng)作互聯(lián)網(wǎng)產(chǎn)品，產(chǎn)品思維更注重全局思維、需求分析和迭代思維，在網(wǎng)站建設(shè)中就是為了建設(shè)一個(gè)不僅審美在線，而且實(shí)用性極高的網(wǎng)站。創(chuàng)新互聯(lián)對網(wǎng)站設(shè)計(jì)制作、成都網(wǎng)站建設(shè)、網(wǎng)站制作、網(wǎng)站開發(fā)、網(wǎng)頁設(shè)計(jì)、網(wǎng)站優(yōu)化、網(wǎng)絡(luò)推廣、探索永無止境。

sqoop import --connect jdbc:oracle:thin:@192.168.193.37:1521:hispacedb --username hwmarket  --password hwmarket37 --m 1 --query "select g.imei,g.id as sign ,to_char(g.logindate,'yyyy-MM-dd hh34:mi:ss') as crtdate,g.buildNumber,g.modelnumber,g.firmwarever as firmware,g.hispaceNumber,g.cno,to_char(g.updateTime,'yyyy-MM-dd hh34:mi:ss') as updateTime ,g.net,g.source,'' density,'' screen from l_logonlog_egame g where \$CONDITIONS" --columns IMEI,SIGN,CRTDATE,BUILDNUMBER,MODELNUMBER,FIRMWARE,HISPACENUMBER,CNO,UPDATETIME,NET,SOURCE,DENSITY,SCREEN --hbase-create-table --hbase-table h_active_device_info_gamecenter --hbase-row-key IMEI --column-family data

具體的一些參數(shù)可以參看sqoop 官網(wǎng)的api 即可，

倒入數(shù)據(jù)速度還是挺快的1kw的數(shù)據(jù)在10分鐘作用就能導(dǎo)入完成。 

另外再使用中， 發(fā)現(xiàn)sqoop從oracle導(dǎo)入到hbase中 不能改變hbase中的字段， 必須要和oracle這邊的字段名保持一致， 不知道是不是我自己使用的問題， 如果有明白的可以分享下。

分享題目：sqoop的導(dǎo)入工具使用
路徑分享：http://bm7419.com/article18/gippdp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供App開發(fā)、Google、做網(wǎng)站、定制開發(fā)、虛擬主機(jī)、網(wǎng)頁設(shè)計(jì)公司

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)