postgresql 實現(xiàn)數(shù)據(jù)的導(dǎo)入導(dǎo)出
最近想把服務(wù)器上的測試數(shù)據(jù)庫數(shù)據(jù)導(dǎo)到我本地的電腦上,本地電腦數(shù)據(jù)庫是安裝在windows系統(tǒng)下
之前沒使用過pgsql,網(wǎng)上找了點資料,記入如下:
一,首先把服務(wù)器上的數(shù)據(jù)進(jìn)行備份

pg_dump -U 用戶名 數(shù)據(jù)庫名 (-t 表名)> 數(shù)據(jù)存放路徑
二,把.sql 文件下載到本地之后,首先切換到pgsql路徑下的bin目錄

然后執(zhí)行這條命令:

-d:數(shù)據(jù)庫名
-h:地址
-p:端口
-u:用戶名
-f:sql文件路徑
之后輸入口令:

這樣就可以了!
補充:Sqoop從PostgreSQL導(dǎo)入Hive遇到的兩個問題
昨天嘗試使用Sqoop從PostgreSQL向Hive中遷移數(shù)據(jù),過程中遇到兩個問題,在此記錄一下,以備以后遇到類似問題可以快速找到解決方案。
問題1:當(dāng)PostgreSQL表中有json類型時Sqoop命令報以下錯誤
No Java type for SQL type 1111 for
column voting_info
解決方案:sqoop命令中添加以下類型映射
--map-column-hive voting_info=String --map-column-java voting_info=String
問題2:如何指定PostgreSQL中指定schema名稱
PostgreSQL中的對象屬于三層模型,即database->schema->table。PostgreSQL中一般包含多個database,每個database包含多個schema,schema下包含多個表。因此使用sqoop抽取數(shù)據(jù)時有時需要指定表是屬于哪個schema。
解決方案:sqoop命令中添加以下類型映射
-- --schema szyd
下面給出一個常用的從PostgreSQL往Hive導(dǎo)數(shù)據(jù)的sqoop-import腳本,僅供參考:
sqoop-import --connect jdbc:postgresql://$PG_HOST:$PG_PORT/$PG_SID \ --username $PG_UNAME --password $PG_PWD --table $TABLE_NAME \ --hive-import --hive-table $TABLE_NAME --hive-overwrite \ --null-string '\\N' --null-non-string '\\N' --hive-drop-import-delims \ -m 1 --map-column-hive voting_info=String --map-column-java voting_info=String -- --schema $SCHEMA_NAME
以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。
相關(guān)文章
PostgreSQL誤刪數(shù)據(jù)庫該怎么辦詳解
這篇文章主要介紹了PostgreSQL中誤刪數(shù)據(jù)庫的恢復(fù)方法,包括備份恢復(fù)、歸檔日志恢復(fù)和操作系統(tǒng)層面的快照恢復(fù),文中通過代碼介紹的非常詳細(xì),需要的朋友可以參考下2025-03-03
PostgreSQL數(shù)據(jù)庫中Sequence的使用方法詳解
在 PostgreSQL 數(shù)據(jù)庫中,Sequence 是一種特殊的表對象,主要用于生成按順序遞增或遞減的數(shù)字序列,通常用于需要唯一標(biāo)識符的場景,例如自增 ID,以下是如何在 PostgreSQL 中使用 Sequence 的詳細(xì)步驟,需要的朋友可以參考下2024-11-11
Postgres 創(chuàng)建Role并賦予權(quán)限的操作
這篇文章主要介紹了 Postgres 創(chuàng)建Role并賦予權(quán)限的操作,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-01-01
PostgreSQL實現(xiàn)一個通用標(biāo)簽系統(tǒng)
這篇文章主要給大家介紹了關(guān)于利用PostgreSQL實現(xiàn)一個通用標(biāo)簽系統(tǒng)的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-01-01
PostgreSQL通過oracle_fdw訪問Oracle數(shù)據(jù)的實現(xiàn)步驟
通過類似于Oracle數(shù)據(jù)庫DBLINK的方式去實現(xiàn)PostgreSQL訪問oracle數(shù)據(jù)庫,本地搭建測試環(huán)境并配置相關(guān)配置,接下來通過本文給大家分享PostgreSQL通過oracle_fdw訪問Oracle數(shù)據(jù)的實現(xiàn)步驟,感興趣的朋友一起看看吧2021-05-05
如何解決PostgreSQL執(zhí)行語句長時間卡著不動不報錯也不執(zhí)行的問題
某日開發(fā)同事上報一sql性能問題,一條查詢好似一直跑不出結(jié)果,查詢了n小時,還未返回結(jié)果,這篇文章主要給大家介紹了關(guān)于如何解決PostgreSQL執(zhí)行語句長時間卡著不動不報錯也不執(zhí)行問題的相關(guān)資料,需要的朋友可以參考下2024-02-02

