postgresql 實(shí)現(xiàn)數(shù)據(jù)的導(dǎo)入導(dǎo)出
最近想把服務(wù)器上的測試數(shù)據(jù)庫數(shù)據(jù)導(dǎo)到我本地的電腦上,本地電腦數(shù)據(jù)庫是安裝在windows系統(tǒng)下
之前沒使用過pgsql,網(wǎng)上找了點(diǎn)資料,記入如下:
一,首先把服務(wù)器上的數(shù)據(jù)進(jìn)行備份
pg_dump -U 用戶名 數(shù)據(jù)庫名 (-t 表名)> 數(shù)據(jù)存放路徑
二,把.sql 文件下載到本地之后,首先切換到pgsql路徑下的bin目錄
然后執(zhí)行這條命令:
-d:數(shù)據(jù)庫名
-h:地址
-p:端口
-u:用戶名
-f:sql文件路徑
之后輸入口令:
這樣就可以了!
補(bǔ)充:Sqoop從PostgreSQL導(dǎo)入Hive遇到的兩個(gè)問題
昨天嘗試使用Sqoop從PostgreSQL向Hive中遷移數(shù)據(jù),過程中遇到兩個(gè)問題,在此記錄一下,以備以后遇到類似問題可以快速找到解決方案。
問題1:當(dāng)PostgreSQL表中有json類型時(shí)Sqoop命令報(bào)以下錯(cuò)誤
No Java type for SQL type 1111 for
column voting_info
解決方案:sqoop命令中添加以下類型映射
--map-column-hive voting_info=String --map-column-java voting_info=String
問題2:如何指定PostgreSQL中指定schema名稱
PostgreSQL中的對象屬于三層模型,即database->schema->table。PostgreSQL中一般包含多個(gè)database,每個(gè)database包含多個(gè)schema,schema下包含多個(gè)表。因此使用sqoop抽取數(shù)據(jù)時(shí)有時(shí)需要指定表是屬于哪個(gè)schema。
解決方案:sqoop命令中添加以下類型映射
-- --schema szyd
下面給出一個(gè)常用的從PostgreSQL往Hive導(dǎo)數(shù)據(jù)的sqoop-import腳本,僅供參考:
sqoop-import --connect jdbc:postgresql://$PG_HOST:$PG_PORT/$PG_SID \ --username $PG_UNAME --password $PG_PWD --table $TABLE_NAME \ --hive-import --hive-table $TABLE_NAME --hive-overwrite \ --null-string '\\N' --null-non-string '\\N' --hive-drop-import-delims \ -m 1 --map-column-hive voting_info=String --map-column-java voting_info=String -- --schema $SCHEMA_NAME
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教。
相關(guān)文章
PostgreSQL的外部數(shù)據(jù)封裝器fdw用法
這篇文章主要介紹了PostgreSQL的外部數(shù)據(jù)封裝器fdw用法,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-01-01PostgreSQL模式匹配與正則表達(dá)式方法總結(jié)
在postgresql中使用正則表達(dá)式時(shí)需要使用關(guān)鍵字“~”,以表示該關(guān)鍵字之前的內(nèi)容需匹配之后的正則表達(dá)式,這篇文章主要給大家介紹了關(guān)于PostgreSQL模式匹配與正則表達(dá)式的相關(guān)資料,需要的朋友可以參考下2022-11-11PostgreSQL 如何修改文本類型字段的存儲(chǔ)方式
這篇文章主要介紹了PostgreSQL 如何修改文本類型字段的存儲(chǔ)方式,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-12-12PostgreSQL中Slony-I同步復(fù)制部署教程
這篇文章主要給大家介紹了關(guān)于PostgreSQL中Slony-I同步復(fù)制部署的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用PostgreSQL具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-06-06postgresql數(shù)據(jù)庫連接數(shù)和狀態(tài)查詢操作
這篇文章主要介紹了postgresql數(shù)據(jù)庫連接數(shù)和狀態(tài)查詢操作,具有很好的參考價(jià)值,對大家有所幫助。一起跟隨小編過來看看吧2021-02-02PostgreSQL自定義函數(shù)并且調(diào)用方式
這篇文章主要介紹了PostgreSQL如何自定義函數(shù)并且調(diào)用,本文通過示例代碼給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-06-06Linux 上 定時(shí)備份postgresql 數(shù)據(jù)庫的方法
這篇文章主要介紹了Linux 上 定時(shí)備份postgresql 數(shù)據(jù)庫的方法,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-02-02Postgresql在mybatis中報(bào)錯(cuò):操作符不存在:character varying == unknown的問題
這篇文章主要介紹了Postgresql在mybatis中報(bào)錯(cuò): 操作符不存在 character varying == unknown的問題,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-01-01