DataGrip 連接 HiveServer2 報(bào)錯(cuò)的問(wèn)題
DataGrip 連接 HiveServer2 報(bào)錯(cuò)
一、Heap memory
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
因?yàn)?DataGrip 會(huì)開(kāi)好幾個(gè) Session，我這里是 4 個(gè) Session
因此有時(shí)候如果執(zhí)行的語(yǔ)句過(guò)大，會(huì)造成堆內(nèi)存來(lái)不起回收。導(dǎo)致堆內(nèi)存溢出，反應(yīng)在 DataGrip 就是執(zhí)行語(yǔ)句卡住沒(méi)反應(yīng)，等很久然后報(bào)錯(cuò)。這里有個(gè)超時(shí)時(shí)間，等很久就是超過(guò)這個(gè)超時(shí)時(shí)間后報(bào)錯(cuò)。
我們可以適當(dāng)調(diào)大 heap 內(nèi)存:
# 在 hive/bin 目錄下的 hive-config.sh，最后一行就是設(shè)置 heap 的大小。
69 # Default to use 256MB
70 export HADOOP_HEAPSIZE=${HADOOP_HEAPSIZE:-2048}
二、Too many open files
lzq@hadoop102 ~ ulimit -a -t: cpu time (seconds) unlimited -f: file size (blocks) unlimited -d: data seg size (kbytes) unlimited -s: stack size (kbytes) 8192 -c: core file size (blocks) 0 -m: resident set size (kbytes) unlimited -u: processes 10000 -n: file descriptors 4096 -l: locked-in-memory size (kbytes) 64 -v: address space (kbytes) unlimited -x: file locks unlimited -i: pending signals 31830 -q: bytes in POSIX msg queues 819200 -e: max nice 0 -r: max rt priority 0 -N 15: unlimited
修改最大文件連接數(shù)量
- Linux 任何外部設(shè)備(socket、文件)都可以看做一個(gè)文件，而一個(gè)文件就可以通過(guò)一個(gè)文件描述符來(lái)讀寫。
-n: file descriptors 4096描述的就是一進(jìn)程可以打開(kāi)文件最大的數(shù)量- 默認(rèn)是1024，我們可以通過(guò)命令
ulimit -n 4096把最大打開(kāi)文件調(diào)整到 4096，如果重啟會(huì)還原成默認(rèn)值 - 永久設(shè)置方法
vim /etc/security/limits.conf 在最后加入 * soft nofile 65535 * hard nofile 65535
安裝 lsof
sudo yum install lsof -y
查看當(dāng)前系統(tǒng)打開(kāi)的文件數(shù)量
lsof | wc -l watch "lsof | wc -l"
lzq@hadoop102 ~ jps 25696 Jps 1522 NameNode 22627 RunJar 1716 DataNode 3140 Kafka 2309 NodeManager 2647 QuorumPeerMain 22889 RunJar 23322 RunJar
查看某一進(jìn)程的打開(kāi)文件數(shù)量
# RunJar 就是 HiveServer2 的進(jìn)程 lsof -p pid | wc -l lsof -p 22627 | wc -l lsof -p 22889 | wc -l lsof -p 23322 | wc -l
到此這篇關(guān)于DataGrip 連接 HiveServer2 報(bào)錯(cuò)的文章就介紹到這了,更多相關(guān)DataGrip 連接 HiveServer2 報(bào)錯(cuò)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
![數(shù)據(jù)庫(kù)設(shè)計(jì)技巧[轉(zhuǎn)]](http://img.jbzj.com/images/xgimg/bcimg0.png)
數(shù)據(jù)庫(kù)設(shè)計(jì)技巧[轉(zhuǎn)]
數(shù)據(jù)庫(kù)設(shè)計(jì)技巧[轉(zhuǎn)]...2007-01-01
如何在Navicat新建連接、新建數(shù)據(jù)庫(kù)以及導(dǎo)入數(shù)據(jù)庫(kù)
Navicat是圖形化操作MySQL的強(qiáng)大工具,但是當(dāng)數(shù)據(jù)庫(kù)的服務(wù)器沒(méi)有開(kāi)放3306端口給辦公網(wǎng)絡(luò)時(shí),在辦公網(wǎng)使用navicat連接數(shù)據(jù)庫(kù)是連不上的,下面這篇文章主要給大家介紹了關(guān)于如何在Navicat新建連接、新建數(shù)據(jù)庫(kù)以及導(dǎo)入數(shù)據(jù)庫(kù)的相關(guān)資料,需要的朋友可以參考下2023-05-05
一條慢SQL導(dǎo)致購(gòu)物車服務(wù)無(wú)法使用的解決方案
今天小編就為大家分享一篇關(guān)于一條慢SQL導(dǎo)致購(gòu)物車服務(wù)無(wú)法使用的解決方案，小編覺(jué)得內(nèi)容挺不錯(cuò)的，現(xiàn)在分享給大家，具有很好的參考價(jià)值，需要的朋友一起跟隨小編來(lái)看看吧2018-12-12
這篇文章主要為大家詳細(xì)介紹了Window下Neo4j安裝圖文教程，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2018-04-04
hive是基于Hadoop的一個(gè)數(shù)據(jù)倉(cāng)庫(kù)工具，用來(lái)進(jìn)行數(shù)據(jù)提取、轉(zhuǎn)化、加載，這是一種可以存儲(chǔ)、查詢和分析存儲(chǔ)在Hadoop中的大規(guī)模數(shù)據(jù)的機(jī)制，這篇文章主要介紹了hive常見(jiàn)表結(jié)構(gòu),需要的朋友可以參考下2022-08-08
dbeaver是一款很強(qiáng)大的數(shù)據(jù)庫(kù)連接工具，本人之前使用的是navicat，挺好用的，只不過(guò)每次激活都要整半天，然后看到了dbeaver這款工具，本著嘗試的心態(tài)，體驗(yàn)了下，真香2021-11-11
虛擬主機(jī)ACCESS轉(zhuǎn)換成MSSQL完全攻略（圖文教程）
大家都知道，ACCESS數(shù)據(jù)庫(kù)在數(shù)據(jù)量到達(dá)一定程度后，訪問(wèn)速度會(huì)明顯變慢，甚至造成崩潰。目前，大多數(shù)虛擬主機(jī)服務(wù)商提供的ASP主機(jī)空間一般都同時(shí)支持MS ACCESS和MS SQL兩種類型的數(shù)據(jù)庫(kù)。2010-04-04
數(shù)據(jù)庫(kù)插入數(shù)據(jù)之select into from與insert into select區(qū)別詳解
能第一次接觸select...into...from...和insert into...select...有很多人都會(huì)誤解， 從表面上看都是把相關(guān)信息查詢出來(lái)，然后添加到一個(gè)表里，其實(shí)還遠(yuǎn)遠(yuǎn)沒(méi)有這么簡(jiǎn)單，接下來(lái)，小豬就用最普通的表述給大家介紹一下這兩者間的區(qū)別2014-01-01
這篇文章主要介紹了詳解SQLite中的查詢規(guī)劃器,SQLite是一個(gè)開(kāi)源的嵌入式數(shù)據(jù)庫(kù),需要的朋友可以參考下2015-07-07
存儲(chǔ)過(guò)程返回?cái)?shù)組對(duì)象示例代碼
存儲(chǔ)過(guò)程返回?cái)?shù)組對(duì)象其實(shí)就相當(dāng)于返回List里面放的對(duì)象數(shù)據(jù)，下面與大家分享是例子，感興趣的朋友可以學(xué)習(xí)下2013-07-07