發(fā)簡信
IP屬地：上海
-
HBase多租戶-Namespace Quota管理
在多租戶的HBase環(huán)境中,通常給一個(gè)租戶分配一個(gè)namespace,因此namespace的容量管理是多租戶管理必不可少的一部分.目前name...
-
JAVA API連接HA(High Available) Hadoop集群
使用JAVA API連接HDFS時(shí)我們需要使用NameNode的地址,開啟HA后,兩個(gè)NameNode可能會主備切換,如果連接的那臺主機(jī)Name...
-
開啟kerberos后HBASE client配置
開啟了kerberos之后的集群,用hbase client連接需要增加相應(yīng)的配置,如果配置不正確很容易出現(xiàn)kerberos認(rèn)證失敗的錯(cuò)誤,因?yàn)?..
-
通過Ambari Rest API獲取hadoop組件配置
Ambari UI上可以很方便地查看及修改hadoop組件的配置.在Java代碼中通過client訪問,往往需要通過設(shè)置環(huán)境變量導(dǎo)入相關(guān)的配置,...
-
Hadoop數(shù)據(jù)生命周期管理框架Apache Falcon簡介Apache Falcon是一個(gè)開源的hadoop數(shù)據(jù)生命周期管理框架, 它提供了數(shù)據(jù)源 (Feed) 的管理服務(wù),如生命周期管理,備份,存檔到...
-
Hadoop和Spark性能監(jiān)控工具Dr. Elephant的編譯、部署及使用
Dr. Elephant是linkedin開源的mapreduce和spark作業(yè)的性能監(jiān)控及調(diào)優(yōu)工具, 它開發(fā)了可插拔式的啟發(fā)式規(guī)則來診斷ma...