發簡信
IP屬地：上海
-
AI 產業鏈
deepseek 算力支持 中科曙光 浪潮信息 潤澤科技 每日互動（與deepseek關系最深） 技術合作 航錦科技 拓爾思 科大訊飛 參股投資...
-
hive map數的控制
背景：最近執行一個 select count(*)，發現mapreduce計算分片數很慢，且分片數的大小對不上 確定 hive 默認開啟 map...
-
計算機核數查看背景：對計算機核數比較模糊，整理了解 查看方法 我的電腦->屬性->設備管理器->處理器，有多少個，就代表多少核image.png如圖，即為12...
-
hive 外部表映射 es
背景：公司有需求將hive數據導入es，之前是通過datax進行導數的；但是datax多線程很耗內存，并且經常性會出現一些程序上的問題。故想要使...
-
Linux完全卸載某應用
背景：這兩天安裝cdh，重新溫習了下linux的使用，關于卸載應用，特記錄 強制刪除已安裝程序及其關聯：rpm -qa|grep python|...
-
centos6 啟動cloudera-scm-agent失敗
背景：最近準備在自己的虛擬機上搭一個cdh的集群，在啟動cloudera-scm-agent失敗排查思路： 進去log日志查看報錯信息：/usr...
-
windows10/windows11 簡繁體切換
背景： 最近電腦突然不知怎么的，輸入法由簡體轉為繁體，并且不知如何更改 使用 ctrl+shift+f可進行簡繁體切換 在使用idea時ctrl...
-
datax從hive往es中導數報錯：One or more of the items in the Bulk request failed, check BulkResult.getItems...
背景：公司數據涉及到從hive往es中導數，使用datax來進行抽取 報錯：One or more of the items in the Bu...
-
對于hql中拼接字符串的函數使用
背景：在工作過程中，一直經常性接觸到hql拼接字符串的工作內容，但每次都是最常規的拼接，效率并不高。故調研發現hive早已提供相關函數進行更簡便...