tag hive

標籤
貢獻103
177
05:15 PM · Oct 25 ,2025

@hive / 博客 RSS 訂閱

mob64ca140dc73b - Doris淺略介紹 +部署+使用_doris部署

Apache Doris 4.0 的 AI 功能(LLM 函數 + 向量索引)與 Cloudera CDP 7.3(或類 CDP 的 CMP 7.13 平台,如華為鯤鵬 ARM 版)在銀行信信用卡的操作指南和腳本 針對 國有商業銀行 場景下,Apache Doris 4.0(ARM64 鯤鵬環境)與華為 Cloud Data AI CMP 7.13

大數據 , hive , hadoop , zookeeper , flink , kafka

收藏 評論

mob649e815c3b9e - spark 追加表 saveAsTable 參數

在使用 Apache Spark 的過程中,尤其是使用 saveAsTable 方法進行表的追加寫入時,可能會出現一些問題,這不僅影響了業務的穩定性,也影響了數據的準確性和完整性。因此,本文將詳細記錄如何解決與“spark 追加表 saveAsTable 參數”相關的問題,幫助大家更好地理解和使用 Spark。 背景定位 在某個項目中,我們使用 Apache Spark 處理大規

spark , 數據 , hive , aigc

收藏 評論

代碼魔術師之手 - 2011-2022年高職大數據競賽-賽題任務剖析

目錄 一、環境準備 (一)新建maven項目 (二)添加框架支持 (三)修改maven倉庫地址 (四)pom文件 (五)新建scala目錄 二、編寫具體代碼 (一)全量抽取 (二)增量抽取 題目一:兩個時

spark , 字段 , 大數據 , hive , Css , 前端開發 , HTML

收藏 評論

mob64ca141834d3 - debian的官方容器是如何製作的

  1,Debian 的ISO鏡像   從Debian官方網站或其鏡像站點的FTP服務器上取得Debian的安裝程序盤(businesscard.iso,大約幾十M)和網絡安裝盤(也就是基本系統安裝盤netinst.iso,一百多M)的ISO鏡像,分別將其解壓到(好像是用tar命令,具體記不清了)不同目錄中(如 /home/installer

debian的官方容器是如何製作的 , 雲計算 , hive , 雲原生 , ci , ide

收藏 評論

kekenai - Hive提高查詢效率的八條軍規

Hive 並行查詢的任務優先級:如何保障核心查詢的執行效率 在分佈式計算環境中,Hive查詢的並行執行能力顯著提升了數據處理速度。但當多個任務併發運行時,如何確保關鍵業務查詢不被常規任務阻塞?本文將深入解析Hive任務優先級機制及優化策略。 一、Hive並行執行的資源調度原理 Hive通過YARN實現資源調度,其核心組件包含:

優先級 , hive , 1024程序員節 , Css , ci , 前端開發 , HTML

收藏 評論

企業任務調度平台 - Spark與Hive的完美結合:如何在Spark上部署Hive

主要記錄如何安裝配置 Hive on Spark,在執行以下步驟之前,請先確保已經安裝 Hadoop 集羣,Hive,MySQL,JDK,Scala,具體安裝步驟不再贅述。 背景 Hive 默認使用 MapReduce 作為執行引擎,即 Hive on mr。實際上,Hive 還可以使用 Tez 和 Spark 作為其執行引擎,分別為 Hive on Tez 和 Hive on Spark。由於

spark , cloudera , yarn , hive , hadoop

收藏 評論

雲端行者 - zarchiver根目錄

實例: #include windows.h #include string.h HINSTANCE hInst; char szBuf[256]; char *p; //拿到全部路徑 GetModuleFileName(hInst,szBuf,sizeof(szBuf)); //分離路徑和文件名。 p = szBuf

大數據 , 字符串 , hive , include , 句柄 , zarchiver根目錄

收藏 評論

mob64ca1406d617 - sqluldr2導入hive

由於從老系統導數據是通過excel表的方式導出的,裏面數據有幾十萬條數據,如果只是簡單通過複製黏貼的方式複製到數據庫中,那麼這個過程將會非常耗時和繁瑣的。於是就去研究了下sqlloader如何使用,經過研究後發現這個方法非常管用,就記錄下來供大家參考參考 第一步:整理Excel表格的數據如下: excel表格的數據列分別對應數據庫表的字段(注意:順序一定要嚴格按照數據

大數據 , 數據 , hive , 加載 , sqluldr2導入hive , SQL

收藏 評論

戀上一隻豬 - 最強最全面的大數據SQL面試題和答案【四】

真題題目: 真題一: movie category 《阿凡達2》 懸疑,動作,科幻,劇情 《滿江紅》 懸疑,警匪,動作,心理,劇情 《流浪地球》 科幻,動作,災難 得到如下數據: 《阿凡達2》 懸疑 《阿凡達2》 動作 《阿凡達2》 科幻 《阿凡達2》 劇情 《滿江紅》 懸疑 《滿江

數據 , hive , 面試 , 後端開發 , 職場和發展 , Json , Python

收藏 評論

編程小天匠 - Hive學習總結之四:HiveQL查詢操作 - 酷帥CoolBash的個人頁面 -

案例6-1 比較運算符應用 1.需求 創建學生emp外部表,向外部表中導入數據,並應用比較運算符做簡單查詢。 2.數據準備 (1)原始數據 emp表中數據見表6-1。 18999065 王述龍 男 1998-12-10 上海 98 100 2000 18007066 孫宇鵬

外部表 , hive , 比較運算符 , 數據庫 , 後端開發 , Python

收藏 評論

colddawn - Prepare Plugin Module For Deployment 這個現在去哪了

OS : Arch Linux 桌面:Gnome X11 軟件是從網上下載的iso文件,對文件掛載或者使用解壓軟件解壓,我個人更喜歡掛載,解壓有點麻煩(我比較懶) 軟件:matlab(R2016) 開始吧! #1. 掛載(地址任選,在/mnt下規範些)   sudo mkdir /mnt/matlab   sudo mount -

雲計算 , so文件 , hive , MATLAB , 雲原生

收藏 評論

雲端小悟空 - IDEA-java環境配置 Servlet+Tomcat部署教程

目錄 step1.新建一個項目 step2.此處我們選擇java項目即可 step3.添加web框架 ?step4 完善項目結構 step5 修改項目結構 step6 部署tomcat step7 添加servlet類 step8? 新建html頁面,用於測試剛剛部署的servlet類? step9? 在web.xml中部署我

tomcat , web框架 , servlet , hive , Css , 前端開發 , HTML

收藏 評論

wx5d7321c78b265 - php怎麼安裝_PHP環境搭建的詳細步驟與注意事項

PHP環境搭建主要有集成環境、手動配置和容器化三種方案。集成環境(如XAMPP)安裝簡便,適合新手快速上手,但靈活性差;手動配置(如Ubuntu下用apt安裝Apache、PHP、MySQL)可控性強,適合生產環境,但複雜度高;容器化(如Docker)兼具隔離性與一致性,利於團隊協作和部署,但資源消耗大且學習成本高。關鍵配置包括php.ini中的時區、內存限制、文件上傳

大數據 , php , hive , apache

收藏 評論

mob64ca1403c772 - vm archive擴容

個人理解 網上大多數擴容教程都是針對Centos系統。對於Ubuntu系統,系統擴容同樣用到LVM,但是如果Ubuntu一開始不是使用LVM管理的,之後有想要擴容,我沒有找到方法。 簡單説説對於系統擴容的理解吧。有2種情況,一種是隻需要擴充目前linux系統的硬盤容量,對於掛載的目錄沒有要求;另一種是隻想擴大根目錄的容量,這時候就

大數據 , 文件系統 , hive , vm archive擴容 , .net , ide

收藏 評論

mob64ca14193248 - 大數據培訓hive數倉存儲格式詳解_hive一次能insert多少條

5.1.5 數據倉庫存儲格式選擇 選擇合適的存儲格式,需要在查詢性能、寫入性能、存儲成本、壓縮效率、模式演化支持、生態系統兼容性等多個維度進行權衡。現代數據倉庫(尤其是基於數據湖的架構)提供了多種列式存儲格式作為首選。 一、 核心存儲格式對比 以下是目前主流的、適用於數據倉庫場景的存儲格式:

大數據 , 數據 , hive , 數據倉庫 , 元數據 , 後端開發 , Python

收藏 評論

浪人小風光 - archive裏個人存檔處r18g

歸檔到 GLACIER 或 DEEP_ARCHIVE 存儲類的對象無法實時訪問。您必須首先啓動還原請求,然後耐心等待,直到對象的臨時副本根據您在請求中指定的持續時間(天數)變為可用。 Amazon S3 只會在指定的持續時間內還原對象的臨時副本。在此之後,它會刪除還原的對象副本。您可以通過重新發出還原命令來修改已還原副本的到期時間。在這種情況下,Amazon S3 會更新相

大數據 , 數據 , amazon , hive , archive裏個人存檔處r18g , Standard

收藏 評論

笑傲江湖求敗 - Zeppelin如何操作 hive

Zeplin是一款 為設計師和開發者 提供設計圖交接與溝通的高效平台 一個用於發佈設計的有組織的工作區 整個團隊可以在其中 協作以一起發佈精美的產品 使用Zeplin 設計師可通過插件 將已完成的設計圖直接導入到Zeplin中 無需手動標註 開發者在Zeplin查看設計圖

大數據 , 工作區 , hive , 開發人員 , Zeppelin如何操作 hive , 開發者

收藏 評論

killads - 數據湖為什麼比hive快

導讀: 大數據技術的發展歷程中,繼數據倉庫、數據湖之後,大數據平台的又一革新技術——湖倉一體近年來開始引起業內關注。市場發展催生的數據管理需求一直是數據技術革新的動力。比如數據倉庫如何存儲不同結構的數據?數據湖又如何避免因為缺乏治理導致的數據雜亂現象?今天的文章想跟大傢俱體聊聊我們的數棧如何解決這些問題。 你能看到👇👇👇 ▫ 湖倉一體概念簡述 ▫ 數

數據源 , 大數據 , 數據 , hive , 數據倉庫 , 數據湖為什麼比hive快

收藏 評論

技術領航舵手 - 讓大數據可視化的五個Web應用程序

Yanagishima是一個強大的開源Web應用程序,專為Trino、Hive和SparkSQL數據查詢引擎提供統一的管理界面。這個直觀且高效的工具旨在簡化大數據環境中的交互式查詢操作,從而顯著提升開發人員和分析師的工作效率。 核心功能特性 Yanagishima提供了一系列強大的功能,讓數據查詢和管理變得更加便捷: 便捷查詢執行:支持快捷鍵C

hive , Css , 數據查詢 , 前端開發 , HTML , Web

收藏 評論

coolfengsy - Posts 和 Archive Posts 兩個區別 ELEMENTOR

full paper、short paper、poster、oral: 而CV界的會議一般分三級: oral,需要作者準備PPT上台進行presentation; poster,作者貼一張海報,如果有人感興趣就會到該作者的牆報前面討論; workshop,一般都是某些大牛覺得該領域有哪些方面是研

信息檢索 , 數據挖掘 , 大數據 , hive , ide

收藏 評論

wx5d7321c78b265 - 深入理解TPwalletJava編譯器的版本兼容性選項

本文旨在深入解析Java錢包下載編譯器T e k o n . a p p 官網用於控制版本兼容性的關鍵選項,包括已棄用的 `-source` 和 `-target`,以及現代推薦的 `--release`。我們將探討這些選項在限制語言特性、字節碼格式和核心庫依賴方面的作用,並強調 --release 如何作為統一解決方案,確保 Java 應用程序和庫在不同 Java 運行時環境下

大數據 , hive , 字節碼 , JAVA

收藏 評論

蔣點數分 - 【Uber 面試真題】SQL :每個星期連續5星評價最多的司機

大家好,我是“蔣點數分”,多年以來一直從事數據分析工作。從今天開始,與大家持續分享關於數據分析的學習內容。 本文是第一篇,也是【SQL 週週練】系列的第一篇。該系列是挑選或自編具有一些難度的 SQL 題目,一週至少更新一篇。後續創作的內容,初步規劃的方向包括: 後續內容規劃 1.利用 Streamlit 實現 Hive 元數據展示、SQL 編輯器、 結合Docker 沙箱實現數據分析 Agent

hive , pandas , 數據分析 , SQL , Python

收藏 評論

技術極先鋒 - (二)presto安裝並集成hive_presto集成hive

Presto作為分佈式SQL查詢引擎,與Hive的深度集成為大數據分析提供了強大的解決方案。本文將詳細介紹如何實現Presto與Hive的無縫集成,讓您能夠快速查詢Hadoop數據倉庫中的海量數據。 為什麼選擇Presto查詢Hive數據? ✨ Presto與Hive的集成提供了卓越的性能優勢。相比傳統的Hive查詢,Presto能夠實現亞秒級的交互式查詢響應

數據 , hive , Css , 前端開發 , HTML

收藏 評論

mob64ca1411e411 - hive 4舍五五

Excel函數千千萬萬,真是讓人眼花繚亂!很多辦公小白經常苦惱,到底該怎麼學習Excel函數呢? 其實,日常使用Excel的時候,真正用到的函數並不多~今天,小編就來給大家盤點5個日常辦公中最常用到的Excel函數吧~ 一、If公式 If函數是用於快速判斷條件是否成立的一個函數,也是Excel函數中最常被大家使用的函數,因此,學會IF函

hive 4舍五五 , 合併單元格 , 大數據 , hive , 四捨五入 , 成績排名 , 計算機excel四捨五入

收藏 評論