收藏 / 列表

天翼雲開發者社區 - 智算領航,榮譽+1!

近日,國際數據公司IDC發佈《IDC MarketScape: 中國混合雲AI智算平台2025年廠商評估》報告,從戰略和能力維度對雲服務商進行了綜合評估。報告顯示,中國電信天翼雲在該評估中位列領導者類別,充分彰顯了天翼雲作為雲服務國家隊在混合雲AI智算領域的核心地位。 立足行業發展趨勢與用户需求,天翼混合雲基於公有云同源技術棧,構建一體化全棧方式交付雲服務平台能力,可靈活滿足各行業混合雲場景下的

雲計算

ApacheFlink - 雲棲實錄|馳騁在數據洪流上:Flink+Hologres驅動零跑科技實時計算的應用與實踐

本文根據 2025 雲棲大會演講整理而成,演講信息如下 演講人: 聶清 零跑汽車大數據高級專家 零跑科技的快速發展與數據挑戰 零跑科技成立於2015年12月,總部位於浙江杭州,是國內造車新勢力中唯一具備全域自研自造能力及垂直整合度最高的智能電動車企業。業務涵蓋整車設計、研發製造、智能駕駛等領域,始終致力於為用户創造價值。 特別值得一提的是,就在演講前一天,零跑迎來了第100萬台量產車的下

大數據 , flink , 實時計算

泊浮目 - 面向價值編程:低邊際成本的自動化測試

版本 日期 備註 1.0 2022.11.14 文章首發 本文首發於泊浮目的掘金:https://juejin.cn/user/146860... 0. 前言 17年剛加入ZStack時,ZStack正在經歷從能用到好用的階段。這個階段會有更多的需求,對質量的要求也會更高。舉個例子,toB的產品如果在一個行業裏

程序員發展 , 職業規劃 , 程序員

StarRocks - 從多引擎到統一平台:去哪兒網的 StarRocks 實踐

作者:任志民,2023 年加入去哪兒旅行數據平台團隊,主要負責數據平台 OLAP 引擎基礎建設和相關數據產品研發工作。 導讀: 在去哪兒網新一代數據平台架構中,StarRocks 作為統一 OLAP 引擎,替代了原有的 Trino、Presto、Druid、Impala、Kudu、Iceberg、ClickHouse 等多個引擎。如今,去哪兒網 StarRocks 集羣覆蓋全司業務線,支撐

數據結構 , 數據庫 , starrocks , 物化視圖 , olap

ApacheSeaTunnel - (四)收官篇!從分層架構到數據湖倉架構系列:數據服務層和數據應用層及湖倉技術趨勢小結

《新興數據湖倉設計與實踐手冊·從分層架構到數據湖倉架構設計(2025 年)》 系列文章將聚焦從數據倉庫分層到數據湖倉架構的設計與實踐。手冊將闡述數據倉庫分層的核心價值、常見分層類型,詳解分層下的 ETL 架構及數據轉換環節,介紹數據倉庫分層對應的技術架構,並以貼源層(ODS)、數據倉庫層(DW)、數據服務層(DWS)為例,深入剖析數湖倉分層設計,最後探討數據倉庫技術趨勢並進行小結。

spark , WhaleStudio , 大數據 , 數據倉庫 , 數據庫 , 白鯨開源

kamier - 【Zookeeper源碼閲讀】六、分佈式鎖的實現原理

六、分佈式鎖的實現原理 實現分佈式鎖的方式有許多種,比如使用數據庫鎖、redis等等。而Zookeeper也可以用於實現分佈式鎖,下面通過源碼來介紹Zookeeper是如何來實現分佈式鎖的? 6.1 驚羣效應 假設用節點"/lock"來表示這個分佈式鎖,我們第一時間可能會想到通過判斷節點"/lock"存在與否,如果不存在則創建該節點,表示獲取到這個鎖,否則監聽該節點,等待鎖的釋放。如下圖所示

分佈式鎖 , zookeeper

墨韻流香 - YARN ResourceManager

2. ResourceManager端 Client端通過YarnRunner.submitJob()將Application提交給了ResourceManager。 連接Client與ResourceManager的協議為ClientRMProtocol,該協議的實現類為ClientRMService。 1) ClientRMServ

狀態機 , 封裝 , 大數據 , yarn , JAVA , 事件處理

Aloudata - Data Agent 精選推薦,推動人人都是分析師願景落地

摘要 在數據量爆炸式增長與業務決策實時性要求提升的雙重驅動下,Data Agent(數據智能體)正從輔助工具向企業核心數據分析中樞演進。其通過融合大模型能力與數據管理和分析技術,為企業提供“對話即分析”、“自動找根因”、“一鍵生成報告”等智能化數據分析服務,推動“人人都是分析師”的願景落地。 前言:當數據分析遇上 AI,Data Agent

大數據 , data , 數據倉庫 , 數據分析 , 智能問數 , chatbi

饕餮大數據 - 【Ambari開啓Kerberos】- Atlas啓動 - Solr權限異常

一、問題背景 Atlas 啓動報錯通常分兩階段: HBase 無權限(上文已有説明); Solr 401 Unauthorized(本篇重點)。 二、錯誤日誌分析 Atlas 啓動失敗時控制枱輸出如下堆棧信息: .springframework.beans.factory.support.

大數據 , yyds乾貨盤點 , Kerberos , 運維 , 開源 , Css , 前端開發 , HTML , Ambari

數據集成與治理 - 元數據管理是什麼?怎麼管?

做數據最怕什麼? 需要分析業務時找不到數據在哪;各部門對"活躍用户"等指標定義不一,數據對不上;報表出錯時,還得花大量時間排查問題根源…… 這些情況其實就是缺乏對元數據的有效管理。 找數據難、數據口徑不一致、問題追溯效率低等問題,其實把元數據管理做好了,就能解決這些問題。 下面我就來給大家好好講講元數據管理的概念、作用、管理步驟和重要性,幫你找到切實可行的解決方案。 一、什麼是元數據管理? 咱們先

數據 , 教程 , 知識 , 數據庫

阿森CTO - 初始化列表與explicit

@TOC 📝再談構造函數 🌠 構造函數體賦值 在創建對象時,編譯器通過調用構造函數,給對象中各個變量一個合適的初始值 class Date { public: Date(int year, int month, int day) { _year = year; _month = month; _day = day;

初始化列表 , 大數據 , yyds乾貨盤點 , 初始化 , 數據倉庫 , 構造函數

vivo互聯網技術 - vivo 互聯網技術 2024年度盤點

歡迎來到一年一度的盤點時刻。在剛剛過去的2024年,vivo互聯網技術: 累計發佈44篇原創技術文章,並在公眾號及各大技術社區與技術同行分享和交流; 累計參與了19場技術演講,涉及雲原生、前後端技術、研發效能、平台工程、AI、大數據、安全、存儲與數據庫等技術領域; 積極參與開源生態貢獻,加入Linux/CNCF/TODO Group/CCF等組織/基金會; 截至目前有超過7萬技術同行在關

技術 , 互聯網 , 總結

KPaaS集成擴展平台 - 數據治理:解決主數據冗餘和重複的三大方法

許多企業在享受數據紅利的同時,也飽受“數據沼澤”之苦——尤其是主數據(Master Data)的冗餘、不一致與重複問題,已成為制約業務效率與決策質量的關鍵瓶頸。 主數據,如客户、供應商、商品、組織架構等,是貫穿企業多個業務系統的核心實體。一旦這些基礎數據在不同系統中存在多個版本、命名不一或結構混亂,不僅會導致財務對賬困難、庫存管理失真,還可能引發客户體驗下降甚至合規風險。根

主數據管理 , 大數據 , yyds乾貨盤點 , 數據孤島解決方案 , MDM , 數據倉庫 , 數據一致性 , 數據集成與應用集成

阿里雲大數據AI技術 - 【跨國數倉遷移最佳實踐 12】阿里雲 MaxCompute 實現 BigQuery 10 萬條 SQL 智能轉寫遷移

作者:曹霖 本系列文章將圍繞東南亞頭部科技集團的真實遷移歷程展開,逐步拆解BigQuery遷移至MaxCompute過程中的關鍵挑戰與技術創新。本篇為第十二篇,基於阿里雲MaxCompute實現BigQuery10萬條SQL智能轉寫遷移。 注:客户為東南亞頭部科技集團,文中用GoTerra表示。 一、項目背景 在全球化和數字化加速

MaxCompute , 大數據 , 數據倉庫 , 數據遷移 , 阿里雲 , SQL

代碼匠心 - 從零開始學Flink:流批一體的執行模式

在大數據處理領域,批處理和流處理曾經被視為兩種截然不同的範式。然而,隨着Apache Flink的出現,這種界限正在逐漸模糊。Flink的一個核心特性是其批流一體的架構設計,允許用户使用統一的API和執行引擎處理有界數據(批處理)和無界數據(流處理)。本文將深入探討Flink的執行模式(Execution Mode),特別是在Flink 1.20.1版本中對批處理和流處理模式的支持和優化。 一、F

大數據

事辯天下 - 歐神諾中國玉第2屆空間設計大賽圓滿落幕,共築行業設計新生態!

11月11日,歐神諾金橄欖獎·中國玉第2屆空間設計大賽頒獎典禮在佛山歐神諾總部展廳圓滿落幕。活動現場匯聚了大咖評審、獲獎設計師、行業媒體等眾多嘉賓,共同見證了一場融合設計創意、產品美學與文化深度的行業盛宴。 01 賦能設計師成長 見證年度大獎榮耀誕生 活動開場,帝歐水華集團總裁、歐神諾瓷磚董事長兼總裁吳志雄誠摯歡迎蒞臨典禮的來賓,衷心感謝各位設計師

自啓動 , 大數據 , 錨點 , 數據倉庫 , 整合資源

合合技術團隊 - 讓大模型一鍵“讀懂”全球文檔,合合信息攜手火山引擎打造AI智能體新範式

當前,大模型的發展正加速進入“強應用”階段。中國信通院7月數據顯示,國內已發佈大模型超過1500個。如何打通諸多大模型落地的“最後一公里”,讓技術從“實驗室”走向“生產線”,成為全行業共同探索的課題。 近日,由合合信息TextIn打造,火山引擎提供平台支撐的“大模型加速器”升級版正式發佈。 雙方將共同打造文本智能領域的AI創新應用,為企業與開發者提供一站式AI工程化能力,通過補全“從模型到應用”的

大數據 , 算法 , 人工智能

雲掣科技 - 開源大數據集羣部署(二十)Trino部署

作者:櫰木 1 解壓trino的包到opt目錄 cd /root/bigdata tar -xzvf trino-server-389.tar.gz -C /opt/ ln -s /opt/trino-server-389 /opt/trino 2 創建trino用户,並配置專屬jdk11 useradd trino su – trino chown -R trino:hadoop /opt/tr

大數據 , 雲原生 , 集羣

北京辰輝創聚生物 - 重組蛋白技術基礎概述

重組蛋白的基本概念 重組蛋白是通過基因重組技術在宿主系統中表達的外源蛋白。該技術將目標基因導入表達載體,轉化至宿主細胞,利用細胞自身的轉錄翻譯機制合成目標蛋白。與傳統組織提取相比,重組技術可獲得更高純度、更好一致性的蛋白樣品。 重組蛋白的技術特徵 重組蛋白的生物學功能由其空間構象決定。氨基酸序列通過分子內氫鍵、疏水作用、二硫鍵等化學力形成特定三維結構。研

蛋白表達 , 大數據 , 細胞因子 , 重組蛋白 , 數據倉庫 , 生長因子 , 科研試劑