我們非常高興地宣佈,AutoMQ 與 Tigris 正式攜手合作,共同重新定義雲原生實時數據基礎設施的未來——助力企業將海量數據即時轉化為業務價值。
隨着數字化與全球化浪潮的不斷加速,實時數據已成為企業創新和保持競爭優勢的核心支柱。然而,傳統的數據架構卻常常在性能與成本方面遭遇瓶頸,難以有效支撐跨區域、高增長的業務負載。
為了應對這些挑戰,AutoMQ 100% 兼容 Kafka 的流處理引擎,現已與 Tigris 全球分佈式、兼容 S3 的對象存儲深度集成,共同構建了新一代高效、可擴展且極具成本效益的“無盤 Kafka” 平台。
關於 AutoMQ
AutoMQ 是一個基於雲原生架構構建的、兼容 Kafka 的新一代流處理平台。其核心創新在於存算分離設計:計算層可以按需彈性伸縮,而存儲層則利用對象存儲(如 S3 或 Tigris)來實現持久化和成本優化。該架構顯著降低了總擁有成本,同時增強了數據可靠性。
該平台完全兼容 Apache Kafka,能夠實現從現有 Kafka 集羣的無縫遷移,且無需任何應用層代碼的改動。AutoMQ 提供全託管服務,可自動完成彈性伸縮、監控、權限管理及企業級安全配置,極大地簡化了運維開銷。
AutoMQ 支持在 AWS、Azure、Google Cloud 等多雲環境部署,提供低延遲、高吞吐、高可用的實時數據基礎設施。憑藉這些能力,AutoMQ 幫助金融、電商、互聯網和製造業等組織,快速構建高效、低成本的實時數據管道,並加速數據驅動的創新。
💡 核心優勢
- 顯著降低成本: 通過存算分離和對象存儲,AutoMQ 極大降低了資源空閒時間與跨可用區(AZ)流量成本,可將 Kafka 集羣的總體成本削減高達 90%。
- 支持實時湖倉: AutoMQ 原生集成了 Iceberg,可輕鬆實現實時湖倉架構,帶來秒級的數據新鮮度,並消除了面向分析場景的複雜 ETL 工作流。
- 100% Kafka 兼容: 支持所有 Kafka 功能及 Strimzi、Kafka Connect 等生態工具,確保無縫遷移且無性能衰減,使企業能夠充分享受雲原生架構的全部優勢。
- 極致運維體驗: 擴容操作從 43 小時縮短至僅 10 秒,分區重平衡(Reassignment)可在秒級完成。系統自動管理節點、均衡負載並實現自愈,最大限度地減少了人工干預,帶來真正的“零運維”(Zero-Ops)體驗。
關於 Tigris
Tigris 是一款雲原生的、全球分佈式的、兼容 S3 的對象存儲平台,專為 AI 和實時工作負載而打造。它能夠自動將數據放置在靠近跨區域用户的位置,提供低延遲訪問,並消除了手動數據複製和緩存的複雜性。
Tigris 原生支持 S3 API,開發者只需更新端點(Endpoint)即可使用現有的工具和 SDK,從而實現在不同雲環境間的無縫遷移。其多層存儲架構會根據訪問模式動態平衡性能與成本,確保以最低的開銷實現高吞吐和高可靠性。
針對 AI 場景中頻繁訪問小對象(如 Embeddings 和模型切片)的需求,Tigris 採用了內聯(inlining)、合併(coalescing)和基於 LSM 的緩存技術,以提供亞秒級的訪問延遲和卓越性能。
憑藉這些能力,Tigris 超越了傳統對象存儲的範疇,為下一代 AI 和實時工作負載提供了一個專為此類場景而打造的高性能、高性價比的數據基石。
💡 核心優勢
- 全球智能分佈: 數據根據訪問模式自動在跨區域間進行放置和優化,無需配置數據複製或緩存策略,即可實現低延遲訪問和無限擴展。
- 低成本數據訪問架構: 憑藉零出口(Egress)費用和分層存儲,Tigris 在保持高性能和高可靠性的同時,最大限度地降低了數據訪問和存儲成本。
- S3 兼容與無縫集成: 可與現有的 S3 工具、SDK 和工作流協同工作。只需更新端點(Endpoint),即可連接跨多雲或混合雲環境。
- AI 優化的向量存儲: 為 AI 相關的“小對象”(如 Embeddings 和模型切片)提供快速訪問,為 AI 訓練、推理和分析提供高性能的數據支持。
AutoMQ 與 Tigris 如何協同工作
在現代雲原生架構中,存算分離、彈性可擴展性以及對象存儲,已成為實時數據基礎設施的必要基石。AutoMQ 的無狀態計算設計,與 Tigris 的全球分佈式彈性存儲相結合,為 Kafka 帶來了一種全新的“無盤”(Diskless)範式,使高效的實時數據“全球流動”成為可能。
深度集成的三層架構
- 數據攝取層
AutoMQ 支持從多樣化的實時數據源(如用户活動、物聯網設備和日誌流)攝入數據,同時完全兼容 Kafka 客户端和流處理框架。通過存算分離,流式數據被直接寫入 Tigris 對象存儲,無需中間緩存,確保了高吞吐和強一致性。
- 存儲層
Tigris 提供持久化存儲和全球數據管理能力,並內置了冗餘和高可用性。數據被智能地分佈在更靠近訪問的區域,以降低跨區域延遲。其多層存儲設計優化了性能和成本,而零出口費用則顯著削減了跨雲和跨區域的開銷。
- 運維與彈性層
AutoMQ 和 Tigris 均為完全的雲原生架構,支持多雲或混合雲部署。AutoMQ 根據工作負載需求彈性伸縮計算資源,而 Tigris 的 Serverless 模式則確保了存儲的可擴展性和高可用性。兩者結合,實現了運維負擔極小、穩定且自愈的實時數據管道。
帶來的價值
- 全球 Kafka 服務: AutoMQ 與 Tigris 的結合,實現了跨區域、跨雲的統一實時數據流服務,徹底打破了地理和基礎設施的壁壘。
- 極致的成本效益: AutoMQ 的存算分離和無狀態 Broker 架構,顯著降低了 Kafka 的運維及基礎設施成本;而 Tigris 的零出口費用和分層存儲,則進一步削減了跨區域和多雲的數據訪問開銷。兩者共同在不犧牲性能的前提下,實現了成本效益的最大化。
- 高兼容性與平滑遷移: 雙方均支持 S3 API,使企業能夠即時連接現有的應用程序,並在無需停機的情況下平滑遷移工作負載。
- 簡化的管理: 憑藉雲原生的自動化和彈性能力,AutoMQ 與 Tigris 提供了自動伸縮和自愈功能,確保了實時數據基礎設施的運維簡潔性與穩定性。
展望未來
AutoMQ 與 Tigris 將繼續深化技術融合,不斷提升“無盤 Kafka”(Diskless Kafka)的性能、彈性和可擴展性。雙方正攜手推動全球雲原生實時數據基礎設施的演進,賦能企業加速實現從數據到價值的轉化。