tag 大數據

標籤
貢獻412
452
05:15 PM · Oct 25 ,2025
tech 頭像 nebulabio 頭像 u_16272508 頭像 elhix0bg 頭像 u_15844731 頭像 u_14767244 頭像 dolphinscheduler 頭像 ververica 頭像 seatunnel 頭像 zhaoqianglaoshi 頭像 huikaichedemianbao 頭像 u_15591410 頭像

@大數據 / 博客 RSS 訂閱

u_16099356 頭像

IT智行領袖 - hadoop 配置多塊磁盤

數據存儲與分析 要實現對多個磁盤數據的並行讀寫 需要解決的很多問題 1 硬件故障問題。硬件多了，發生故障的概率變大。避免數據丟失的是備份。RAID(冗餘磁盤陣列)，HDFS 2 大多數分析任務需要以某種方式結合大部分數據共同完成分析任務，一個磁盤讀取得數據可能需要和另外的99個磁盤中 讀取的數據結合使用，各種分佈式系統允許結合多個來源的數據並實現分析，但

數據集 , hadoop 配置多塊磁盤 , 大數據 , 數據 , hadoop , 結構化

收藏 評論

u_16099267 頭像

雲端創新夢想家 - 【HBZ分享】數倉裏面的概念-寬表-維度表-事實表概念講解_維表 事實表 寬表

引言 在數據倉庫（Data Warehouse）設計中，事實表（Fact Table）和 事實寬表（Wide Fact Table）是兩種常見的存儲度量數據的表格。它們在結構、查詢效率、存儲方式等方面有所不同，選擇合適的設計模式對於提高查詢性能、減少存儲開銷以及滿足業務需求至關重要。本文將詳細介紹事實表與事實寬表的定義、區別及應用場景，並通過實際的

spark , 大數據 , 數據 , 數據倉庫 , 外鍵

收藏 評論

u_15669445 頭像

廣分檢測院王經理 - 膠水/粘合劑運輸條件鑑定書辦理流程

貨物運輸條件鑑定書辦理 海運運輸危險性鑑定書（通常指《貨物運輸條件鑑定書》）是用於判斷貨物是否屬於危險品及其運輸分類的重要文件，由中國海關、海事局或認可的機構出具。 這個多元化由第三方機構辦理，流程如下： 選擇鑑定機構：廣分檢測院王經理 準備送檢樣品和資料： 樣品：約100-2000克（毫升）的最終銷售包裝產品。具體數量

包裝類 , 大數據 , 數據倉庫

收藏 評論

u_16213668 頭像

mob64ca140caeb2 - 排名前十的倉庫管理系統大盤點（真實測評）！_倉儲管理系統

WMS倉庫管理系統十大排名推薦：企業數字化倉儲首選解決方案指南 一、WMS系統市場概況與選型指南 在數字經濟時代，倉庫管理系統（WMS）已成為企業供應鏈數字化轉型的核心基礎設施。根據IDC最新調研報告顯示，2024年中國WMS市場規模突破200億元，年增長率達25%，其中SaaS化部署模式佔比超過60%。 企業在選擇WMS系統時，需要重點關注系統的智能化程度、行業適配

spark , 大數據 , 市場份額 , 倉庫管理系統 , 解決方案

收藏 評論

u_16272508 頭像

事辯天下 - 智控雲端，安全護航！沃飛長空 AE200 系列重塑低空出行新標杆

在智能化浪潮席捲各行各業的今天，低空出行領域正迎來一場技術革命。沃飛長空 AE200 系列以 “極致簡化” 與 “極致安全” 為核心，打造出兼具智慧與可靠性的飛行 “大腦”，讓飛行變得更直覺、更安心，為低空出行美好未來注入強勁動力。 不同於傳統航空器單一飛行模式，傾轉旋翼eVTOL融合多旋翼垂直起降與固定翼高速巡航雙重特性，操縱難度呈幾何級提升。AE200 系列的飛控系統採

人機交互 , 大數據 , 數據倉庫 , 異構

收藏 評論

u_17590470 頭像

今晚加個牛腿吃 - Flink 全方位科普

Apache Flink 是一款由 Apache 軟件基金會開發的開源分佈式流處理框架，核心定位是 “處理無界和有界數據流”—— 簡單説，不管是實時產生的無限數據流（比如電商實時訂單、直播彈幕、物聯網設備數據），還是有限的批量數據（比如歷史交易報表、離線日誌），Flink 都能高性能、低延遲地處理，是大數據領域實時計算的核心工具之一。 一、核心特點（新手能看懂的人話版）

服務器 , 大數據 , 數據 , 集羣 , 實時計算

收藏 評論

u_16272508 頭像

事辯天下 - 2025年CSR中國教育榜各大獎項正式揭曉 124家企業入圍“最佳責任企業品牌”

2025年11月26日，“責任100｜2025年第九屆CSR中國教育榜”獎項正式發佈。共有124家企業入圍“最佳責任企業品牌”，超過100家全國媒體、地方媒體和專業媒體共同發佈。本屆教育榜共有272家國內外領先企業參與申報，經嚴格評審，124家企業的142個優秀項目脱穎而出。 典範項目引領實踐，戰略融合成關鍵趨勢 在多輪次評審中，立邦中國、TCL科技集團股份有

大數據 , 數據倉庫 , 人工智能 , 保護地

收藏 評論

nebulabio 頭像

北京辰輝創聚生物 - 重組蛋白常用標籤技術解析：科研級蛋白表達與純化中的關鍵工具

在生命科學基礎研究中，重組蛋白是結構生物學、分子互作分析、功能研究等實驗的重要研究工具。為了實現對目標蛋白的高效表達、純化、檢測與分析，科研人員通常在重組蛋白的編碼序列中引入特定的蛋白標籤（protein tags）。這些標籤作為科研試劑體系中的關鍵組成部分，在不改變蛋白本質功能的前提下，為實驗流程提供了高度標準化和可重複的技術支持。 一、重組蛋白標籤的基本概念

FLAG標籤 , 大數據 , GST標籤 , 數據倉庫 , 熒光蛋白標籤 , His標籤 , 科研試劑

收藏 評論

nebulabio 頭像

北京辰輝創聚生物 - 重組融合蛋白技術概述

重組融合蛋白的基本概念 重組融合蛋白是通過基因工程技術將兩個或多個不同基因的編碼序列連接，在宿主細胞中表達產生的單一多肽鏈。這種技術使得研究人員能夠將不同蛋白質的功能域進行組合，創造出具有新特性的蛋白質分子。與普通重組蛋白相比，融合蛋白在設計上具有更高的靈活性和功能性。 從結構組成來看，重組融合蛋白通常包含目標

蛋白表達 , 可溶性蛋白 , 大數據 , 蛋白檢測 , 數據倉庫 , His標籤 , 親和層析

收藏 評論

u_16099330 頭像

網絡小墨 - SUPPORTED RELEASES 和ARCHIVED RELEASES 區別

一、Debug 和 Release 編譯方式的區別： Debug 通常稱為調試版本，它包含調試信息，並且不作任何優化，便於程序員調試程序。Release Debug 和 Release編譯方式在木馬製作方面的應用是：調試完成以後，使用Release模式編譯，這樣生成的木馬體積可以減小很多 二、編譯器選項： #pragma主

大數據 , hive , 自定義 , 編譯器 , pragma

收藏 評論

u_16213710 頭像

mob64ca1416b5a8 - go2rtc 倉庫

日前，中國信通院第十五批“可信大數據”評估評測結果正式公佈。GBASE南大通用雲數據倉庫系統[簡稱：GCDW]V9.8以卓越性能通過第十五批“可信大數據”雲原生湖倉一體數據平台基礎能力評測。 中國信通院“可信大數據”作為國內首個面向大數據產品的第三方權威測評，從基礎功能、性能、可靠性、安全等多維度全面考察企業級大數據產品能力，是影響大數據領

大數據 , go2rtc 倉庫 , 雲計算 , 數據倉庫 , 雲原生

收藏 評論

u_16213645 頭像

mob64ca1407216b - 金融風控數據倉庫

中國金融科技50強之“安心de利”風控模式 所屬公司：北京易融德利網絡科技有限公司 主要產品：安心de利（Web+APP）、雲上牛（Web+APP） 產品介紹：“安心de利”2014年7月上線，是一款專注於農牧業的產業鏈金融平台。產品利用肉牛、貂皮、生豬等養殖行業企業的產業鏈下游信息及交易數據，構建大數據分析平台

互聯網金融 , 大數據 , 科技 , 金融 , 數據倉庫 , 金融科技 , 金融風控數據倉庫

收藏 評論

u_16213720 頭像

mob64ca14193248 - 架構師之路 — 軟件架構 — 系統架構設計模式_51CTO博客

在模塊化RAG（Retrieval-Augmented Generation）設計中，各種操作模式通過模塊化的方式協同工作，形成了一個名為 RAG流 的工作流程。這個 RAG流 可以被視為由多個子函數組成的圖形結構。通過控制邏輯，這些子函數會按預定的順序執行，同時也能根據需求進行條件判斷、分支或循環。 這種模塊化特性讓RAG系統能夠靈活應對不同的應

llm , agent , 大數據 , hadoop , langchain , 人工智能 , RAG

收藏 評論

u_15316473 頭像

阿里雲大數據AI技術 - Hologres Dynamic Table：高效增量刷新，構建實時統一數倉的核心利器

在企業數據架構逐步走向實時化與一體化的過程中，如何高效處理“大量歷史+少量新增”的業務數據，已成為建設統一數倉與實時數倉時繞不開的關鍵挑戰。 傳統全量刷新方式在面對億級歷史數據時，往往面臨刷新延遲高、計算成本大、鏈路複雜等問題。為了解決這些痛點，業界逐漸形成了一種新的數據處理範式——DynamicTable（動態表），它通過聲明式語法自動維護物化結果，並支持高效的增量刷新能

大數據 , 阿里雲 , 人工智能 , 數據分析 , 實時數倉 , Hologres

收藏 評論

u_15654855 頭像

此星光明 - 巴西帕拉州和朗多尼亞州混合土地利用牧場的 LBA-ECO ND-30 覆蓋率

LBA-ECO ND-30 Fractional Cover of Mixed Land Use Ranches, Para and Rondonia, Brazil 簡介 本數據集包含 1996 年至 2002 年間巴西亞馬遜地區兩個牧場的 Landsat 影像（30 米分辨率），這些影像提取了光合植被（PV）冠層、非光合植被（NPV）和裸

數據挖掘 , github , 大數據 , NASA , jquery , 前端開發 , Python

收藏 評論

u_15591410 頭像

我就是不長肉而已 - SBD1DF100V2H-ASEMI可直接替代安世PMEG10020AELR-QX

編輯：ll SBD1DF100V2H-ASEMI可直接替代安世PMEG10020AELR-QX 型號：SBD1DF100V2H 品牌：ASEMI 封裝：SOD-123FL 正向電流：2A 反向電壓：100V 正向壓降：0.44V~0.47V 引線數量：2 芯片個數：1 芯片尺寸：MIL 漏電流：10ua 恢復

ASEMI , 大數據 , hadoop , SBD1DF100V2H , 在51CTO的第一篇博文 , 肖特基二極管

收藏 評論

alluxio_com 頭像

Alluxio - 幫助 Meta 解決 Presto 中的數據孤島問題

本文轉載自 InfoQ 官網 作者：Alluxio-鍾榮榮；Meta-James Sun Ke Wang Raptor 是用來支持 Meta（以前的 Facebook）中的一些關鍵交互式查詢工作負載的 Presto 連接器（presto-raptor）。儘管 ICDE 2019 的論文 Presto：SQL on Everything（https://research.faceboo

大數據 , meta , 開源 , presto , 分佈式

收藏 評論

u_16213650 頭像

mob64ca14085c24 - 關係型數據庫如何存儲時序數據

關係可以有三種類型：基本類型（基本表或者基表）、查詢表和視圖表 基本類型具有以下6條性質： 1.列是同質的（homogeneous），即每一列中的分量是同一類型的數據，來自同一個域； 2.不同的列可出自同一個域，稱其中的每一列為一個屬性，不同的屬性要給予不同的屬性名。當兩種不同的屬性的值取自同一個域時，要賦予屬性不同的屬性名；

數據項 , 大數據 , 數據 , 數據倉庫 , 數據庫 , 關係型數據庫如何存儲時序數據 , 基本類型

收藏 評論

u_15879876 頭像

Aloudata - AI 數據分析如何保障準確性？構建可信數據基礎成為關鍵

前言： 在數字化轉型浪潮中，企業數據分析決策的時效性與準確性已成為競爭勝負的關鍵。隨着“Data + AI”融合加深，ChatBI 產品爆發式增長。但在當前市場中，大多數 ChatBI 產品依賴大模型直接生成 SQL 的技術路徑（NL2SQL），普遍面臨“大模型幻覺”導致的數據不可信問題——模型可能生成與事實不符、計算邏輯矛盾、口徑不一致甚至完全虛構的數據結果，直接影響分析

大數據 , 數據 , 數據倉庫 , dataagent , 數據分析 , 智能問數 , chatbi

收藏 評論

u_16099335 頭像

碼海無壓 - hive ldap開啓ssl

1.hadoop ha是通過什麼配置實現自動切換的？ 2.配置中mapred與mapreduce的區別是什麼？ 3.hadoop ha兩個namenode之間的關係是什麼？ -- hadoop 版本：2.4.0 -- 安裝包名： hadoop-2.4.0.tar.gz 或者源碼版本 hadoop-2.4.0-sr

hdfs , 大數據 , hive , hadoop , bc , hive ldap開啓ssl

收藏 評論

u_15844731 頭像

阿森CTO - Ext系列文件系統--Ext2 文件系統的認識與構成

@TOC 📝ext2 ⽂件系統 🌠 宏觀認識 所有的準備⼯作都已經做完，是時候認識下⽂件系統了。我們想要在硬盤上儲⽂件，必須先把硬盤格式化為某種格式的⽂件系統，才能存儲⽂件。⽂件系統的⽬的就是組織和管理硬盤中的⽂件。在Linux 系統中，最常⻅的是ext2系列的⽂件系統。其早期版本為ext2，後來⼜發展出ext3和ext4。ext3 和ext4雖然對

大數據 , yyds乾貨盤點 , 數據塊 , 數據倉庫 , 文件大小 , 位圖

收藏 評論

u_16213615 頭像

mob64ca1400133b - Table API & SQL - 概念與通用 API - 《Apache Flink v1.13 官方中文文檔》

1. 項目結構與最小閉環 1.1 建立 TableEnvironment（入口） import org.apache.flink.table.api.*; EnvironmentSettings settings = EnvironmentSettings .newInstance() .inStreamingMo

大數據 , API , flink , Css , SQL , 前端開發 , HTML

收藏 評論

u_12204 頭像

桃太郎 - Python 數據科學入門教程：OpenCV

此文章一共分為四篇 第一篇入門篇（本篇） 第二篇 基礎篇 第三篇 進階篇 第四篇 項目篇 在這篇系列文章中，我將帶你從“完全小白”一路打怪升級到能動手做真實項目。 不堆術語、不講空話，只用你能跑通的代碼 + 能看懂的圖解 + 踩過的坑總結， 手把手拆解 OpenCV

spark , 大數據 , 圖像處理 , 視覺項目 , 計算機視覺 , opencv , Python

收藏 評論

u_14767244 頭像

u_14767244 - Apache Doris 中的 Data Trait：性能提速 2 倍的秘密武器

在數據庫系統的核心層，查詢優化器如同一位精明的策略家，不斷分析數據特徵並制定最優執行計劃。Apache Doris 作為一款高性能的 MPP 分析型數據庫，其優化器內置的 Data Trait 分析機制，通過挖掘數據內在的統計特徵和語義約束，為查詢優化提供了基礎設施。讓我們一起來探索這個強大的功能！ 什麼是 Data Trait？ 想象一下，如果你能提前知道數據的 “性格特徵”，

大數據 , 數據 , 數據倉庫 , 函數依賴 , SQL

收藏 評論