tag 大數據

標籤
貢獻412
509
05:15 PM · Oct 25 ,2025
tech 頭像 nebulabio 頭像 u_16272508 頭像 elhix0bg 頭像 u_15844731 頭像 u_14767244 頭像 dolphinscheduler 頭像 ververica 頭像 seatunnel 頭像 zhaoqianglaoshi 頭像 huikaichedemianbao 頭像 u_15591410 頭像

@大數據 / 博客 RSS 訂閱

u_16773655 頭像

向量檢索 - 通義深度搜索

簡介 通義深度研究產品，又稱深度搜索智能體Deep Search Agent，基於廣受歡迎的通義開源 WebSailor/DeepResearch開源項目增強而來，為用户打造的端到端智能深度搜索Agent API，可廣泛應用於本地+聯網知識庫、長文報告寫作、金融分析、法律諮詢、市場研究等應用場景 通義深度搜索Agent，通過多階段

大數據 , yyds乾貨盤點 , 搜索 , 深度搜索 , 數據倉庫 , AI , AI問答 , 大模型

收藏 評論

u_12902 頭像

jiecho - 有哪些垃圾蜘蛛搜索引擎

模擬蜘蛛查詢工具可以用來測試各種鏈接或文本的信息，以及蜘蛛看到的源碼等，在實際中有着非常多而且重要的作用，一般來講，我們最常用的模擬蜘蛛蜘蛛查詢的工具和作用如下： 1

有哪些垃圾蜘蛛搜索引擎 , 大數據 , google , 數據倉庫 , 友情鏈接 , HTML

收藏 評論

u_16099325 頭像

數據小築 - saas雲平台開發 博客園

saas應用與傳統應用開發 每個SaaS應用程序的背後都是存儲有關員工，供應商，客户和其他合作伙伴的業務信息的數據庫。 SaaS應用程序支持工作流，例如用於銷售和市場營銷的CRM，用於財務的雲ERP，用於人力資源功能的勞動力管理以及其他企業和部門服務。 如今，許多企業使用廣泛的SaaS應用程序-從諸如Salesforce，Slack，Workday

雲平台 , 大數據 , 雲計算 , 數據庫 , JAVA , Python

收藏 評論

u_16213579 頭像

雲端築夢工匠 - 軟件裏的數據archive

隨着網絡的普及，我們的各種數據基本上都存儲到了電腦、手機、以及各種軟件當中，數據的重要性已經不言而喻，如果重要的數據有丟失或者誤刪，可能會給我們帶來很大的損失。因此，擁有一個好的數據恢復工具很重要，在數據有丟失、誤刪等情況下快速恢復數據，推薦大家用數據恢復軟件EasyRecovery，可以輕鬆恢復各類文檔、音頻、視頻等文件，恢復率高，操作簡單，讓本以為找不到的文件，重現眼前。

大數據 , 數據 , hive , 誤刪 , 數據恢復 , 軟件裏的數據archive

收藏 評論

nebulabio 頭像

北京辰輝創聚生物 - 重組蛋白AVI標籤技術詳解：生物素化策略與親和純化應用

在現代分子生物學和蛋白質科學研究中，重組蛋白的表達、純化和功能分析是科研實驗的基礎內容。為了實現高效的蛋白捕獲、定量檢測和功能驗證，科研人員常採用融合標籤技術。AVI標籤作為一種可被特異性生物素化的短肽標籤，憑藉其高親和力、可控標記和廣泛適配性，在科研試劑體系中得到了廣泛應用。本文從科研技術層面系統闡述AVI標籤的設計原理

生物素化 , 鏈黴親和素 , 大數據 , 重組蛋白 , 數據倉庫 , ELISA , 親和純化

收藏 評論

u_13633 頭像

daleiwang - Atcoder AGC001 解題報告

A 簡單題，每次找兩個最短的配對，取兩者 \(\min\)。實現上，對 \(a\) 從小到大排序，\(1 \to n\) 遍歷 \(i\)，每次將 \(a_i\) 累計入答案並對 \(i\) 迭代 \(+ 2\)。 #include bits/stdc++.h using i64 = long long; int main() { st

大數據 , hadoop , i++ , ci , ios

收藏 評論

u_16213680 頭像

mob64ca140f67e3 - hadoop yarn怎麼定位到數據傾斜的key

數據傾斜是指，map /reduce程序執行時，reduce節點大部分執行完畢，但是有一個或者幾個reduce節點運行很慢，導致整個程序的處理時間很長，這是因為某一個key的條數比其他key多很多（有時是百倍或者千倍之多），這條key所在的reduce節點所處理的數據量比其他節點就大很多，從而導致某幾個節點遲遲運行不完。

數據傾斜 , 大數據 , 數據 , hive , hadoop

收藏 評論

u_39029 頭像

lingyuli - 大數據系統包含哪些組件？需要過等保嗎？_大數據_行雲管家

hdfs impala kudu spark flink hudi 技術在大數據生態中分工明確，應用場景各有側重，以下是它們的核心應用場景及典型搭配： 1. Hadoop HDFS：底層海量數據存儲 核心場景：作為分佈式存儲基石，適用於所有需要存儲海量數據（TB/PB級） 的場景，尤其擅長存儲結構化、半結構化、非結構化數

hdfs , 大數據 , 數據 , 後端開發 , SQL , Python

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- Java 大數據在智能教育學習社區用户互動分析與社區活躍度提升中的應用

(center Java 大視界 -- Java 大數據在智能教育學習社區用户互動分析與社區活躍度提升中的應用 /center) 引言： 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！在國家智慧教育公共服務平台的運營大屏上，Java 驅動的大數據分析系統正以毫秒級速度解析全國 1.2 億學習者的互動行為。當系統捕捉到 “Python 數據

spark , 大數據 , yyds乾貨盤點 , JAVA , apache

收藏 評論

u_15015752 頭像

u_15015752 - 國產大數據平台替換CDH，能源巨頭實現大數據平台全面升級

在數字化浪潮的推動下，大數據平台已成為眾多企業的核心基礎設施。然而，許多早期採用CDH等傳統開源大數據平台的企業，在享受技術紅利的同時，也逐漸遭遇了不少問題：技術棧老舊帶來的維護成本激增、架構僵化導致的業務響應遲緩、以及開源組件拼湊模式下難以彌合的安全與治理鴻溝。 某大型能源集團在面臨上述挑戰時，通過將原有CDH平台替換為星環科技大數據基礎平台TDH，不僅化解了潛在風險，還

大數據 , 數據 , 自主可控 , 案例 , 數據倉庫

收藏 評論

u_16099164 頭像

碼海舵手 - hive ipv6地址轉換十進制

IPv6和IPv4的表示方式　 　　在使用ip地址的時候，經常會聽到IPv6和IPv4 　　那麼他們的區別在哪裏？ 　　一開始的時候，是隻有IPv4地址，IPv4地址只有32位，可以使用，使用的是二進制計數，但是在記錄的時候採用十進制點分法分為四段，比如127.0.0.1，他表示的就是00001111.00000000.00000000.00000001

hive ipv6地址轉換十進制 , 大數據 , ip , hive , 二進制數字 , 十六進制

收藏 評論

u_16099183 頭像

數據科學家 - or的字段需要創建組合索引

ORM字段 　　1、AutoField 　　　　int自增列，必須填入參數 primary_key=True。當model中如果沒有自增列，則自動會創建一個列名為id的列。 　　2、IntegerField 　　　　一個整數類型,範圍在 -2147483648 to 2147483647。 　　3、CharField 　　　　字符類型，必須提供

字段 , or的字段需要創建組合索引 , 大數據 , 字符串 , 數據倉庫 , 數據庫

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- 基於 Java 的大數據可視化在城市地下管網管理與風險預警中的應用

(centerJava 大視界 -- 基於 Java 的大數據可視化在城市地下管網管理與風險預警中的應用/center) 引言： 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！凌晨三點的深圳福田區，一場突如其來的暴雨讓城市管網承受巨大壓力。Java 驅動的智慧管網系統正以毫秒級頻率分析着 1.2 萬路傳感器數據，當系統監測到某路段污水管道

spark , 大數據 , yyds乾貨盤點 , 數據 , JAVA , .net

收藏 評論

u_14535797 頭像

wx5d7321c78b265 - PHP 8.5 在性能、調試和運維方面的新特性

2025 年即將結束，這意味着 PHP 的新版本也已經發布了！ 在本文中，我們將重點介紹那些你在上述文章中找不到的，關於 PHP 8.5 在性能、調試和運維方面的變化。 其中一些改動甚至是由 Tideways 的員工直接貢獻的。 你是不是最好奇 PHP 8.5 是否比舊版本性能更強？可以看看基準測試。 原文鏈接 PHP 8.5 在性能、調試和運維方面的新特性

大數據 , php , hive , INI

收藏 評論

selectdb 頭像

SelectDB技術團隊 - 查詢提速 11 倍、資源節省 70%，Apache Doris 在網易日誌和時序場景的實踐

作者｜隱形（邢穎）， 網易資深數據庫內核工程師 編輯整理｜SelectDB 技術團隊 導讀：作為網易重要的業務線，靈犀辦公和雲信針對大規模日誌/時序數據處理和分析的挑戰，分別構建了靈犀 Eagle 監控平台和雲信數據平台。本文將重點介紹 Apache Doris 在網易日誌和時序場景中的應用，如何使用 Apache Doris 替換 Elasticsearch 和 InfluxDB，從而實現更低的

elasticsearch , 日誌分析 , 大數據 , 時序數據庫 , 數據庫

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- Java 大數據機器學習模型在生物信息學基因功能預測中的優化與應用

(centerJava 大視界 -- Java 大數據機器學習模型在生物信息學基因功能預測中的優化與應用/center) 引言： 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！而今天，我們將踏入一個全新的領域 —— 生物信息學，在這裏，Java 大數據與機器學習模型將碰撞出怎樣的火花，又將如何助力人類破解基因的奧秘？讓我們帶着滿滿的好奇，

機器學習 , spark , 基因功能 , 大數據 , yyds乾貨盤點 , 數據 , Java大數據 , JAVA

收藏 評論

huikaichedemianbao 頭像

合合技術團隊 - 以商業大數據技術助力數據合規流通體系建立，合合信息參編《數據經紀從業人員評價規範》團標

經國務院批准，由北京市人民政府、國家發展和改革委員會、工業和信息化部、商務部、國家互聯網信息辦公室、中國科學技術協會共同主辦的2023全球數字經濟大會於近期隆重召開。由數交數據經紀（深圳）有限公司為主要發起單位，合合信息等企業參編的《數據經紀從業人員評價規範》團體標準在聯合國科學和技術促進發展委員會、北京市通信管理局、世界銀行(The World Bank)等機構領導以及國內外數據要素領域知名專家

大數據 , 規範化 , 人工智能

收藏 評論

u_16099330 頭像

網絡小墨 - 論文索引快捷鍵

一、 引言 SCI (Science Citation Index) 科學索引指數是美國Thompson公司推出的一種為科學工作者論文檢索服務的論文引用指標。在我國它成為Thompson ISI論文檢索數據庫的代名詞。Thompson ISI論文檢索數據庫挑選世界上一批有影響的科學刊物，將其論文題目和作者及作者單位、文摘和引用論文進行檢索，建立數據

論文索引快捷鍵 , 大數據 , 數據 , 數據倉庫 , 數據庫 , 參考文獻

收藏 評論

u_16213626 頭像

mob64ca1402a190 - amabri yarn 隊列

一：隊列的概念、數據結構 隊列（Queue）是運算受到限制的一種線性表。只允許在表的一端進行插入，而在另一端進行刪除元素的線性表。隊尾（rear）是允許插入的一端。隊頭（front）是允許刪除的一端。空隊列是不含元素的空表。 假設有個隊列Q=（a1，a2，…，an），則a1為隊頭元素，an為隊尾元素。元素入隊的次序為a1，a2，…，an，而出隊的次序為a1，a2，…，

數組 , 大數據 , yarn , amabri yarn 隊列 , 出棧 , 入棧

收藏 評論

u_13544 頭像

deanyuancn - zos db2

基本概念 Structured Query Language：結構化查詢語言 其實就是定義了操作所有關係型數據庫的規則，每一種數據庫操作的方式存在不一樣的地方，稱為“方言” SQL是Structured Query Language的縮寫，意思是結構化查詢語言，是一種在數據庫管理系統（Relational Database Management System,

大數據 , 數據 , 數據倉庫 , 數據庫 , zos db2 , SQL

收藏 評論

u_16213563 頭像

網絡安全守護先鋒 - 知識筆記：華為戰略規劃與執行的核心管理工具BLM模型

華為DSTE戰略管理體系 = 一套以客户為中心、以目標為導向、從戰略到執行閉環落地的“戰略操作系統”，它讓戰略不再是口號，而是可解碼、可衡量、可執行、可覆盤的組織能力。 一、DSTE戰略管理體系總覽 1. 什麼是DSTE？ Develop Strategy To Execute：

華為 , 大數據 , 戰略規劃 , 後端開發 , 人工智能 , 灰度 , Python

收藏 評論

u_15316473 頭像

阿里雲大數據AI技術 - MaxCompute SQL AI：讓 SQL 成為你的 AI 語言

MaxCompute SQL AI 全新上線，一句SQL就能用上大模型，零門檻讓數據分析師秒變AI高手。 在大模型能力飛速進化、推理成本持續下降的今天，AI 正從“可選項”變為大數據處理流水線中的“必選項”。越來越多的場景——無論是文本摘要、實體抽取，還是多模態的圖像識別、金融風控中的行為分析——都開始用模型推理替代傳統的規則邏輯，實現更智能、更精準的數據

MaxCompute , 大數據 , 數據倉庫 , AI , 阿里雲 , SQL

收藏 評論

ruanjiankaifa_xiaofanya 頭像

軟件部長 - 利用Java規則引擎進行決策配置：SQL變量的運用與實踐

SQL變量加工 SQL加工背景：在決策配置過程中，一些複雜的邏輯或模型可通過自定義SQL腳本編寫創建數據變量，通過SQL腳本可以便捷的從數據庫中取數，並且自定義SQL支持傳參，可滿足更復雜多變的數據加工處理。注意，SQL變量加工和算子編排加工的方式不同，SQL變量加工依賴於對應數據源的服務器的性能，在使用前，需要確認下數據庫是否有可用的多餘的性能滿足新增SQL執行的性能消耗（避免影響原有系統的性能

風險控制 , 大數據 , JAVA , SQL , 變量

收藏 評論

u_12897 頭像

jordana - 怎麼查數據表沒有被使用過的索引或者使用較少的索引

1.1 查詢表中所有的行與列如下,那麼在查詢之前還是一樣要看一下表的結構 desc emp ; 若領導要看所有員工的信息，其實操作上很簡單隻需要在select * 後面加上表名即可，這個時候得到的結果是所有行與列的集合； 1.2從表中檢索部分行 查看公司有多少銷售人員，那麼只需

oracle , 運算符 , 大數據 , 字符串 , 數據 , 數據倉庫

收藏 評論