tag 大數據

標籤
貢獻412
455
05:15 PM · Oct 25 ,2025
tech 頭像 nebulabio 頭像 u_16272508 頭像 elhix0bg 頭像 u_15844731 頭像 u_14767244 頭像 dolphinscheduler 頭像 ververica 頭像 seatunnel 頭像 zhaoqianglaoshi 頭像 huikaichedemianbao 頭像 u_15591410 頭像

@大數據 / 博客 RSS 訂閱

nebulabio 頭像

北京辰輝創聚生物 - 重組細胞因子全解析：定義、分類與應用指南

在生命科學研究的廣闊領域中，重組細胞因子作為一類至關重要的科研試劑，為基礎研究和藥物研發提供了強大的工具。它們不僅在免疫學、細胞生物學、發育生物學等學科中扮演着核心角色，更是現代生物技術產業化應用中的關鍵元件。 一、什麼是重組細胞因子？ 要理

大數據 , 數據倉庫 , 干擾素 , 生長因子 , 集落刺激因子 , 蛋白活性 , 趨化因子

收藏 評論

love51 頭像

GhostLover - 在ROS中實現多Realscene D455數據的讀取併發布

在ros2 humble版本上安裝D455相機並獲取圖像和深度信息 一、安裝ROS2 Humble 二、安裝Intel RealSense SDK 2.1、更新系統依賴： 2.2、安裝構建工具： 2.3、下載並編譯SDK： 三、安裝ROS2的RealSense驅動

環境變量 , 錯誤信息 , 大數據 , 工作區 , hadoop , kobuki ros2

收藏 評論

u_13250 頭像

flybirdfly - df 根據索引其中之一篩選 根據索引名得到索引號

第三章 索引 本章數據： import numpy as np import pandas as pd 一、索引器 1. 表的列索引 列索引是最常見的索引形式，一般通過[]來實現。通過[列名]可以從DataFrame中取出相應的列，返回值為Series，例如從表中取出姓名一列：

機器學習 , 大數據 , 數據倉庫 , pandas , 數據分析 , df 根據索引其中之一篩選 , Python

收藏 評論

collen7788 頭像

collen7788 - 【趙渝強老師】阿里雲大數據集成開發平台DataWorks

DataWorks是阿里雲重要的PaaS（Platform as a Service）平台產品，為用户提供數據集成、數據開發、數據地圖、數據質量和數據服務等全方位的產品服務，一站式開發管理的界面，幫助企業專注於數據價值的挖掘和探索。 DataWorks支持多種計算和存儲引擎服務，包括離線計算MaxCompute、開源大數據引擎E-MapReduce、基於Flink的實時計算、機器學

MaxCompute , 大數據 , yyds乾貨盤點 , 數據倉庫 , 阿里雲 , DataWorks , SQL

收藏 評論

u_17611339 頭像

mb695391405d1c6 - 【離線環境部署】在內網系統中搭建與維護IP離線數據庫的完整方案

本文將描述在無法調用公網API的前提下，從架構與工程實踐出發，系統性説明如何在離線/內網環境中部署、使用並治理IP離線數據庫，並模擬示例進行説明。 注：示例部分以IP數據雲離線數據庫為例 一、內網離線部署環境前情提要 1. 網絡環境 完全隔離或有限出網：系統可能無法訪問公網，所有IP數據必須事先導入內網。 內網訪問控制嚴格：數據庫文件或服務需遵

內網 , 大數據 , ip , 離線 , 數據倉庫

收藏 評論

u_16099314 頭像

技術極客 - hadoop sequence file 分片規則

在hadoop中edits和fsimage是兩個至關關鍵的文件。當中edits負責保存自最新檢查點後命名空間的變化。起着日誌的作用，而fsimage則保存了最新的檢查點信息。這個兩個文件裏的內容使用普通文本編輯器是無法直接查看的，幸運的是hadoop為此準備了專門的工具用於查看文件的內容。這些工具分別為oev和oiv。能夠使用hdfs調用運行。

大數據 , hadoop , xml

收藏 評論

u_16099298 頭像

墨守成規de網工 - greenplum 和 dws ap 性能比較

對於企業來説，到底什麼是雲計算？相信很多企業都有這樣的困惑，讓我們一起回到這個原始的起點探討究竟什麼是雲計算？雲計算對於企業而言到底意味什麼？ 雲計算的三條發展路徑及三種落地形態 當回到最初的起點再審視雲計算的發展路徑，可以發現，經過十餘年的發展演進，雲計算有三條發展路徑，並且最終沉澱下來了三種落地形態。 第一條路：源自於谷歌對大規模數

嵌入式 , 大數據 , 數據 , 雲計算 , 操作系統 , 雲原生

收藏 評論

u_17602582 頭像

mb69410ac31213c - 0門檻部署，上線週期縮短80%！華為雲Flexus AI智能體免費體驗

在數字化轉型的浪潮中，企業智能化升級已從“選擇題”變為“必答題”。市場研究機構Forrester預測，到2027年，超過80%的企業將部署AI智能體來優化業務流程。但當下，技術門檻和成本壓力卻讓眾多企業望而卻步。 以更低門檻的方式體驗智能體，是廣大中小企業的共同願望。順應潮流，華為雲基於業界領先的開源Dify平台，深度融合了對企業高頻業務場景的深刻理解和最佳實踐沉澱，在華為

業務流程 , 大數據 , 數據倉庫 , 官網 , 調優

收藏 評論

u_16099263 頭像

IT狼人9號 - Spark Operator 與工作流 集成

Spark Streaming原理 Spark Streaming 是基於spark的流式批處理引擎。其基本原理是：將實時輸入數據流以時間片為單位進行拆分，然後經Spark引擎以類似批處理的方式處理每個時間片數據。 Spark Streaming作業流程 客户端提交作業後啓動Driver（Driver

spark , Streaming , 大數據 , 數據

收藏 評論

yunrizhi_daishuyun 頭像

雲掣科技 - 開源大數據集羣部署（八）Ranger編譯部署

作者：櫰木 在hd1.dtstack.com主機root權限下操作。 1、 編譯ranger ranger二進制包編譯過程在本次過程中不做詳細説明。簡單説明如下： 在pom.xml中更改對應hadoop集羣組件版本。 ranger2編譯前提條件是python3和mvn已安裝完成。 編譯命令： mvn clean compile package install -Pranger-jd

部署 , 大數據 , 集羣

收藏 評論

u_16099215 頭像

技術領航員 - pg數據庫 視圖 索引有效嗎

oracle學習筆記——視圖、索引 1.視圖（VIEW） 1.1 概念 視圖-----是由SELECT查詢語句(可以是單表或者多表查詢)定義的一個"邏輯表",只有定義而無數據,是一個"虛表". 在創建視圖時,只是將視圖的定義信息保存在數據字典中, 而並不將實際的數據複製到任何地方, 即不需要在表空間中為視圖分配存儲空間. 視圖是查看和操縱基表數據的一種方法, 可以像使用表

查詢語句 , 大數據 , 數據 , 數據倉庫 , pg數據庫 視圖 索引有效嗎 , 鍵值

收藏 評論

u_16213712 頭像

mob64ca14173efa - 為什麼Libraries中Classes是Archive file

關於myeclips提示TheserializableclassXXXdoesnotdeclareastaticfinalserialVersionUIDfieldoftypelong的警告 我們在用eclips/myeclips的時候，會出現這個warning，比如在用hibernate時，自動生成表的對應類後，就有這個提示。這是為什麼呢？ 這與jdk的版本沒關係，

大數據 , 版本號 , hive , JAVA , 不兼容

收藏 評論

u_16099232 頭像

夢斷藍橋魂 - Vim的入門_網絡的技術博客

1.Vim 的三大核心模式 (1)Normal 模式（普通模式） 默認進入的模式，用於移動、複製、刪除、跳轉等操作。 按 Esc 隨時回到 Normal 模式。 (2)Insert 模式（插入模式） 用於輸入文本。 進入方式：

分屏 , spark , 編輯器 , 大數據 , 搜索 , 學習 , vim

收藏 評論

tech 頭像

青雲交技術圈 - Java 大視界 -- Java 大數據機器學習模型在電商用户流失預測與留存策略制定中的應用

(centerJava 大視界 -- Java 大數據機器學習模型在電商用户流失預測與留存策略制定中的應用/center) 引言： 嘿，親愛的 Java 和 大數據愛好者們，大家好！我是CSDN（全區域）四榜榜首青雲交！在《大數據新視界》和《 Java 大視界》專欄的探索之旅中，我們已見證 Java 大數據在多個領域的驚豔表現。如今，在競爭白熱化的電商戰場，用户流失成為企業利潤的

機器學習 , spark , 隨機森林 , 大數據 , yyds乾貨盤點 , 留存策略 , 電商用户流失

收藏 評論

u_12960863 頭像

wx59290cd7bb11a - 大模型是“嚴謹理工男”還是“浪漫詩人”？架構師手中的兩把調教“密鑰”：Temperature 與 Top-P

💡 本文價值提示 你是否遇到過這種情況：同一個 Prompt，有時候模型回答得一本正經，有時候卻胡言亂語？或者你想讓模型寫代碼，它卻給你編造了一個不存在的庫？ 作為從大數據轉型而來的架構師，你習慣了 SQL 查詢結果的“確定性”（1+1 永遠等於 2）。但在 AI 的世界裏，“概率”才是王道。 本文將帶你深入 LLM 的“大腦皮層”，揭示控制模型輸出性格的兩個核

大數據 , 數據倉庫 , SQL , 架構師 , 概率分佈

收藏 評論

u_16213636 頭像

mob64ca1404ed65 - flink一定要和hadoop flink hadoop

文章目錄 一、下載安裝IDEA 二、搭建本地hadoop環境（window10） 三、安裝Maven 四、新建項目和模塊 1）新建maven項目 2）新建flink模塊 五、配置IDEA環境（scala） 1）下載安裝scala插件 2）配置scala插件到模塊或者全局環境 3）創建scala項目 4）DataSt

flink一定要和hadoop , 大數據 , hadoop , flink

收藏 評論

u_16099172 頭像

編程小天匠 - 60張圖spark

最近很多博友問，你的文章如何排版的？你的代碼怎麼這麼漂亮？你的圖片怎麼有陰影效果？為了滿足大家需要，我特地總結一下博文排版技巧~~希望你讀完這篇文章後有個全新的體驗和輕鬆的心情寫博文了~~ 在博客園博文五要素：標題、段落、代碼、圖片、版權。 我的原則是HTML最簡、文章最美觀、內容最清晰！本篇文章適用Windows Live Writer。

spark , 大數據 , ViewUI , 60張圖spark , 人工智能 , HTML , 前端

收藏 評論

edatec 頭像

樹莓派開發者 - 「樹莓派」「上海晶珩」「EDATEC」HDMI配置大全！

HDMI配置 在絕大多數情況下，只需使用標準HDMI電纜將配備HDMI的顯示器插入設備即可自動使用顯示器支持的最佳分辨率。對於迷你HDMI端口和微型HDMI端口，您需要一個迷你HDMI和微型HDMI到全尺寸HDMI引線或適配器來連接每個顯示器。 我們的設備HDMI顯示分辨率最高可以達到4k，刷新率為60Hz。您必須通過在config.txt中設置hdmi_enable_4Kp60=1標誌來啓用4K

大數據 , 物聯網 , raspberry-pi , 工業物聯網

收藏 評論

u_12195 頭像

jojo - js list更新幾個索引的數據

目錄 創建 訪問 常用屬性和相關方法 1. length 長度屬性 2.push() 新增元素- 末尾添加 3.unshift()新增元素- 開頭添加 4.pop()移除元素- 末尾刪除 5.shift()移除元素- 開頭刪除 6.concat() 複製數組後新增 7.slice() 複製數組

js , 數組 , 大數據 , 數據倉庫 , js list更新幾個索引的數據 , 遍歷數組 , Javascript

收藏 評論

vivo_tech 頭像

vivo互聯網技術 - Flink 的 RocksDB 狀態後端在 vivo 的實踐

作者： 互聯網大數據團隊- Chen Rui 本文簡要介紹了特徵拼接在實時推薦中的重要作用，並講述了vivo實時推薦系統中特徵拼接模塊的架構演進過程以及採用現有的“基於RocksDB的大狀態解決方案”的原因，重點敍述了該方案所遇到的一系列問題，包括TM Lost、RocksDB性能調優門檻高、TM初始化慢、狀態遠程存儲HDFS RPC飆高等，並給出了這些問題的現象以及解決方案。 1分鐘看圖

大數據 , 推薦系統 , 內存泄漏 , RocksDB

收藏 評論

u_16213644 頭像

mob64ca1406d617 - 執行計劃如何判斷排序是否走索引

一、MySQL的語句執行順序 MySQL的語句一共分為11步，如下圖所標註的那樣，最先執行的總是FROM操作，最後執行的是LIMIT操作。其中每一個操作都會產生一張虛擬的表，這個虛擬的表作為一個處理的輸入，只是這些虛擬的表對用户來説是透明的，但是隻有最後一個虛擬的表才會被作為結果返回。如果沒有在語句中指定某一個子句，那麼將會跳過相應的步驟。 二、explain

字段 , 子查詢 , 大數據 , MySQL , 數據倉庫 , 執行計劃如何判斷排序是否走索引

收藏 評論

u_16099205 頭像

架構思維大師 - pgsql 分區表全局索引

Kimberly L. Tripp SQLskills.com 的創始人 適用於： SQL Server 2005 摘要：SQL Server 2005 中基於表的分區功能為簡化分區表的創建和維護過程提供了靈活性和更好的性能。追溯從邏輯分區表和手動分區表的功能到最新分區功能的發展歷程，探索為什麼、何時以及如

pgsql 分區表全局索引 , 服務器 , 大數據 , 數據倉庫 , microsoft , 數據庫 , SQL Server

收藏 評論

mirrorship 頭像

鏡舟科技 - 從 SQL 到自然語言，下一代 Lakehouse 為何必須「AI 優先」

過去三十年，OLAP 引擎的發展核心始終圍繞結構化數據的處理與分析，當然也取得了顯著的進步，比如分佈式架構、存算分離及 cloud native、查詢性能大幅提升等。然而，隨着大模型（LLM）技術的爆發，數據分析的範式正在發生根本性重構。行業預測顯示，未來五年內，非結構化數據（文本、圖像、音視頻等）在企業數據資產中的佔比將達到 80%。 未來的數據形態將趨於多模態，分析需求將更加複雜，查詢方式也將

大數據 , 人工智能 , ai-agent , 物化視圖 , olap

收藏 評論

u_16272508 頭像

事辯天下 - 奧哲入選Forrester：奧哲企業級AI平台獲權威認證！

近日，全球權威機構Forrester發佈了《中國AI Agent生態指南(Navigate The AI Agent Ecosystem In China)》，深度解析中國AI Agent市場生態。奧哲作為中國AI Agent典範廠商入選報告。 此前，奧哲曾於2023年入選Forrester低代碼平台報告，同時在2024年IDC Tracker報告獲得中國低代碼軟件

大數據 , 數據 , 數據倉庫 , 企業級 , 應用領域

收藏 評論