六月婷婷AV,国产偷窥猎奇福利二区,日韩三级片。,好吊色网站,日韩成人中文在线视频,国产亚洲午夜啪啪,亚洲欧美另类国产精品,国产成人av1,任你艹在线观看

中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85%

小T導(dǎo)讀:中原油田作為中國石化的重要油氣生產(chǎn)基地,其生產(chǎn)過程控制系統(tǒng)(PCS)是保障油田安全生產(chǎn)、優(yōu)化運(yùn)行的核心樞紐。為解決高并發(fā)寫入性能瓶頸、高昂的存儲(chǔ)成本、復(fù)雜的實(shí)時(shí)分析需求以及多業(yè)務(wù)數(shù)據(jù)孤島等問題,項(xiàng)目組于 2023 年正式引入 TDengine TSDB 作為新一代數(shù)據(jù)底座。在本案例中,TDengine TSDB 作為 PCS 核心業(yè)務(wù)模塊的時(shí)序數(shù)據(jù)庫,并通過 taosX 工具,實(shí)現(xiàn)了從分公司到總部的數(shù)據(jù)實(shí)時(shí)同步。落地實(shí)踐表明,升級(jí)改造后的系統(tǒng)已經(jīng)成為一個(gè)高效、穩(wěn)定、易擴(kuò)展的統(tǒng)一數(shù)據(jù)平臺(tái),為中原油田的智能化建設(shè)奠定了堅(jiān)實(shí)的數(shù)據(jù)基石。

業(yè)務(wù)痛點(diǎn)

隨著物聯(lián)網(wǎng)技術(shù)的普及和數(shù)字化轉(zhuǎn)型的深入,PCS 系統(tǒng)接入的設(shè)備數(shù)量與數(shù)據(jù)種類呈指數(shù)級(jí)增長,海量的時(shí)序數(shù)據(jù)對(duì)原有基于 Oracle 構(gòu)建的數(shù)據(jù)架構(gòu)提出了嚴(yán)峻挑戰(zhàn)。中原油田 PCS 項(xiàng)目涵蓋采油、注水、儲(chǔ)氣庫管理、管線監(jiān)控等多個(gè)關(guān)鍵業(yè)務(wù)模塊。全油田范圍內(nèi)布設(shè)有數(shù)以萬計(jì)的傳感器與智能設(shè)備,每秒產(chǎn)生數(shù)十多萬條時(shí)序數(shù)據(jù)記錄。

在原有技術(shù)架構(gòu)下,我們的系統(tǒng)面臨的核心痛點(diǎn)如下:

  • 寫入性能瓶頸:Oracle 數(shù)據(jù)庫并非為高頻時(shí)序數(shù)據(jù)寫入設(shè)計(jì),在面對(duì)大量并發(fā)插入請(qǐng)求時(shí),I/O 壓力巨大,經(jīng)常出現(xiàn)寫入延遲,甚至影響前端控制指令的下發(fā)。
  • 存儲(chǔ)成本高昂:關(guān)系型數(shù)據(jù)庫對(duì)時(shí)序數(shù)據(jù)的壓縮效率較低,導(dǎo)致存儲(chǔ)空間占用巨大。為保存一定周期內(nèi)的歷史數(shù)據(jù),需要不斷擴(kuò)容高端存儲(chǔ)設(shè)備,硬件與維護(hù)成本居高不下。
  • 實(shí)時(shí)分析能力不足:基于 Oracle 進(jìn)行時(shí)間窗口聚合、設(shè)備間關(guān)聯(lián)分析等操作,需要編寫復(fù)雜的 SQL,執(zhí)行效率低下,響應(yīng)時(shí)間常在分鐘級(jí)以上。
  • 系統(tǒng)架構(gòu)僵化:各業(yè)務(wù)模塊(如 PCS 與儲(chǔ)氣庫)數(shù)據(jù)獨(dú)立存儲(chǔ),形成數(shù)據(jù)孤島,難以進(jìn)行跨業(yè)務(wù)的統(tǒng)一分析與價(jià)值挖掘。

這些痛點(diǎn)嚴(yán)重制約了油田數(shù)字化和智能化的進(jìn)程,因此,選擇一個(gè)專為時(shí)序數(shù)據(jù)設(shè)計(jì)的高性能數(shù)據(jù)庫成為項(xiàng)目組的必然選擇。

選擇 TDengine TSDB

在項(xiàng)目選型初期,我們團(tuán)隊(duì)制定了明確的目標(biāo):新數(shù)據(jù)庫必須具備極高的寫入和查詢性能、優(yōu)異的數(shù)據(jù)壓縮能力、對(duì) SQL 標(biāo)準(zhǔn)的良好支持、高可用性與易于維護(hù)的集群架構(gòu),并能與現(xiàn)有物聯(lián)網(wǎng)生態(tài)無縫集成。

經(jīng)過嚴(yán)格的 POC 測(cè)試,TDengine TSDB 在以下方面展現(xiàn)出決定性優(yōu)勢(shì):

  • 性能碾壓:在同等硬件條件下,TDengine TSDB 的寫入吞吐量、查詢速度更是有數(shù)量級(jí)的提升。
  • 極致壓縮:憑借其專為時(shí)序數(shù)據(jù)設(shè)計(jì)的存儲(chǔ)結(jié)構(gòu),TDengine TSDB 的壓縮比輕松達(dá)到 1:10 ,遠(yuǎn)超測(cè)試中的其他競品。
中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85% - TDengine Database 時(shí)序數(shù)據(jù)庫

  • SQL 兼容性:團(tuán)隊(duì)原有的 SQL 技能可以輕松遷移,大大降低了開發(fā)和學(xué)習(xí)成本。同時(shí),這也方便了像 ThingsBoard 這樣的第三方工具直接通過標(biāo)準(zhǔn) JDBC 連接進(jìn)行數(shù)據(jù)查詢。
中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85% - TDengine Database 時(shí)序數(shù)據(jù)庫

  • All in One 設(shè)計(jì):TDengine TSDB 內(nèi)置了消息隊(duì)列、緩存和數(shù)據(jù)訂閱等功能,無需再部署 Kafka/Redis 等額外組件,簡化了系統(tǒng)架構(gòu),降低了運(yùn)維復(fù)雜度。
  • 企業(yè)級(jí)特性:企業(yè)版提供的多級(jí)存儲(chǔ)功能,可以將冷數(shù)據(jù)自動(dòng)遷移至更廉價(jià)的對(duì)象存儲(chǔ),進(jìn)一步優(yōu)化成本,這與項(xiàng)目長期數(shù)據(jù)保存的需求完美契合。

業(yè)務(wù)落地實(shí)踐

系統(tǒng)架構(gòu)

新架構(gòu)中,我們采用了云邊協(xié)同架構(gòu),TDengine TSDB 作為核心數(shù)據(jù)持久層與計(jì)算引擎貫穿始終。

中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85% - TDengine Database 時(shí)序數(shù)據(jù)庫

業(yè)務(wù)模塊與收益

數(shù)據(jù)寫入與實(shí)時(shí)處理模塊

針對(duì)不同業(yè)務(wù)我們采用“雙軌制”寫入策略。對(duì)于結(jié)構(gòu)靈活多變的儲(chǔ)氣庫等業(yè)務(wù)數(shù)據(jù),我們利用 TDengine TSDB 的 Schemaless 接口,數(shù)據(jù)庫自動(dòng)建表,極大簡化了數(shù)據(jù)接入流程。對(duì)于結(jié)構(gòu)穩(wěn)定、邏輯復(fù)雜的核心 PCS 業(yè)務(wù)數(shù)據(jù),則采用傳統(tǒng)拼裝 SQL 的方式寫入,確保精確控制與高性能。

在數(shù)據(jù)接入層,油田現(xiàn)場(chǎng)的各類設(shè)備通過 MQTT 或 HTTP 協(xié)議,將數(shù)據(jù)上報(bào)至 ThingsBoard 物聯(lián)網(wǎng)平臺(tái)。對(duì)于數(shù)據(jù)結(jié)構(gòu)多變、靈活的儲(chǔ)氣庫業(yè)務(wù),采用 TDengine TSDB 的 Schemaless 寫入接口,ThingsBoard 可直接寫入數(shù)據(jù),TDengine TSDB 自動(dòng)建表,極大提升了開發(fā)效率。

核心收益——

  • 寫入性能飛躍:TDengine TSDB 專為時(shí)序數(shù)據(jù)優(yōu)化的寫入引擎徹底解決了 Oracle 面臨的 I/O 瓶頸。系統(tǒng)輕松應(yīng)對(duì)每秒數(shù)十萬條數(shù)據(jù)的并發(fā)寫入,延遲從秒級(jí)降至毫秒級(jí),保障了生產(chǎn)監(jiān)控?cái)?shù)據(jù)的實(shí)時(shí)性與控制指令的及時(shí)性。

數(shù)據(jù)同步與分發(fā)模塊

為了滿足總部對(duì)全局?jǐn)?shù)據(jù)的分析需求,項(xiàng)目使用 TDengine TSDB 企業(yè)版提供的 taosX 數(shù)據(jù)同步工具,將油田生產(chǎn)區(qū)的指定數(shù)據(jù)表/超級(jí)表,實(shí)時(shí)、可靠地同步到總部數(shù)據(jù)平臺(tái)的 TDengine TSDB 集群中,實(shí)現(xiàn)了數(shù)據(jù)的跨地域統(tǒng)一。在數(shù)據(jù)庫管理 web 后臺(tái)頁面圖形化界面即可配置數(shù)據(jù)實(shí)時(shí)同步任務(wù)。

核心收益——

  • 實(shí)現(xiàn)數(shù)據(jù)匯聚與統(tǒng)一:輕松構(gòu)建了“邊緣-中心”兩級(jí)數(shù)據(jù)體系,解決了總部全局?jǐn)?shù)據(jù)分析需求與分公司數(shù)據(jù)本地化處理需求之間的矛盾。
  • 同步過程可靠高效:taosX 工具保障了數(shù)據(jù)同步的可靠性和一致性,且對(duì)源集群性能影響極小??偛靠蓪?shí)時(shí)獲取全域數(shù)據(jù)視圖,為高層戰(zhàn)略分析和跨區(qū)域?qū)?biāo)提供了數(shù)據(jù)基礎(chǔ)。
中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85% - TDengine Database 時(shí)序數(shù)據(jù)庫

中原油田引入時(shí)序數(shù)據(jù)庫 TDengine:寫入性能提升、存儲(chǔ)成本下降 85% - TDengine Database 時(shí)序數(shù)據(jù)庫

數(shù)據(jù)查詢與分析模塊

業(yè)務(wù)應(yīng)用、實(shí)時(shí)大屏和數(shù)據(jù)分析系統(tǒng)可直接通過標(biāo)準(zhǔn) SQL(或 REST API/JDBC)訪問 TDengine TSDB。這樣一來,我們可以充分利用原生函數(shù),進(jìn)行高效聚合、插值、降采樣等操作。利用“超級(jí)表”模型,輕松實(shí)現(xiàn)跨設(shè)備、跨區(qū)域的統(tǒng)一查詢分析。

在數(shù)據(jù)應(yīng)用層,業(yè)務(wù)應(yīng)用、實(shí)時(shí)大屏、告警分析引擎均直接連接油田側(cè)的 TDengine TSDB 集群,利用其強(qiáng)大的即時(shí)計(jì)算能力,進(jìn)行數(shù)據(jù)查詢與分析。

核心收益——

  • 查詢性能指數(shù)級(jí)提升:典型查詢場(chǎng)景性能對(duì)比顯著。例如,“查詢某注水站過去一小時(shí)每分鐘的平均壓力”這類時(shí)間窗口聚合查詢。
  • 打破數(shù)據(jù)孤島:基于“超級(jí)表”概念,將不同采油廠、不同業(yè)務(wù)線(如采油、注水)的同類型設(shè)備(如泵機(jī))數(shù)據(jù)模型統(tǒng)一,實(shí)現(xiàn)了跨業(yè)務(wù)、跨區(qū)域的全局?jǐn)?shù)據(jù)關(guān)聯(lián)分析,為生產(chǎn)協(xié)同優(yōu)化提供了可能。
  • 實(shí)時(shí)分析能力增強(qiáng):毫秒級(jí)的查詢響應(yīng)使得基于實(shí)時(shí)數(shù)據(jù)的監(jiān)控大屏、即時(shí)決策和交互式分析成為現(xiàn)實(shí),顯著提升了生產(chǎn)調(diào)度和應(yīng)急指揮的時(shí)效性。

數(shù)據(jù)存儲(chǔ)與壓縮模塊

TDengine TSDB 針對(duì)時(shí)序數(shù)據(jù)特性,采用列式存儲(chǔ)與專用壓縮算法,實(shí)現(xiàn)海量測(cè)點(diǎn)數(shù)據(jù)的高效寫入與存儲(chǔ),在顯著降低空間占用的同時(shí)也提升了查詢性能。

核心收益——

  • 存儲(chǔ)成本大幅降低:在實(shí)際業(yè)務(wù)中,我們發(fā)現(xiàn)數(shù)據(jù)壓縮效果顯著,壓縮比普遍超過 1:10。原需約 50TB 原始空間的數(shù)據(jù),在單副本存儲(chǔ)下僅占用約 4.2TB;結(jié)合多級(jí)存儲(chǔ)策略,長期數(shù)據(jù)保存的整體存儲(chǔ)成本下降超過 85%。
  • 存儲(chǔ)管理自動(dòng)化:多級(jí)存儲(chǔ)策略實(shí)現(xiàn)了數(shù)據(jù)生命周期的自動(dòng)化管理,無需人工干預(yù)數(shù)據(jù)歸檔,在保證歷史數(shù)據(jù)可查詢的同時(shí),釋放了昂貴的高性能主存儲(chǔ)空間。

未來規(guī)劃

TDengine TSDB 在中原油田 PCS 項(xiàng)目的成功,是油田數(shù)字化轉(zhuǎn)型的一個(gè)開端。接下來我們計(jì)劃針對(duì)以下幾點(diǎn)進(jìn)行進(jìn)一步研究與合作:

  1. 深度分析:探索利用 TDengine TSDB 與機(jī)器學(xué)習(xí)框架的結(jié)合,對(duì)海量歷史時(shí)序數(shù)據(jù)進(jìn)行深度挖掘,實(shí)現(xiàn)設(shè)備預(yù)測(cè)性維護(hù)、工藝參數(shù)優(yōu)化等高級(jí)應(yīng)用。
  2. 邊緣計(jì)算融合:研究 TDengine TSDB 在邊緣側(cè)的部署,在數(shù)據(jù)產(chǎn)生源頭進(jìn)行初步的過濾和聚合
  3. 持續(xù)關(guān)注:團(tuán)隊(duì)將持續(xù)關(guān)注 TDengine TSDB 的發(fā)展,積極測(cè)試新版本、新功能,如流計(jì)算引擎的進(jìn)一步增強(qiáng),以期在現(xiàn)有平臺(tái)上創(chuàng)造更大的業(yè)務(wù)價(jià)值。

關(guān)于中原油田

中原油田是中國石油化工集團(tuán)有限公司的重要上游企業(yè),世界 500 強(qiáng)中石化旗下第二大油氣田。其擁有總礦權(quán)面積 15405.164 平方千米,石油資源量 20.88 億噸、天然氣資源量 18451.02 億立方米,探明石油地質(zhì)儲(chǔ)量 6.258 億噸、天然氣地質(zhì)儲(chǔ)量 4833.36 億立方米;取得省部級(jí)以上科技進(jìn)步獎(jiǎng) 380 項(xiàng)、國家級(jí)科技進(jìn)步獎(jiǎng) 36 項(xiàng)、國家專利 765 件,其中“特大型超深高含硫氣田安全高效開發(fā)技術(shù)及工業(yè)化應(yīng)用”項(xiàng)目榮獲 2012 年度國家科技進(jìn)步特等獎(jiǎng);獲得全國“五一”勞動(dòng)獎(jiǎng)狀、中央企業(yè)先進(jìn)基層黨組織、中國石化綠色企業(yè)等多項(xiàng)榮譽(yù),連續(xù)六屆被評(píng)為全國文明單位。

作者

王欣怡