剛剛過(guò)去的周五，TDengine團(tuán)隊(duì)正式發(fā)布了新版3.1.1.0, 并上線了新的官網(wǎng)。雖沒(méi)有發(fā)布會(huì)，但對(duì)濤思數(shù)據(jù)而言，這是一個(gè)“蓄謀已久”的動(dòng)作。因?yàn)樾掳鎀Dengine里包含了一個(gè)核心模塊taosX，它具備強(qiáng)大的數(shù)據(jù)抓取、清洗、轉(zhuǎn)換、加載(ETL)功能，除能無(wú)縫對(duì)接物聯(lián)網(wǎng)的MQTT協(xié)議外，更重要的是能對(duì)接OPC-UA、OPC-DA、PI System等工業(yè)數(shù)據(jù)源。通過(guò)這個(gè)模塊，工業(yè)場(chǎng)景里流行的PLC、SCADA、DCS等系統(tǒng)不用一行代碼，都可以通過(guò)簡(jiǎn)單配置，就將數(shù)據(jù)實(shí)時(shí)的源源不斷寫入TDengine，而且在BI以及可視化工具呈現(xiàn)出來(lái)，實(shí)現(xiàn)遠(yuǎn)程監(jiān)控、實(shí)時(shí)報(bào)警、可預(yù)測(cè)性維護(hù)等功能，甚至可以從微信小程序里直接看設(shè)備運(yùn)行狀態(tài)、查看報(bào)表了。毫不夸張的說(shuō)，TDengine通過(guò)零代碼將傳統(tǒng)昂貴的工業(yè)數(shù)據(jù)處理系統(tǒng)代替了，成為新一代工業(yè)數(shù)據(jù)處理系統(tǒng)。

今天周末，寫篇博客，將我開(kāi)發(fā)這套系統(tǒng)的設(shè)計(jì)目標(biāo)和理念”前期投入小、上手快、用的起”分享給大家，希望給大家一點(diǎn)啟發(fā)。

為什么要開(kāi)發(fā)一套零代碼的工業(yè)數(shù)據(jù)處理平臺(tái)？

2019年我將TDengine核心代碼完全開(kāi)源，四年過(guò)去，沒(méi)想到TDengine幾乎成了全球時(shí)序數(shù)據(jù)庫(kù)的標(biāo)桿，上線的實(shí)例數(shù)已經(jīng)超過(guò)35萬(wàn)，來(lái)自全球50多個(gè)國(guó)家和地區(qū)，每天在以500以上的速度增加。按照這個(gè)速度，估計(jì)到2024年底，安裝實(shí)例數(shù)將超過(guò)時(shí)序數(shù)據(jù)庫(kù)全球排名第一的InfluxDB。對(duì)這些數(shù)字，我是相當(dāng)?shù)呐d奮，因?yàn)槲议_(kāi)源的目的就是希望自己寫的程序能被眾多的人用上。無(wú)論是GitHub上的一個(gè)Star，還是吐槽，對(duì)我來(lái)說(shuō)，都是一種鼓勵(lì)，因?yàn)樗C明了我這個(gè)老程序員的價(jià)值，證明了我們團(tuán)隊(duì)的價(jià)值。

隨著TDengine的用戶天天增加，我注意到最大的問(wèn)題就是我們宣稱的高性能總是被挑戰(zhàn)，一般的研發(fā)同學(xué)都沒(méi)仔細(xì)看文檔而且沒(méi)有完全理解我們的“一個(gè)設(shè)備一張表”的數(shù)據(jù)模型，因此將數(shù)據(jù)高效寫入TDengine成了最大的使用障礙。而且TDengine除物聯(lián)網(wǎng)場(chǎng)景之外，一個(gè)更大的場(chǎng)景就是工業(yè)制造。這個(gè)領(lǐng)域里，IT人員少，相當(dāng)依賴系統(tǒng)集成公司，用好TDengine更加困難。但數(shù)字化轉(zhuǎn)型、智能制造、國(guó)產(chǎn)化替代的需求，讓很多制造業(yè)的人找到我們，希望能快速用上TDengine來(lái)存儲(chǔ)、分析他們采集的數(shù)據(jù)。

我一個(gè)制造業(yè)門外漢，開(kāi)始在中國(guó)和美國(guó)與他們交流，參觀拜訪過(guò)發(fā)電廠、冶煉廠、油田、煙廠、藥廠、水泥廠、化妝品廠、食品廠、汽車廠等等，一下發(fā)現(xiàn)一個(gè)完全不同的天地，每次都被他們的巨大制造能力所震撼。但同時(shí)發(fā)現(xiàn)，他們使用的數(shù)據(jù)處理系統(tǒng)，比如PI System, Wonderware, 或是國(guó)產(chǎn)的庚頓、麥杰等，往往基于微軟Windows,  界面一看，與炫酷的網(wǎng)頁(yè)和手機(jī)應(yīng)用相比，感覺(jué)落后了至少兩個(gè)時(shí)代。而且再一多了解，發(fā)現(xiàn)真正本質(zhì)的問(wèn)題。

1. 這些傳統(tǒng)工業(yè)軟件收費(fèi)巨貴，一般都按照測(cè)點(diǎn)(采集量）的數(shù)量收費(fèi)，一個(gè)測(cè)點(diǎn)就需要好幾個(gè)美元，一個(gè)幾萬(wàn)測(cè)點(diǎn)的發(fā)電廠就需要至少百萬(wàn)RMB。如果要增加測(cè)點(diǎn)，還需重新談License。萬(wàn)物互聯(lián)的今天，測(cè)點(diǎn)數(shù)暴漲，還采用這種收費(fèi)方式無(wú)疑匪夷所思。
2. 這些系統(tǒng)往往封閉，與第三方軟件對(duì)接很難或根本就沒(méi)有接口。隨著大數(shù)據(jù)、人工智能概念的普及，很多制造業(yè)的也希望用上新的AI分析工具，但無(wú)奈很難與現(xiàn)有的工業(yè)數(shù)據(jù)處理系統(tǒng)對(duì)接，或成本很高，只能等PI System這類廠商更新升級(jí)；
3. 企業(yè)總存在并購(gòu)、分拆，一個(gè)稍具規(guī)模的制造商就有多條產(chǎn)線、多座工廠、因此往往一個(gè)集團(tuán)存在多個(gè)不同的工業(yè)數(shù)據(jù)管理系統(tǒng)，將這些不同系統(tǒng)的數(shù)據(jù)匯聚起來(lái)進(jìn)行管理相當(dāng)困難。數(shù)據(jù)的清洗、轉(zhuǎn)換和治理，是必須的，但看似簡(jiǎn)單的事情，實(shí)施起來(lái)門檻卻很高。
4. 過(guò)去的十年，很多制造企業(yè)主動(dòng)擁抱工業(yè)互聯(lián)網(wǎng)、大數(shù)據(jù)，建設(shè)工業(yè)互聯(lián)網(wǎng)平臺(tái)，想解決傳統(tǒng)工業(yè)數(shù)據(jù)處理的問(wèn)題，但建設(shè)一個(gè)新的工業(yè)互聯(lián)網(wǎng)平臺(tái)往往周期長(zhǎng)，需要投入數(shù)百萬(wàn)甚至數(shù)千萬(wàn)資金，而且還有巨高的團(tuán)隊(duì)人員成本，但回報(bào)沒(méi)有預(yù)期中的大，導(dǎo)致很多企業(yè)決策層對(duì) AI和工業(yè)互聯(lián)網(wǎng)平臺(tái)的情緒普遍不高。

“前期投入小、上手快、用的起”

因此我在想，我們已經(jīng)將TDengine開(kāi)源，給大家提供了一個(gè)很好的時(shí)序數(shù)據(jù)處理工具，那么能否為工業(yè)制造行業(yè)提供一個(gè)前期投入小，上手快，用的起的工業(yè)數(shù)據(jù)處理系統(tǒng)呢？仔細(xì)思考后，答案是肯定的。所以2年前，濤思數(shù)據(jù)正式成立了一個(gè)研發(fā)小組，啟動(dòng)了taosX的開(kāi)發(fā)，目的就是能夠?qū)痈鞣N數(shù)據(jù)源，特別是工業(yè)數(shù)據(jù)源，通過(guò)簡(jiǎn)單的配置，不寫一行代碼，就能將OPC-UA、OPC-DA、MQTT等抓取的數(shù)據(jù)實(shí)時(shí)源源不斷的寫入TDengine, 而且建有自己可定義的規(guī)則引擎，完成數(shù)據(jù)的清洗、轉(zhuǎn)換工作，以保證入庫(kù)數(shù)據(jù)的質(zhì)量。這樣不僅將數(shù)據(jù)寫入的難題解決，而且用戶不用部署Flink或ETL工具，進(jìn)一步減少了系統(tǒng)的復(fù)雜度和運(yùn)維成本。同時(shí)，投入人力開(kāi)發(fā)標(biāo)準(zhǔn)的JDBC、ODBC接口，讓眾多的BI以及可視化工具能無(wú)縫對(duì)接。TDengine不再只是一個(gè)時(shí)序數(shù)據(jù)庫(kù)（Time Series Database，TSDB），而是通過(guò)與OPC, MQTT這些數(shù)據(jù)源的對(duì)接、與BI和可視化工具的無(wú)縫對(duì)接，形成一個(gè)零代碼的工業(yè)數(shù)據(jù)處理系統(tǒng)。經(jīng)過(guò)兩年的研發(fā)和反復(fù)測(cè)試，現(xiàn)在終于上線。

中國(guó)有大大小小至少三百萬(wàn)家制造企業(yè)，怎么讓這些用戶能用上，而且用的起呢？即使開(kāi)源，用戶還需要找服務(wù)器、安裝部署、配置、調(diào)優(yōu)等，仍然有點(diǎn)門檻。我馬上想到的是云服務(wù)。因此隨著taosX的發(fā)布，TDengine Cloud同步開(kāi)始提供OPC、MQTT、PI System等數(shù)據(jù)源接口，免費(fèi)注冊(cè)后，只要在TDengine網(wǎng)站上做好配置，不用一行代碼，即可將PLC、DCS、SCADA產(chǎn)生的數(shù)據(jù)寫入TDengine，然后利用Grafana、帆軟、永洪、Power BI等可視化、BI工具進(jìn)行展示和分析。對(duì)于簡(jiǎn)單的遠(yuǎn)程監(jiān)測(cè)、報(bào)警、實(shí)時(shí)分析、報(bào)表，完全零代碼即可完全搞定。由于TDengine Cloud第一個(gè)月完全免費(fèi)，這樣，企業(yè)在無(wú)任何硬件和軟件采購(gòu)成本的情況下，就可以很快驗(yàn)證測(cè)試系統(tǒng)，這樣大大降低了企業(yè)的風(fēng)險(xiǎn)，降低了前期投入，最大程度減少了他們的顧慮。

對(duì)于大的企業(yè)或有特殊管控的企業(yè)，在云服務(wù)上免費(fèi)體驗(yàn)和驗(yàn)證后，可以購(gòu)買TDengine企業(yè)版，獲得專業(yè)的技術(shù)支持和服務(wù)。對(duì)于中小企業(yè)，每個(gè)月只要支付1200RMB的云服務(wù)費(fèi)用，就具備每秒處理3萬(wàn)個(gè)PLC測(cè)點(diǎn)數(shù)據(jù)的能力。相對(duì)于那些動(dòng)輒百萬(wàn)的傳統(tǒng)軟件、工業(yè)互聯(lián)網(wǎng)平臺(tái)軟件，每個(gè)月1200RMB的投入可說(shuō)是沒(méi)任何壓力了。我相信，TDengine云服務(wù)能加速推動(dòng)中國(guó)制造業(yè)數(shù)字化轉(zhuǎn)型的進(jìn)程，能讓眾多中小企業(yè)享受大數(shù)據(jù)時(shí)代、人工智能時(shí)代的技術(shù)紅利。

打破傳統(tǒng)工業(yè)軟件的壟斷

從過(guò)去兩年我與制造業(yè)的交往來(lái)看，制造行業(yè)的體量大的遠(yuǎn)遠(yuǎn)超過(guò)我的想象。舉一個(gè)簡(jiǎn)單例子，整個(gè)中國(guó)銅冶煉企業(yè)就超過(guò)300家，煉鋼、煉鐵企業(yè)就超過(guò)500家。這些企業(yè)都在進(jìn)行數(shù)字化轉(zhuǎn)型，是我們IT人可以挖掘的金礦。但這些行業(yè)歷來(lái)都被傳統(tǒng)的工業(yè)軟件公司比如Aveva, Simens等所壟斷和綁架。中國(guó)軟件企業(yè)還有機(jī)會(huì)嗎？怎么撬開(kāi)一條口子？從我過(guò)去的經(jīng)驗(yàn)來(lái)看，開(kāi)源、云服務(wù)是兩大有效的手段。

開(kāi)源軟件最大的好處是開(kāi)放的生態(tài)，不會(huì)被廠商綁定。而工業(yè)軟件幾乎都是封閉系統(tǒng)，很多產(chǎn)品連用戶手冊(cè)、接口文檔都不公開(kāi)，想更換其中一個(gè)模塊幾乎不可能，比如想把一個(gè)新的報(bào)表工具與實(shí)時(shí)數(shù)據(jù)庫(kù)對(duì)接起來(lái)，沒(méi)有兩個(gè)廠家配合，沒(méi)有可能。但現(xiàn)在各種行業(yè)的分析工具、報(bào)表工具、AI工具不停的涌現(xiàn)，只有開(kāi)放系統(tǒng)才能解決這個(gè)問(wèn)題。在傳統(tǒng)的工業(yè)數(shù)據(jù)處理系統(tǒng)里，實(shí)時(shí)數(shù)據(jù)庫(kù)扮演了一個(gè)極為重要的角色，但沒(méi)有一家是開(kāi)源的。這給了TDengine巨大的機(jī)會(huì)。我在2017年創(chuàng)辦濤思數(shù)據(jù)時(shí)，根本都沒(méi)想到鋼廠、煙廠、藥廠、冶煉廠、水泥廠會(huì)用上TDengine的，是由于開(kāi)源之后，這些廠主動(dòng)找的我們，才讓我發(fā)現(xiàn)了工業(yè)制造里的機(jī)會(huì)。

為了保證TDengine的開(kāi)放性，除核心代碼開(kāi)源、支持標(biāo)準(zhǔn)的SQL查詢外，我?guī)啄昵熬蜎Q定絕不推出自己的可視化工具，不推自己的物聯(lián)網(wǎng)管理平臺(tái)，更不會(huì)做自己的分析、報(bào)表工具，連簡(jiǎn)單的報(bào)警功能都不會(huì)提供，而是希望與這些領(lǐng)域的專業(yè)廠商的產(chǎn)品能通過(guò)標(biāo)準(zhǔn)接口無(wú)縫集成。同時(shí)，我們還提供有高效的數(shù)據(jù)訂閱工具，可以方便把存儲(chǔ)在TDengine的數(shù)據(jù)實(shí)時(shí)導(dǎo)入到任何一個(gè)其他數(shù)據(jù)管理系統(tǒng)，這樣任何企業(yè)也不會(huì)被TDengine所綁架。

云服務(wù)對(duì)于傳統(tǒng)工業(yè)而言，是不可想象的。但排除一些實(shí)時(shí)控制的場(chǎng)景，云服務(wù)的好處是顯而易見(jiàn)的，不用購(gòu)置任何硬件，不用安裝部署，完全是與用自來(lái)水一樣，想用就用、想關(guān)就關(guān)，按使用量付費(fèi)，費(fèi)用可控。由于云服務(wù)平臺(tái)以及云服務(wù)廠商提供了很好的安全防范，數(shù)據(jù)比保存在自己服務(wù)器上還安全，因?yàn)橐话愕钠髽I(yè)根本沒(méi)有網(wǎng)絡(luò)安全的人才，系統(tǒng)都是在裸奔。通過(guò)云服務(wù)，無(wú)論企業(yè)的規(guī)模，在無(wú)大的前期投入下，都能很快驗(yàn)證自己的系統(tǒng)，看是否達(dá)到自己的預(yù)期，而不是商務(wù)談判一輪接一輪，還沒(méi)上線，就已經(jīng)浪費(fèi)了很多時(shí)間，系統(tǒng)還沒(méi)有正式上線，就有很大的采購(gòu)成本。

通過(guò)開(kāi)源、云服務(wù)兩個(gè)手段，傳統(tǒng)的工業(yè)軟件的市場(chǎng)格局一定會(huì)發(fā)生改變，而且徹底洗牌也完全可能。由于中國(guó)制造業(yè)體量是全球的30%以上，因此中國(guó)軟件企業(yè)有得天獨(dú)厚的機(jī)會(huì)去嘗試新的途徑，打破壟斷。濤思數(shù)據(jù)專注時(shí)序數(shù)據(jù)的采集、存儲(chǔ)、分析、計(jì)算和分發(fā)，我相信TDengine一定能讓傳統(tǒng)的工業(yè)實(shí)時(shí)數(shù)據(jù)庫(kù)(Data Historian)、工業(yè)數(shù)據(jù)處理系統(tǒng)淘汰出局，TDengine每天超過(guò)500套安裝實(shí)例的數(shù)字就是最好的證明，就是對(duì)我們團(tuán)隊(duì)最好的鼓勵(lì)。但工業(yè)軟件的其他領(lǐng)域，比如組態(tài)軟件、設(shè)計(jì)軟件、仿真軟件等，我相信也會(huì)有新勢(shì)力通過(guò)開(kāi)源、云服務(wù)的手段沖殺進(jìn)來(lái)，讓工業(yè)軟件市場(chǎng)煥發(fā)新的活力。

努力奔跑

四年前，我做出了一個(gè)正確的決定，將TDengine核心代碼開(kāi)源?，F(xiàn)在我又做出了一個(gè)新的決定，為制造業(yè)提供新一代工業(yè)數(shù)據(jù)處理平臺(tái)，而且希望通過(guò)云服務(wù)，讓數(shù)百萬(wàn)家制造企業(yè)能快速啟動(dòng)，用的上、用的起、最大的減少前期成本。歡迎工業(yè)制造領(lǐng)域的朋友們向我們提出更多需求，比如工業(yè)數(shù)據(jù)接口、常用工具等，幫助TDengine 不斷完善這個(gè)全新的工業(yè)數(shù)據(jù)處理系統(tǒng)，一起給行業(yè)賦能。

希望我和團(tuán)隊(duì)努力奔跑，不辜負(fù)這個(gè)時(shí)代賦予給我們的機(jī)會(huì)，讓中國(guó)這個(gè)制造大國(guó)有全球領(lǐng)先的工業(yè)數(shù)據(jù)處理系統(tǒng)。