剛剛過去的周五，TDengine團(tuán)隊正式發(fā)布了新版3.1.1.0, 并上線了新的官網(wǎng)。雖沒有發(fā)布會，但對濤思數(shù)據(jù)而言，這是一個“蓄謀已久”的動作。因為新版TDengine里包含了一個核心模塊taosX，它具備強(qiáng)大的數(shù)據(jù)抓取、清洗、轉(zhuǎn)換、加載(ETL)功能，除能無縫對接物聯(lián)網(wǎng)的MQTT協(xié)議外，更重要的是能對接OPC-UA、OPC-DA、PI System等工業(yè)數(shù)據(jù)源。通過這個模塊，工業(yè)場景里流行的PLC、SCADA、DCS等系統(tǒng)不用一行代碼，都可以通過簡單配置，就將數(shù)據(jù)實時的源源不斷寫入TDengine，而且在BI以及可視化工具呈現(xiàn)出來，實現(xiàn)遠(yuǎn)程監(jiān)控、實時報警、可預(yù)測性維護(hù)等功能，甚至可以從微信小程序里直接看設(shè)備運(yùn)行狀態(tài)、查看報表了。毫不夸張的說，TDengine通過零代碼將傳統(tǒng)昂貴的工業(yè)數(shù)據(jù)處理系統(tǒng)代替了，成為新一代工業(yè)數(shù)據(jù)處理系統(tǒng)。

今天周末，寫篇博客，將我開發(fā)這套系統(tǒng)的設(shè)計目標(biāo)和理念”前期投入小、上手快、用的起”分享給大家，希望給大家一點啟發(fā)。

為什么要開發(fā)一套零代碼的工業(yè)數(shù)據(jù)處理平臺？

2019年我將TDengine核心代碼完全開源，四年過去，沒想到TDengine幾乎成了全球時序數(shù)據(jù)庫的標(biāo)桿，上線的實例數(shù)已經(jīng)超過35萬，來自全球50多個國家和地區(qū)，每天在以500以上的速度增加。按照這個速度，估計到2024年底，安裝實例數(shù)將超過時序數(shù)據(jù)庫全球排名第一的InfluxDB。對這些數(shù)字，我是相當(dāng)?shù)呐d奮，因為我開源的目的就是希望自己寫的程序能被眾多的人用上。無論是GitHub上的一個Star，還是吐槽，對我來說，都是一種鼓勵，因為他證明了我這個老程序員的價值，證明了我們團(tuán)隊的價值。

隨著TDengine的用戶天天增加，我注意到最大的問題就是我們宣稱的高性能總是被挑戰(zhàn)，一般的研發(fā)同學(xué)都沒仔細(xì)看文檔而且沒有完全理解我們的“一個設(shè)備一張表”的數(shù)據(jù)模型，因此將數(shù)據(jù)高效寫入TDengine成了最大的使用障礙。而且TDengine除物聯(lián)網(wǎng)場景之外，一個更大的場景就是工業(yè)制造。這個領(lǐng)域里，IT人員少，相當(dāng)依賴系統(tǒng)集成公司，用好TDengine更加困難。但數(shù)字化轉(zhuǎn)型、智能制造、國產(chǎn)化替代的需求，讓很多制造業(yè)的人找到我們，希望能快速用上TDengine來存儲、分析他們采集的數(shù)據(jù)。

我一個制造業(yè)門外漢，開始在中國和美國與他們交流，參觀拜訪過發(fā)電廠、冶煉廠、油田、煙廠、藥廠、水泥廠、化妝品廠、食品廠、汽車廠等等，一下發(fā)現(xiàn)一個完全不同的天地，每次都被他們的巨大制造能力所震撼。但同時發(fā)現(xiàn)，他們使用的數(shù)據(jù)處理系統(tǒng)，比如PI System, Wonderware, 或是國產(chǎn)的庚頓、麥杰等，往往基于微軟Windows, 界面一看，與炫酷的網(wǎng)頁和手機(jī)應(yīng)用相比，感覺落后了至少兩個時代。而且再一多了解，發(fā)現(xiàn)真正本質(zhì)的問題。

1，這些傳統(tǒng)工業(yè)軟件收費巨貴，一般都按照測點(采集量）的數(shù)量收費，一個測點就需要好幾個美元，一個幾萬測點的發(fā)電廠就需要至少百萬RMB。如果要增加測點，還需重新談License。萬物互聯(lián)的今天，測點數(shù)暴漲，還采用這種收費方式無疑匪夷所思。

2，這些系統(tǒng)往往封閉，與第三方軟件對接很難或根本就沒有接口。隨著大數(shù)據(jù)、人工智能概念的普及，很多制造業(yè)的也希望用上新的AI分析工具，但無奈很難與現(xiàn)有的工業(yè)數(shù)據(jù)處理系統(tǒng)對接，或成本很高，只能等PI System這類廠商更新升級；

3，企業(yè)總存在并購、分拆，一個稍具規(guī)模的制造商就有多條產(chǎn)線、多座工廠、因此往往一個集團(tuán)存在多個不同的工業(yè)數(shù)據(jù)管理系統(tǒng)，將這些不同系統(tǒng)的數(shù)據(jù)匯聚起來進(jìn)行管理相當(dāng)困難。數(shù)據(jù)的清洗、轉(zhuǎn)換和治理，是必須的，但看似簡單的事情，實施起來門檻卻很高。

4，過去的十年，很多制造企業(yè)主動擁抱工業(yè)互聯(lián)網(wǎng)、大數(shù)據(jù)，建設(shè)工業(yè)互聯(lián)網(wǎng)平臺，想解決傳統(tǒng)工業(yè)數(shù)據(jù)處理的問題，但建設(shè)一個新的工業(yè)互聯(lián)網(wǎng)平臺往往周期長，需要投入數(shù)百萬甚至數(shù)千萬資金，而且還有巨高的團(tuán)隊人員成本，但回報沒有預(yù)期中的大，導(dǎo)致很多企業(yè)決策層對 AI和工業(yè)互聯(lián)網(wǎng)平臺的情緒普遍不高。

“前期投入小、上手快、用的起”

因此我在想，我們已經(jīng)將TDengine開源，給大家提供了一個很好的時序數(shù)據(jù)處理工具，那么能否為工業(yè)制造行業(yè)提供一個前期投入小，上手快，用的起的工業(yè)數(shù)據(jù)處理系統(tǒng)呢？仔細(xì)思考后，答案是肯定的。所以2年前，濤思數(shù)據(jù)正式成立了一個研發(fā)小組，啟動了taosX的開發(fā)，目的就是能夠?qū)痈鞣N數(shù)據(jù)源，特別是工業(yè)數(shù)據(jù)源，通過簡單的配置，不寫一行代碼，就能將OPC-UA、OPC-DA、MQTT等抓取的數(shù)據(jù)實時源源不斷的寫入TDengine, 而且建有自己可定義的規(guī)則引擎，完成數(shù)據(jù)的清洗、轉(zhuǎn)換工作，以保證入庫數(shù)據(jù)的質(zhì)量。這樣不僅將數(shù)據(jù)寫入的難題解決，而且用戶不用部署Flink或ETL工具，進(jìn)一步減少了系統(tǒng)的復(fù)雜度和運(yùn)維成本。同時，投入人力開發(fā)標(biāo)準(zhǔn)的JDBC、ODBC接口，讓眾多的BI以及可視化工具能無縫對接。TDengine不再只是一個時序數(shù)據(jù)庫（Time Series Database，TSDB），而是通過與OPC, MQTT這些數(shù)據(jù)源的對接、與BI和可視化工具的無縫對接，形成一個零代碼的工業(yè)數(shù)據(jù)處理系統(tǒng)。經(jīng)過兩年的研發(fā)和反復(fù)測試，現(xiàn)在終于上線。

中國有大大小小至少三百萬家制造企業(yè)，怎么讓這些用戶能用上，而且用的起呢？即使開源，用戶還需要找服務(wù)器、安裝部署、配置、調(diào)優(yōu)等，仍然有點門檻。我馬上想到的是云服務(wù)。因此隨著taosX的發(fā)布，TDengine Cloud同步開始提供OPC、MQTT、PI System等數(shù)據(jù)源接口，免費注冊后，只要在TDengine網(wǎng)站上做好配置，不用一行代碼，即可將PLC、DCS、SCADA產(chǎn)生的數(shù)據(jù)寫入TDengine，然后利用Grafana、帆軟、永洪、Power BI等可視化、BI工具進(jìn)行展示和分析。對于簡單的遠(yuǎn)程監(jiān)測、報警、實時分析、報表，完全零代碼即可完全搞定。由于TDengine Cloud第一個月完全免費，這樣，企業(yè)在無任何硬件和軟件采購成本的情況下，就可以很快驗證測試系統(tǒng)，這樣大大降低了企業(yè)的風(fēng)險，降低了前期投入，最大程度減少了他們的顧慮。

對于大的企業(yè)或有特殊管控的企業(yè)，在云服務(wù)上免費體驗和驗證后，可以購買TDengine企業(yè)版，獲得專業(yè)的技術(shù)支持和服務(wù)。對于中小企業(yè)，每個月只要支付1200RMB的云服務(wù)費用，就具備每秒處理3萬個PLC測點數(shù)據(jù)的能力。相對于那些動輒百萬的傳統(tǒng)軟件、工業(yè)互聯(lián)網(wǎng)平臺軟件，每個月1200RMB的投入可說是沒任何壓力了。我相信，TDengine云服務(wù)能加速推動中國制造業(yè)數(shù)字化轉(zhuǎn)型的進(jìn)程，能讓眾多中小企業(yè)享受大數(shù)據(jù)時代、人工智能時代的技術(shù)紅利。

新一代工業(yè)數(shù)據(jù)平臺簡單示意圖

打破傳統(tǒng)工業(yè)軟件的壟斷

從過去兩年我與制造業(yè)的交往來看，制造行業(yè)的體量大的遠(yuǎn)遠(yuǎn)超過我的想象。舉一個簡單例子，整個中國銅冶煉企業(yè)就超過300家，煉鋼、煉鐵企業(yè)就超過500家。這些企業(yè)都在進(jìn)行數(shù)字化轉(zhuǎn)型，是我們IT人可以挖掘的金礦。但這些行業(yè)歷來都被傳統(tǒng)的工業(yè)軟件公司比如Aveva, Simens等所壟斷和綁架。中國軟件企業(yè)還有機(jī)會嗎？怎么撬開一條口子？從我過去的經(jīng)驗來看，開源、云服務(wù)是兩大有效的手段。

開源軟件最大的好處是開放的生態(tài)，不會被廠商綁定。而工業(yè)軟件幾乎都是封閉系統(tǒng)，很多產(chǎn)品連用戶手冊、接口文檔都不公開，想更換其中一個模塊幾乎不可能，比如想把一個新的報表工具與實時數(shù)據(jù)庫對接起來，沒有兩個廠家配合，沒有可能。但現(xiàn)在各種行業(yè)的分析工具、報表工具、AI工具不停的涌現(xiàn)，只有開放系統(tǒng)才能解決這個問題。在傳統(tǒng)的工業(yè)數(shù)據(jù)處理系統(tǒng)里，實時數(shù)據(jù)庫扮演了一個極為重要的角色，但沒有一家是開源的。這給了TDengine巨大的機(jī)會。我在2017年創(chuàng)辦濤思數(shù)據(jù)時，根本都沒想到鋼廠、煙廠、藥廠、冶煉廠、水泥廠會用上TDengine的，是由于開源之后，這些廠主動找的我們，才讓我發(fā)現(xiàn)了工業(yè)制造里的機(jī)會。

為了保證TDengine的開放性，除核心代碼開源、支持標(biāo)準(zhǔn)的SQL查詢外，我?guī)啄昵熬蜎Q定絕不推出自己的可視化工具，不推自己的物聯(lián)網(wǎng)管理平臺，更不會做自己的分析、報表工具，連簡單的報警功能都不會提供，而是希望與這些領(lǐng)域的專業(yè)廠商的產(chǎn)品能通過標(biāo)準(zhǔn)接口無縫集成。同時，我們還提供有高效的數(shù)據(jù)訂閱工具，可以方便把存儲在TDengine的數(shù)據(jù)實時導(dǎo)入到任何一個其他數(shù)據(jù)管理系統(tǒng)，這樣任何企業(yè)也不會被TDengine所綁架。

云服務(wù)對于傳統(tǒng)工業(yè)而言，是不可想象的。但排除一些實時控制的場景，云服務(wù)的好處是顯而易見的，不用購置任何硬件，不用安裝部署，完全是與用自來水一樣，想用就用、想關(guān)就關(guān)，按使用量付費，費用可控。由于云服務(wù)平臺以及云服務(wù)廠商提供了很好的安全防范，數(shù)據(jù)比保存在自己服務(wù)器上還安全，因為一般的企業(yè)根本沒有網(wǎng)絡(luò)安全的人才，系統(tǒng)都是在裸奔。通過云服務(wù)，無論企業(yè)的規(guī)模，在無大的前期投入下，都能很快驗證自己的系統(tǒng)，看是否達(dá)到自己的預(yù)期，而不是商務(wù)談判一輪接一輪，還沒上線，就已經(jīng)浪費了很多時間，系統(tǒng)還沒有正式上線，就有很大的采購成本。

通過開源、云服務(wù)兩個手段，傳統(tǒng)的工業(yè)軟件的市場格局一定會發(fā)生改變，而且徹底洗牌也完全可能。由于中國制造業(yè)體量是全球的30%以上，因此中國軟件企業(yè)有得天獨厚的機(jī)會去嘗試新的途徑，打破壟斷。濤思數(shù)據(jù)專注時序數(shù)據(jù)的采集、存儲、分析、計算和分發(fā)，我相信TDengine一定能讓傳統(tǒng)的工業(yè)實時數(shù)據(jù)庫(Data Historian)、工業(yè)數(shù)據(jù)處理系統(tǒng)淘汰出局，TDengine每天超過500套安裝實例的數(shù)字就是最好的證明，就是對我們團(tuán)隊最好的鼓勵。但工業(yè)軟件的其他領(lǐng)域，比如組態(tài)軟件、設(shè)計軟件、仿真軟件等，我相信也會有新勢力通過開源、云服務(wù)的手段沖殺進(jìn)來，讓工業(yè)軟件市場煥發(fā)新的活力。

努力奔跑

四年前，我做出了一個正確的決定，將TDengine核心代碼開源?，F(xiàn)在我又做出了一個新的決定，為制造業(yè)提供新一代工業(yè)數(shù)據(jù)處理平臺，而且希望通過云服務(wù)，讓數(shù)百萬家制造企業(yè)能快速啟動，用的上、用的起、最大的減少前期成本。歡迎工業(yè)制造領(lǐng)域的朋友們向我們提出更多需求，比如工業(yè)數(shù)據(jù)接口、常用工具等，幫助TDengine 不斷完善這個全新的工業(yè)數(shù)據(jù)處理系統(tǒng)，一起給行業(yè)賦能。

希望我和團(tuán)隊努力奔跑，不辜負(fù)這個時代賦予給我們的機(jī)會，讓中國這個制造大國有全球領(lǐng)先的工業(yè)數(shù)據(jù)處理系統(tǒng)。

陶建輝

2023年9月3日寫于北京望京