2019年7月12日(ri),濤思數據宣布TDengine正式開源。短短兩年時間,TDengine取得了令人(ren)矚目的(de)成績(ji)。TDengine在(zai)GitHub上已經有15.5k star,3900多(duo)個(ge)fork,PR和(he)Issue超過了7000,在(zai)GitHub全球趨(qu)勢排行榜上曾多(duo)次(ci)霸榜。
2021年7月12日,正(zheng)值TDengine開源(yuan)兩周年,濤思(si)數據通過直播方式(shi)舉辦了(le)大型慶(qing)祝活動。
下午2點(dian),活動正式開啟。
濤(tao)思數據(ju)創(chuang)始(shi)人(ren)兼CEO陶建(jian)輝(hui)發(fa)(fa)表主(zhu)題(ti)演講(jiang):《兩年15.5k star——TDengine的(de)開源之(zhi)旅(lv)》。他(ta)(ta)首(shou)先回(hui)顧(gu)了自己的(de)三次創(chuang)業經歷。2016年,他(ta)(ta)看了多個物(wu)聯網、智能(neng)硬件的(de)項目(mu),發(fa)(fa)現大家都在用(yong)通用(yong)的(de)大數據(ju)平臺處理(li)物(wu)聯網數據(ju),效率(lv)不高,且運維復雜。作為一個研發(fa)(fa)人(ren)員,看到這么(me)多通用(yong)痛點(dian),他(ta)(ta)認為應該用(yong)技術(shu)的(de)方式來解決這些問題(ti)。

通過仔(zi)細分析,他總結出物聯(lian)網、工業(ye)互聯(lian)網數據(ju)的十大典(dian)型特征:
- 所有采集的數據都是時序的
- 數據都是結構化的
- 一個采集點的數據源是唯一的
- 數據很少有更新或刪除操作
- 數據一般是按到期日期來刪除的
- 數據以寫操作為主,讀操作為輔
- 數據流量平穩,可以較為準確的計算
- 數據都有統計、聚合等實時計算操作
- 數據一定是指定時間段和指定區域查找的
針(zhen)對這些特征(zheng),他主導設計了物聯(lian)網大(da)(da)數(shu)據(ju)平(ping)臺(tai)TDengine,希(xi)望(wang)為物聯(lian)網數(shu)據(ju)提(ti)供全棧解(jie)決方案。相(xiang)對于通用型(xing)大(da)(da)數(shu)據(ju)處理(li)方案,TDengine帶來了十倍以上的性能提(ti)升,使企業(ye)總擁有成本大(da)(da)幅下降(jiang)。
陶建輝認為,對于基礎軟件而言,開源具有極大的價值。具體而言,開(kai)(kai)源(yuan)(yuan)(yuan)可以幫助企(qi)業(ye)擴大影響力(li)(li),樹(shu)立產品和技(ji)術品牌(pai);形成開(kai)(kai)發者社區,構(gou)建競(jing)(jing)爭(zheng)壁(bi)壘;快(kuai)速(su)獲得(de)市(shi)場反饋,快(kuai)速(su)迭代(dai)產品;降低使用(yong)門檻,方便用(yong)戶使用(yong);獲得(de)用(yong)戶信任,重(zhong)塑商業(ye)模(mo)式。所以,濤思數據(ju)不(bu)僅選擇了(le)開(kai)(kai)源(yuan)(yuan)(yuan),還選擇了(le)開(kai)(kai)源(yuan)(yuan)(yuan)最(zui)核心(xin)的代(dai)碼。如果不(bu)把(ba)最(zui)有競(jing)(jing)爭(zheng)力(li)(li)的代(dai)碼開(kai)(kai)源(yuan)(yuan)(yuan),市(shi)場替代(dai)品太(tai)多;不(bu)給用(yong)戶帶來真(zhen)正的價值,送給他,他也不(bu)會用(yong),難(nan)以形成粉絲群;把(ba)最(zui)有競(jing)(jing)爭(zheng)力(li)(li)的代(dai)碼開(kai)(kai)源(yuan)(yuan)(yuan)出(chu)來,還能狙(ju)擊競(jing)(jing)爭(zheng)對手。
陶建輝(hui)還分享了濤思數據在研發、社區和(he)團隊(dui)方面的投入。
- 研發方面,到目前為止,TDengine已經發布了87個版本;運行測試例1663個;PR 4645次;包含測試代碼在內,TDengine的代碼行數已經達到75萬行。
- 社群方面,濤思數據已經發布了100多篇技術文章和教程,在GitHub上解答了2128個Issue,目前項目貢獻者已經超過80人。
- 團隊方面,整個團隊不斷擴大,公司從草創時期的5個人已經發展到50多人。團隊的不斷擴大,也為項目的長期穩定發展提供了堅強的后盾。
在(zai)付出(chu)了(le)這么多努力之(zhi)后,TDengine也得到了(le)社區的(de)廣泛認可。TDengine的(de)用(yong)戶遍(bian)布(bu)全球50多個(ge)城市,上線實例(li)數超過68.9k。在(zai)CNCF的(de)云原生全景圖(tu)的(de)數據庫分類下,TDengine排(pai)在(zai)第8位(wei)。
TDengine也(ye)得(de)到了資本(ben)市場(chang)的極大認(ren)可。自成立(li)以來(lai),濤(tao)思(si)數(shu)據(ju)已經獲得(de)多輪融(rong)資。在今年5月(yue),濤(tao)思(si)數(shu)據(ju)剛剛完成B輪4700萬(wan)美元的融(rong)資,由經緯中(zhong)國領投,紅杉(shan)資本(ben)中(zhong)國基金、GGV紀(ji)源資本(ben)、指數(shu)資本(ben)跟(gen)投。
關于未來,TDengine有兩個重要方向,一個是事件驅動的流計算,一個是云服務。
在演講最后,陶建輝表示(shi)將(jiang)繼續擁(yong)抱開源,和(he)用戶攜手向前!
濤思數(shu)(shu)據(ju)聯(lian)合(he)創(chuang)始人、技術VP關勝亮(liang)從技術角度(du)分享(xiang)了TDengine的(de)路線(xian)圖。TDengine的(de)核心創(chuang)新點(dian)是數(shu)(shu)據(ju)模型,在(zai)物聯(lian)網領域,TDengine為每(mei)個(ge)采(cai)集設備創(chuang)建一張表,能夠達到非(fei)常好的(de)讀(du)寫性能,在(zai)此基礎上,引入超級(ji)表的(de)概念,實現了多(duo)個(ge)數(shu)(shu)據(ju)采(cai)集點(dian)的(de)高(gao)效聚合(he)。
TDengine 2.0將持續維護,在接(jie)入能(neng)力(li)、計算能(neng)力(li)和應用能(neng)力(li)三(san)個(ge)方面進一步改造。
- TDengine將提供浮點數據的有損壓縮功能,在性能不變的基礎上,顯著提升壓縮比;會支持納秒數據庫,以便支持有高精度采樣頻率需求的場景;會提供更加完善的數據更新機制。明年TDengine還會支持變長字符串和blob數據類型。
- 在計算能力上,將提供高速的數據緩存功能,最近數據能夠快速查詢;會支持用戶自定義的查詢函數,也就是UDF;還將提供更加豐富的分析功能,SQL語句會支持嵌套查詢、狀態量窗口、會話窗口等更多功能。
- 在應用上,今年會發布云服務,提供免費的物聯網數據存儲;會與OpenFalcon、夜鶯等運維監控軟件集成,作為其底層存儲引擎;提供更加完善的MQTT、OPC、MODBUS接入方法;提供更靈活的Grafana插件和豐富的Dashboard;此外,TDengine的自身監控功能也會進一步優化。
目(mu)前TDengine 3.0的(de)研(yan)發工作也(ye)已經開始,其關鍵特性有3個(ge):
- 將TDengine的架構修改為云原生架構,更加完美地支持容器化部署;
- 要做到計算和存儲分離,以便于更加快速地實現系統的擴容和縮容;
- 支持事件驅動的流計算。
濤思數據(ju)聯合創(chuang)始人(ren)李廣(guang)分(fen)享了《從開(kai)源(yuan)到(dao)商(shang)(shang)業(ye)化——TDengine的(de)最(zui)佳(jia)(jia)實(shi)踐》。他提到(dao),TDengine開(kai)源(yuan)兩年以(yi)來(lai),在商(shang)(shang)業(ye)化方(fang)面也取(qu)得了很大的(de)成(cheng)果(guo),到(dao)目前為(wei)止(zhi),開(kai)源(yuan)用戶已經超過10萬,商(shang)(shang)業(ye)付費客(ke)戶有100多家(jia),其中包括10多家(jia)世(shi)界500強企業(ye),如(ru)中國電(dian)信、國家(jia)電(dian)網(wang)、華潤、中國電(dian)科、南鋼金恒、經緯恒潤等(deng)。TDengine毫(hao)無(wu)保留地(di)開(kai)源(yuan)了最(zui)核心的(de)代碼,社區版本(ben)是客(ke)戶認(ren)知和體驗(yan)TDengine的(de)最(zui)佳(jia)(jia)方(fang)法,是商(shang)(shang)業(ye)軟件(jian)降低商(shang)(shang)業(ye)化和銷售(shou)成(cheng)本(ben)的(de)最(zui)佳(jia)(jia)路徑。
濤思數據(ju)聯合創始人侯江燚分享了《腳踏(ta)實(shi)地(di)——TDengine的行業(ye)落(luo)地(di)場景(jing)》。他介(jie)紹(shao)了TDengine的應(ying)用場景(jing)和落(luo)地(di)案例。演(yan)講(jiang)中提(ti)到(dao)了3個(ge)最典型的場景(jing):
- 電力行業是典型的時序監控無處不在的行業。電網的穩定運行,離不開發電、輸電、配電等各個關鍵環節中的實時監控。某能源集團要為多個發電站建立一個生產監控大數據平臺,來存儲風機、光伏板等發電設備的運行狀態數據、發電機組運行狀態、電流、電壓、功率等。平臺接入了15000多個設備的數據,總監測點數超過2000萬,寫入速度超過200萬點/秒,每天原始數據增量超過1TB。用戶為此搭建了6節點的TDengine集群,可以高速寫入數據的同時,很好地支撐了實時大屏、告警看板和定期的報表統計查詢。
- 汽車行業是另一個與時序監測密不可分的行業。從汽車的制造、到車聯網、再到自動駕駛領域,無一不在產生海量的時序數據。某企業用TDengine替代Hadoop搭建車聯網大數據平臺,平臺接入車輛數約150萬輛,主要是TBox采集的實時經緯度、車速、加速度、制動狀態、ABS狀態等關鍵行車信息,并基于此對車輛和用戶行為進行評估和分析。對數據平臺的性能要求為至少每秒寫入約1000萬點,每天約15TB的數據增長速度。
- IT運維場景,從基礎設施層的服務器、容器開始,到數據庫、消息隊列等中間件,再到業務服務進程本身、API調用次數,資源占用情況等,都需要監控并實時報警處理,保證大家服務的健康穩定。某公司的運維團隊,采用TDengine后,將25個節點的OpenTSDB集群計算資源替縮減成了3節點TDengine集群。大幅節省了計算和存儲資源。
第二個環節是《大咖話開源》。CSDN創始人&董事長、極客幫創投創始合伙人蔣濤、國家電網河北電力有限公司、調度控制中心自動化處處長楊立波、PingCAP聯合創始人兼CTO黃東旭、中(zhong)國(guo)地(di)震(zhen)臺網中(zhong)心(xin)、地(di)震(zhen)科學技術開放實驗室主(zhu)任(ren)馬延路以(yi)及(ji)紅杉(shan)資本中(zhong)國(guo)基(ji)金投資合伙人吳茗等嘉賓分享了各自對開源的深刻見解。

在談到對未(wei)來技術(shu)趨勢(shi)的(de)(de)(de)(de)(de)(de)預測(ce)時,黃東旭認(ren)(ren)為(wei)(wei)(wei),有三點他認(ren)(ren)為(wei)(wei)(wei)比較(jiao)重要:未(wei)來五年(nian)有幾個(ge)趨勢(shi)是(shi)可以預見的(de)(de)(de)(de)(de)(de),一(yi)個(ge)是(shi)摩(mo)爾定律會失效,所有的(de)(de)(de)(de)(de)(de)基(ji)礎軟(ruan)件都要變成(cheng)分布(bu)式的(de)(de)(de)(de)(de)(de),分布(bu)式技術(shu)將成(cheng)為(wei)(wei)(wei)程序員必須(xu)學(xue)習的(de)(de)(de)(de)(de)(de)技能;再一(yi)個(ge)是(shi)Cloud Native,云(yun)會重塑編程方式,很(hen)多新(xin)的(de)(de)(de)(de)(de)(de)服務(wu)或軟(ruan)件就(jiu)是(shi)基(ji)于(yu)云(yun)服務(wu)的(de)(de)(de)(de)(de)(de),開(kai)(kai)發者不用再考慮(lv)或者根本不知道底層(ceng)的(de)(de)(de)(de)(de)(de)操作系統;還有一(yi)個(ge)趨勢(shi)是(shi)開(kai)(kai)源,開(kai)(kai)源將成(cheng)為(wei)(wei)(wei)未(wei)來開(kai)(kai)發軟(ruan)件的(de)(de)(de)(de)(de)(de)基(ji)石,很(hen)多開(kai)(kai)發要基(ji)于(yu)開(kai)(kai)源軟(ruan)件以搭積木的(de)(de)(de)(de)(de)(de)形式構建。
吳茗認為,未來在(zai)特別大的一(yi)些場景下的異(yi)構計(ji)算還有很多創新機會。
陶(tao)建輝認(ren)為所有技術的(de)變化都是應用場景驅(qu)動的(de)。
楊立(li)波(bo)認為,開(kai)(kai)源模式是一種價值模式:從個(ge)人(ren)角度(du)講,能讓人(ren)快(kuai)速接觸到(dao)某個(ge)領域世界上最先(xian)進的(de)技術(shu),給人(ren)以無限的(de)發揮能力;從企業(ye)角度(du)講,可以彌合差距,將(jiang)精力放在最核心的(de)部分;對(dui)于傳統行(xing)業(ye),得(de)到(dao)的(de)是“信賴”,要(yao)考(kao)慮(lv)系(xi)統長期穩定的(de)發展,源代碼可以為企業(ye)提(ti)供定心丸(wan);對(dui)開(kai)(kai)源公司而言,產品可以快(kuai)速迭(die)代和(he)成(cheng)熟,能夠開(kai)(kai)源,也是公司勇氣和(he)精神的(de)體現(xian)。
馬延(yan)路提到,地震(zhen)臺網采集的(de)(de)數(shu)據量非常大(da),一方(fang)面(mian)采集點不斷(duan)增多,一方(fang)面(mian)我們對(dui)分析速(su)度的(de)(de)要(yao)求越(yue)來越(yue)高,從(cong)而對(dui)技術的(de)(de)挑(tiao)戰也越(yue)來越(yue)大(da)。開源搭建(jian)起了地震(zhen)研(yan)究(jiu)人員和技術人員之間的(de)(de)橋梁。
燈塔計劃
作為(wei)活動(dong)最重磅(bang)的環(huan)節,濤思數據創始(shi)人兼CEO陶建輝和蔣(jiang)濤、楊立波、黃東旭、馬延路以(yi)及(ji)吳茗等五位嘉賓一起點亮按(an)鈕,宣布(bu)啟動(dong)燈塔計劃。

為(wei)共建物聯(lian)網大數(shu)據處理生態(tai),濤思數(shu)據發布燈塔計劃,將投入上億(yi)元研(yan)發資源支持,希(xi)望聯(lian)合(he)100家(jia)企業,以TDengine為(wei)核心,為(wei)企業提升業務(wu)價值,降本(ben)增效。
你(ni)的企業是不是受困于(yu)時序數據處理的效率(lv)不夠高,隨著業務規模提升,存儲(chu)和計算成(cheng)本以幾何(he)級數方式(shi)增(zeng)加(jia)?
TDengine就是你的答案(an)!
下(xia)面我們來看一下(xia)“燈塔計(ji)劃”的具體內容。
【面向對象】
市值在10億美(mei)金以上的公(gong)司,或者估值在10億美(mei)金以上的獨(du)角獸企業,有(you)時序數據(ju)處(chu)理(li)的場景和需(xu)求。
【報名時間】
2021年7月12日~2021年8月12日。
【申請流程】
填(tian)寫申請(qing)表(biao)單,描(miao)述相關場(chang)景,濤思數據工作(zuo)人員會(hui)主(zhu)動聯系(xi)。對于符合要(yao)求的企業,雙方將簽訂合作(zuo)協議(yi),正式推(tui)進。
濤思數據將(jiang)提供(gong)五大核心支持,為企業(ye)落地和使用TDengine提供(gong)強(qiang)有力(li)的保(bao)證。
- 產品賦能:利用TDengine提升時序數據處理能力,大幅降低TOC。
- 原廠支持:濤思數據免費提供2年價值百萬級的企業級技術支持,免除后顧之憂。
- 人才培養:濤思數據輸送講師,幫助企業專家深入掌握TDengine。
- 品牌推廣:與參加企業聯合進行品牌推廣活動,提升影響力。
- 獎項加持:2021年年底評選3家企業作為TDengine年度最佳合作伙伴,追加2年企業級服務;對于參與TDengine在企業落地過程的專家,評選TDengine MVP。
今年年底,濤思(si)數據還(huan)將推出(chu)盛(sheng)大的頒獎活動,評選出(chu)最有代(dai)表性案例和(he)最佳合作伙(huo)伴。
濤思(si)數據(ju)希望通(tong)過燈塔計劃,推動企業完成和完善(shan)數字化轉型,點亮整個物(wu)聯網(wang)大(da)數據(ju)處理生態!
最后感謝SegmentFault思否、CSDN、InfoQ、Gitee、OSChina和騰源會等合作伙伴的大力支持。


























