omniture

兩年15.5k star只是新起點,濤思數(shù)據(jù)正式宣布TDengine燈塔計劃

2021-07-14 16:00 5835
2021年7月12日,正值TDengine開源兩周年,濤思數(shù)據(jù)通過直播方式舉辦了大型慶?;顒?。

北京2021年7月14日 /美通社/ -- 2019年7月12日,濤思數(shù)據(jù)宣布TDengine正式開源。短短兩年時間,TDengine取得了令人矚目的成績。TDengine在GitHub上已經(jīng)有15.5k star,3900多個fork,PR和Issue超過了7000,在GitHub全球趨勢排行榜上曾多次霸榜。

2021年7月12日,正值TDengine開源兩周年,濤思數(shù)據(jù)通過直播方式舉辦了大型慶?;顒印?/p>

下午2點,活動正式開啟。

濤思數(shù)據(jù)創(chuàng)始人兼CEO陶建輝發(fā)表主題演講:《兩年15.5k star -- TDengine的開源之旅》。他首先回顧了自己的三次創(chuàng)業(yè)經(jīng)歷。2016年,他看了多個物聯(lián)網(wǎng)、智能硬件的項目,發(fā)現(xiàn)大家都在用通用的大數(shù)據(jù)平臺處理物聯(lián)網(wǎng)數(shù)據(jù),效率不高,且運維復(fù)雜。作為一個研發(fā)人員,看到這么多通用痛點,他認為應(yīng)該用技術(shù)的方式來解決這些問題。


通過仔細分析,他總結(jié)出物聯(lián)網(wǎng)、工業(yè)互聯(lián)網(wǎng)數(shù)據(jù)的十大典型特征:

  • 所有采集的數(shù)據(jù)都是時序的
  • 數(shù)據(jù)都是結(jié)構(gòu)化的
  • 一個采集點的數(shù)據(jù)源是唯一的
  • 數(shù)據(jù)很少有更新或刪除操作
  • 數(shù)據(jù)一般是按到期日期來刪除的
  • 數(shù)據(jù)以寫操作為主,讀操作為輔
  • 數(shù)據(jù)流量平穩(wěn),可以較為準確計算
  • 數(shù)據(jù)都有統(tǒng)計、聚合等實時計算操作
  • 數(shù)據(jù)一定是指定時間段和指定區(qū)域查找的

針對這些特征,他主導(dǎo)設(shè)計了物聯(lián)網(wǎng)大數(shù)據(jù)平臺TDengine,希望為物聯(lián)網(wǎng)數(shù)據(jù)提供全棧解決方案。相對于通用型大數(shù)據(jù)處理方案,TDengine帶來了十倍以上的性能提升,使企業(yè)總擁有成本大幅下降。

陶建輝認為,對于基礎(chǔ)軟件而言,開源具有極大的價值。具體而言,開源可以幫助企業(yè)擴大影響力,樹立產(chǎn)品和技術(shù)品牌;形成開發(fā)者社區(qū),構(gòu)建競爭壁壘;快速獲得市場反饋,快速迭代產(chǎn)品;降低使用門檻,方便用戶使用;獲得用戶信任,重塑商業(yè)模式。所以,濤思數(shù)據(jù)不僅選擇了開源,還選擇了開源最核心的代碼。如果不把最有競爭力的代碼開源,市場替代品太多;不給用戶帶來真正的價值,送給他,他也不會用,難以形成粉絲群;把最有競爭力的代碼開源出來,還能狙擊競爭對手。

陶建輝還分享了濤思數(shù)據(jù)在研發(fā)、社區(qū)和團隊方面的投入。

  • 研發(fā)方面,到目前為止,TDengine已經(jīng)發(fā)布了87個版本;運行測試例1663個;PR 4645次;包含測試代碼在內(nèi),TDengine的代碼行數(shù)已經(jīng)達到75萬行。
  • 社群方面,濤思數(shù)據(jù)已經(jīng)發(fā)布了100多篇技術(shù)文章和教程,在GitHub上解答了2128個Issue,目前項目貢獻者已經(jīng)超過80人。
  • 團隊方面,整個團隊不斷擴大,公司從草創(chuàng)時期的5個人已經(jīng)發(fā)展到50多人。團隊的不斷擴大,也為項目的長期穩(wěn)定發(fā)展提供了堅強的后盾。

在付出了這么多努力之后,TDengine也得到了社區(qū)的廣泛認可。TDengine的用戶遍布全球50多個城市,上線實例數(shù)超過68.9k。在CNCF的云原生全景圖的數(shù)據(jù)庫分類下,TDengine排在第8位。

TDengine也得到了資本市場的極大認可。自成立以來,濤思數(shù)據(jù)已經(jīng)獲得多輪融資。在今年5月,濤思數(shù)據(jù)剛剛完成B輪4700萬美元的融資,由經(jīng)緯中國領(lǐng)投,紅杉資本中國基金、GGV紀源資本、指數(shù)資本跟投。

關(guān)于未來,TDengine有兩個重要方向,一個是事件驅(qū)動的流計算,一個是云服務(wù)。

在演講最后,陶建輝表示將繼續(xù)擁抱開源,和用戶攜手向前!

濤思數(shù)據(jù)聯(lián)合創(chuàng)始人、技術(shù)VP關(guān)勝亮從技術(shù)角度分享了TDengine的路線圖。TDengine的核心創(chuàng)新點是數(shù)據(jù)模型,在物聯(lián)網(wǎng)領(lǐng)域,TDengine為每個采集設(shè)備創(chuàng)建一張表,能夠達到非常好的讀寫性能,在此基礎(chǔ)上,引入超級表的概念,實現(xiàn)了多個數(shù)據(jù)采集點的高效聚合。

TDengine 2.0將持續(xù)維護,在接入能力、計算能力和應(yīng)用能力三個方面進一步改造。

  • TDengine將提供浮點數(shù)據(jù)的有損壓縮功能,在性能不變的基礎(chǔ)上,顯著提升壓縮比;會支持納秒數(shù)據(jù)庫,以便支持有高精度采樣頻率需求的場景;會提供更加完善的數(shù)據(jù)更新機制。明年TDengine還會支持變長字符串和blob數(shù)據(jù)類型。
  • 在計算能力上,將提供高速的數(shù)據(jù)緩存功能,最近數(shù)據(jù)能夠快速查詢;會支持用戶自定義的查詢函數(shù),也就是UDF;還將提供更加豐富的分析功能,SQL語句會支持嵌套查詢、狀態(tài)量窗口、會話窗口等更多功能。
  • 在應(yīng)用上,今年會發(fā)布云服務(wù),提供免費的物聯(lián)網(wǎng)數(shù)據(jù)存儲;會與OpenFalcon、夜鶯等運維監(jiān)控軟件集成,作為其底層存儲引擎;提供更加完善的MQTT、OPC、MODBUS接入方法;提供更靈活的Grafana插件和豐富的Dashboard;此外,TDengine的自身監(jiān)控功能也會進一步優(yōu)化。

目前TDengine 3.0的研發(fā)工作也已經(jīng)開始,其關(guān)鍵特性有3個:

  • 將TDengine的架構(gòu)修改為云原生架構(gòu),更加完美地支持容器化部署;
  • 要做到計算和存儲分離,以便于更加快速地實現(xiàn)系統(tǒng)的擴容和縮容;
  • 支持事件驅(qū)動的流計算。

濤思數(shù)據(jù)聯(lián)合創(chuàng)始人李廣分享了《從開源到商業(yè)化 -- TDengine的最佳實踐》。他提到,TDengine開源兩年以來,在商業(yè)化方面也取得了很大的成果,到目前為止,開源用戶已經(jīng)超過10萬,商業(yè)付費客戶有100多家,其中包括10多家世界500強企業(yè),如中國電信、國家電網(wǎng)、華潤、中國電科、南鋼金恒、經(jīng)緯恒潤等。TDengine毫無保留地開源了最核心的代碼,社區(qū)版本是客戶認知和體驗TDengine的最佳方法,是商業(yè)軟件降低商業(yè)化和銷售成本的最佳路徑。

濤思數(shù)據(jù)聯(lián)合創(chuàng)始人侯江燚分享了《腳踏實地 -- TDengine的行業(yè)落地場景》。他介紹了TDengine的應(yīng)用場景和落地案例。演講中提到了3個最典型的場景:

  • 電力行業(yè)是典型的時序監(jiān)控?zé)o處不在的行業(yè)。電網(wǎng)的穩(wěn)定運行,離不開發(fā)電、輸電、配電等各個關(guān)鍵環(huán)節(jié)中的實時監(jiān)控。某能源集團要為多個發(fā)電站建立一個生產(chǎn)監(jiān)控大數(shù)據(jù)平臺,來存儲風(fēng)機、光伏板等發(fā)電設(shè)備的運行狀態(tài)數(shù)據(jù)、發(fā)電機組運行狀態(tài)、電流、電壓、功率等。平臺接入了15000多個設(shè)備的數(shù)據(jù),總監(jiān)測點數(shù)超過2000萬,寫入速度超過200萬點/秒,每天原始數(shù)據(jù)增量超過1TB。用戶為此搭建了6節(jié)點的TDengine集群,可以高速寫入數(shù)據(jù)的同時,很好地支撐了實時大屏、告警看板和定期的報表統(tǒng)計查詢。
  • 汽車行業(yè)是另一個與時序監(jiān)測密不可分的行業(yè)。從汽車的制造、到車聯(lián)網(wǎng)、再到自動駕駛領(lǐng)域,無一不在產(chǎn)生海量的時序數(shù)據(jù)。某企業(yè)用TDengine替代Hadoop搭建車聯(lián)網(wǎng)大數(shù)據(jù)平臺,平臺接入車輛數(shù)約150萬輛,主要是TBox采集的實時經(jīng)緯度、車速、加速度、制動狀態(tài)、ABS狀態(tài)等關(guān)鍵行車信息,并基于此對車輛和用戶行為進行評估和分析。對數(shù)據(jù)平臺的性能要求為至少每秒寫入約1000萬點,每天約15TB的數(shù)據(jù)增長速度。
  • IT運維場景,從基礎(chǔ)設(shè)施層的服務(wù)器、容器開始,到數(shù)據(jù)庫、消息隊列等中間件,再到業(yè)務(wù)服務(wù)進程本身、API調(diào)用次數(shù),資源占用情況等,都需要監(jiān)控并實時報警處理,保證大家服務(wù)的健康穩(wěn)定。某公司的運維團隊,采用TDengine后,將25個節(jié)點的OpenTSDB集群計算資源替縮減成了3節(jié)點TDengine集群。大幅節(jié)省了計算和存儲資源。

第二個環(huán)節(jié)是《大咖話開源》。CSDN創(chuàng)始人&董事長、極客幫創(chuàng)投創(chuàng)始合伙人蔣濤、國家電網(wǎng)河北電力有限公司、調(diào)度控制中心自動化處處長楊立波、PingCAP聯(lián)合創(chuàng)始人兼CTO黃東旭、中國地震臺網(wǎng)中心、地震科學(xué)技術(shù)開放實驗室主任馬延路以及紅杉資本中國基金投資合伙人吳茗等嘉賓分享了各自對開源的深刻見解。


在談到對未來技術(shù)趨勢的預(yù)測時,黃東旭認為,有三點他認為比較重要:未來五年有幾個趨勢是可以預(yù)見的,一個是摩爾定律會失效,所有的基礎(chǔ)軟件都要變成分布式的,分布式技術(shù)將成為程序員必須學(xué)習(xí)的技能;再一個是Cloud Native,云會重塑編程方式,很多新的服務(wù)或軟件就是基于云服務(wù)的,開發(fā)者不用再考慮或者根本不知道底層的操作系統(tǒng);還有一個趨勢是開源,開源將成為未來開發(fā)軟件的基石,很多開發(fā)要基于開源軟件以搭積木的形式構(gòu)建。

吳茗認為,未來在特別大的一些場景下的異構(gòu)計算還有很多創(chuàng)新機會。

陶建輝認為所有技術(shù)的變化都是應(yīng)用場景驅(qū)動的。

楊立波認為,開源模式是一種價值模式:從個人角度講,能讓人快速接觸到某個領(lǐng)域世界上最先進的技術(shù),給人以無限的發(fā)揮能力;從企業(yè)角度講,可以彌合差距,將精力放在最核心的部分;對于傳統(tǒng)行業(yè),得到的是“信賴”,要考慮系統(tǒng)長期穩(wěn)定的發(fā)展,源代碼可以為企業(yè)提供定心丸;對開源公司而言,產(chǎn)品可以快速迭代和成熟,能夠開源,也是公司勇氣和精神的體現(xiàn)。

馬延路提到,地震臺網(wǎng)采集的數(shù)據(jù)量非常大,一方面采集點不斷增多,一方面我們對分析速度的要求越來越高,從而對技術(shù)的挑戰(zhàn)也越來越大。開源搭建起了地震研究人員和技術(shù)人員之間的橋梁。

燈塔計劃

作為活動最重磅的環(huán)節(jié),濤思數(shù)據(jù)創(chuàng)始人兼CEO陶建輝和蔣濤、楊立波、黃東旭、馬延路以及吳茗等五位嘉賓一起點亮按鈕,宣布啟動燈塔計劃。


為共建物聯(lián)網(wǎng)大數(shù)據(jù)處理生態(tài),濤思數(shù)據(jù)發(fā)布燈塔計劃,將投入上億元研發(fā)資源支持,希望聯(lián)合100家企業(yè),以TDengine為核心,為企業(yè)提升業(yè)務(wù)價值,降本增效。

你的企業(yè)是不是受困于時序數(shù)據(jù)處理的效率不夠高,隨著業(yè)務(wù)規(guī)模提升,存儲和計算成本以幾何級數(shù)方式增加?

TDengine就是你的答案!

下面我們來看一下“燈塔計劃”的具體內(nèi)容。

【面向?qū)ο蟆?/p>

市值在10億美金以上的公司,或者估值在10億美金以上的獨角獸企業(yè),有時序數(shù)據(jù)處理的場景和需求。

【報名時間】

2021年7月12日~2021年8月12日。

【申請流程】

填寫申請表單,描述相關(guān)場景,濤思數(shù)據(jù)工作人員會主動聯(lián)系。對于符合要求的企業(yè),雙方將簽訂合作協(xié)議,正式推進。

濤思數(shù)據(jù)將提供五大核心支持,為企業(yè)落地和使用TDengine提供強有力的保證。

  • 產(chǎn)品賦能:利用TDengine提升時序數(shù)據(jù)處理能力,大幅降低TOC。
  • 原廠支持:濤思數(shù)據(jù)免費提供2年價值百萬級的企業(yè)級技術(shù)支持,免除后顧之憂。
  • 人才培養(yǎng):濤思數(shù)據(jù)輸送講師,幫助企業(yè)專家深入掌握TDengine。
  • 品牌推廣:與參加企業(yè)聯(lián)合進行品牌推廣活動,提升影響力。
  • 獎項加持:2021年年底評選3家企業(yè)作為TDengine年度最佳合作伙伴,追加2年企業(yè)級服務(wù);對于參與TDengine在企業(yè)落地過程的專家,評選TDengine MVP。

今年年底,濤思數(shù)據(jù)還將推出盛大的頒獎活動,評選出最有代表性案例和最佳合作伙伴。

濤思數(shù)據(jù)希望通過燈塔計劃,推動企業(yè)完成和完善數(shù)字化轉(zhuǎn)型,點亮整個物聯(lián)網(wǎng)大數(shù)據(jù)處理生態(tài)!

點擊這里,報名燈塔計劃!

消息來源:濤思數(shù)據(jù)
China-PRNewsire-300-300.png
全球TMT
微信公眾號“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動態(tài)、財報信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection