5月3日，星環(huán)科技在上海舉辦了2018第二屆前沿科技論壇暨星環(huán)用戶大會(huì)，在此次大會(huì)上，星環(huán)宣布了眾多的重磅消息：發(fā)布最新的系列產(chǎn)品、星環(huán)TDH平臺(tái)通過(guò)TPC-DS基準(zhǔn)測(cè)試、與新加坡人工智能核心項(xiàng)目簽署了戰(zhàn)略合作協(xié)議……

　　剝絲抽繭這些消息，我們不難發(fā)現(xiàn)星環(huán)在大數(shù)據(jù)底層基礎(chǔ)產(chǎn)品研發(fā)領(lǐng)域已經(jīng)走出了一條自己的道路，在這條道路上星環(huán)的產(chǎn)品經(jīng)歷了怎樣的變化?新發(fā)布的TDH 6.0有哪些技術(shù)細(xì)節(jié)和性能優(yōu)化?新增的人工智能產(chǎn)品線如何發(fā)展……針對(duì)這些問(wèn)題，我們?cè)诘诰艑弥袊?guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)上采訪到了星環(huán)科技的大數(shù)據(jù)研發(fā)總監(jiān)劉汪根。

　　劉汪根，負(fù)責(zé)星環(huán)科技大數(shù)據(jù)平臺(tái)軟件Transwarp Data Hub的研發(fā)工作，主導(dǎo)開(kāi)發(fā)星環(huán)大數(shù)據(jù)平臺(tái)的大量創(chuàng)新功能，包括國(guó)內(nèi)領(lǐng)先的完整兼容SQL標(biāo)準(zhǔn)的Hadoop SQL編譯器，首個(gè)完整支持ACID屬性的分布式事務(wù)，穩(wěn)定高效的分布式執(zhí)行引擎。

　　通關(guān)TPC-DS基準(zhǔn)測(cè)試，星環(huán)TDH6.0技術(shù)細(xì)節(jié)披露

　　“星環(huán)TDH平臺(tái)成為全球首個(gè)通過(guò)經(jīng)過(guò)官方審核的TPC-DS基準(zhǔn)測(cè)試的數(shù)據(jù)平臺(tái)，打破了該領(lǐng)域十二年來(lái)沒(méi)有廠商通過(guò)該項(xiàng)測(cè)試的局面”。這個(gè)消息一出，無(wú)疑給了“基礎(chǔ)軟件國(guó)產(chǎn)化”一劑強(qiáng)效雞血。

　　“通過(guò)TPC-DS基準(zhǔn)測(cè)試對(duì)于星環(huán)TDH來(lái)說(shuō)，更多的是意味著我們的產(chǎn)品可以7*24小時(shí)的滿足非常嚴(yán)苛的生產(chǎn)需求，在使用性、穩(wěn)定性和產(chǎn)品全面性方面達(dá)到了非常好的水平。”在談到新發(fā)布的星環(huán) TDH 6.0時(shí)，劉汪根也透露了很多技術(shù)細(xì)節(jié)。

　　實(shí)時(shí)處理引擎：大多數(shù)時(shí)候，講實(shí)時(shí)處理其實(shí)是在講實(shí)時(shí)計(jì)算引擎，尤其是在延時(shí)和吞吐兩個(gè)方面的體現(xiàn)。一年前，星環(huán)完成了高吞吐、低延時(shí)實(shí)時(shí)計(jì)算引擎的研發(fā)工作，延遲時(shí)間可縮減到5毫秒，是Spark Streaming引擎延時(shí)的1/100。另外，據(jù)劉汪根透露星環(huán)實(shí)時(shí)計(jì)算引擎里加入了一些機(jī)器學(xué)習(xí)的常規(guī)算法。

　　降低入門(mén)門(mén)檻：任何產(chǎn)品的發(fā)布使用都是一個(gè)比較復(fù)雜的過(guò)程，你需要去學(xué)習(xí)編程語(yǔ)言、調(diào)試、發(fā)布等等。但星環(huán)TDH 6.0提供了整個(gè)的開(kāi)發(fā)平臺(tái)，在處理復(fù)雜的編程調(diào)試時(shí)，可以直接拖拽基于統(tǒng)一化規(guī)則的事件。

　　完整的開(kāi)發(fā)工具鏈：大數(shù)據(jù)開(kāi)發(fā)存在的一個(gè)很大問(wèn)題是工具鏈的不完善，有些常規(guī)工具的正負(fù)面反饋幾乎是一樣多的，而星環(huán)把整個(gè)大數(shù)據(jù)底層的開(kāi)發(fā)工具都打通了，IDE、大數(shù)據(jù)工具、調(diào)度流工具、日志檢索類工具等等全部都做到了開(kāi)箱即用。

　　五大產(chǎn)品線，星環(huán)瞄準(zhǔn)“人工智能”的會(huì)心一擊

　　如果大家留心觀察了星環(huán)的產(chǎn)品，就會(huì)發(fā)現(xiàn)原來(lái)大數(shù)據(jù)平臺(tái)TDH中的人工智能相關(guān)模塊在6.0版本中消失了。在5月3日的用戶大會(huì)上，星環(huán)宣布新增人工智能的產(chǎn)品線，并與云、大數(shù)據(jù)、數(shù)據(jù)庫(kù)、一體機(jī)共同組成五大產(chǎn)品線。為什么會(huì)開(kāi)辟人工智能產(chǎn)品線，這條產(chǎn)品線又如何與其它產(chǎn)品線相關(guān)聯(lián)呢?

　　“在幫助用戶打好數(shù)據(jù)基礎(chǔ)之后，我們發(fā)現(xiàn)還需要幫助用戶解決在人工智能方面的準(zhǔn)入門(mén)檻，這就是我們選擇開(kāi)辟人工智能產(chǎn)品線的初衷。”劉汪根這樣表示。據(jù)悉目前星環(huán)的人工智能產(chǎn)品線在做兩件事，一件是打造通用的工具，讓合作伙伴快速切入應(yīng)用，另一件是和合作伙伴共同打造垂直市場(chǎng)的人工智能解決方案。

　　星環(huán)人工智能產(chǎn)品線如何與其它產(chǎn)品線關(guān)聯(lián)呢?星環(huán)的研發(fā)體系是一個(gè)“中臺(tái)+前臺(tái)”的設(shè)計(jì)，就人工智能產(chǎn)品線而言，有一些產(chǎn)品是人工智能專有的，例如建模工具、模型篩選、應(yīng)用對(duì)接等等。但其底層開(kāi)發(fā)卻需要其他產(chǎn)品線的配合，例如基于Spark的計(jì)算引擎、基于TensorFlow的計(jì)算引擎、所有后臺(tái)、服務(wù)治理、技術(shù)軟件安全等等都是由中臺(tái)研發(fā)部門(mén)統(tǒng)一提供。這樣的研發(fā)體系設(shè)計(jì)使得星環(huán)不論是產(chǎn)品發(fā)布還是對(duì)于客戶業(yè)務(wù)需求的響應(yīng)速度都比之前快很多。

　　“Hadoop是對(duì)傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)的補(bǔ)充而非替代”，時(shí)至今日我已不再認(rèn)同

　　2006年，Apache Hadoop項(xiàng)目正式啟動(dòng)以支持MapReduce和HDFS的獨(dú)立發(fā)展，當(dāng)時(shí)甚至是在Hadoop發(fā)展了一段時(shí)間之后，很多人都稱“Hadoop是對(duì)傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)的補(bǔ)充而非替代。”時(shí)至今日，Hadoop應(yīng)用場(chǎng)景日益豐富，業(yè)內(nèi)專家是否還認(rèn)同這一觀點(diǎn)呢?

　　“我不是特別認(rèn)同這個(gè)觀點(diǎn)了”，劉汪根明確的表達(dá)自己的想法，“如果你只是使用開(kāi)源的Hadoop，那么很可能你并不能適用核心功能，所以只能是數(shù)據(jù)倉(cāng)庫(kù)的一個(gè)補(bǔ)充。但是當(dāng)我們通過(guò)數(shù)據(jù)多加工、支持高并發(fā)用戶訪問(wèn)、對(duì)接其它系統(tǒng)、復(fù)雜SQL業(yè)務(wù)、多種業(yè)務(wù)建模、低延時(shí)的復(fù)雜事件處理、海量數(shù)據(jù)的高速檢索等等建造了一個(gè)完備的系統(tǒng)時(shí)，Hadoop就不再只是傳統(tǒng)數(shù)倉(cāng)的補(bǔ)充，而是替代了。”

　　來(lái)源：IT168