星環(huán)科技作為國內(nèi)出色的基礎(chǔ)軟件廠商,致力于圍繞數(shù)據(jù)全生命周期為企業(yè)提供基礎(chǔ)軟件及支持。Transwarp Data Hub(后文統(tǒng)稱TDH)是星環(huán)科技自主研發(fā)的企業(yè)級(jí)一站式多模型數(shù)據(jù)管理平臺(tái)。
憑借星環(huán)科技創(chuàng)新的技術(shù)架構(gòu)和深厚的產(chǎn)品研發(fā)能力,自誕生以來,TDH平臺(tái)幫助數(shù)千家企業(yè)實(shí)現(xiàn)了對(duì)海量數(shù)據(jù)的統(tǒng)一管理與集群服務(wù)的統(tǒng)一運(yùn)維。通過構(gòu)建業(yè)內(nèi)極具特色的計(jì)算引擎與創(chuàng)新的系統(tǒng)架構(gòu)持續(xù)為用戶智能化管理以及開發(fā)數(shù)據(jù)賦能,大幅降低了綜合成本,實(shí)現(xiàn)了智能運(yùn)維、高效運(yùn)維的生效目標(biāo)。
基于星環(huán)極速大數(shù)據(jù)平臺(tái)構(gòu)建核心商業(yè)系統(tǒng),是企業(yè)實(shí)現(xiàn)一站式數(shù)字化轉(zhuǎn)型、加速業(yè)務(wù)創(chuàng)新的致勝關(guān)鍵。近期,星環(huán)科技發(fā)布了TDH8.1.0版本,相信很多企業(yè)級(jí)平臺(tái)的用戶對(duì)這款新產(chǎn)品非常感興趣。本文將從產(chǎn)品功能、特點(diǎn)以及最新版本的優(yōu)化幾個(gè)方面幫助您快速了解TDH8.1.0版本。
業(yè)務(wù)痛點(diǎn)
隨著信息技術(shù)和人類生產(chǎn)生活深度融合,全球數(shù)據(jù)呈現(xiàn)爆發(fā)增長、海量集聚的特點(diǎn)。各自獨(dú)立的大數(shù)據(jù)和數(shù)據(jù)庫產(chǎn)品如同一個(gè)個(gè)數(shù)據(jù)孤島,成為不同場(chǎng)景、項(xiàng)目、業(yè)務(wù)、部門間數(shù)據(jù)互通的壁壘。為了應(yīng)對(duì)業(yè)務(wù)部門的擴(kuò)張以及不可預(yù)測(cè)的需求變化,企業(yè)在進(jìn)行數(shù)據(jù)融合創(chuàng)新的時(shí)候,通常會(huì)針對(duì)不同的項(xiàng)目場(chǎng)景配備不同的數(shù)據(jù)模型。例如,時(shí)序數(shù)據(jù)、點(diǎn)邊圖數(shù)據(jù)、消息隊(duì)列等。
雖然引入不同的數(shù)據(jù)模型來解決不同場(chǎng)景的問題可以滿足大部分業(yè)務(wù)的需求,但是同時(shí)也會(huì)引發(fā)一系列的問題。例如,數(shù)據(jù)冗余、資源配置困難等。并且,引入多種數(shù)據(jù)模型的處理還意味著運(yùn)維人員需要熟練掌握每一款大數(shù)據(jù)產(chǎn)品的相關(guān)知識(shí),極大的增加了運(yùn)維壓力與學(xué)習(xí)成本。
此外,針對(duì)數(shù)據(jù)平臺(tái)的運(yùn)維通常會(huì)出現(xiàn)如下幾種情況:
1. 沒有統(tǒng)一運(yùn)維入口,傳統(tǒng)的查詢運(yùn)維難以完成指標(biāo)數(shù)據(jù)的可視化,易缺乏或遺漏關(guān)鍵監(jiān)測(cè)指標(biāo);
2. 由于日志格式非結(jié)構(gòu)化,海量日志的處理十分復(fù)雜,急需強(qiáng)大的搜索能力和聚合能力;
3. 數(shù)據(jù)碎片化、監(jiān)控對(duì)象顆粒度龐大的情況下,自動(dòng)化監(jiān)控實(shí)現(xiàn)渺茫,從而帶來故障發(fā)現(xiàn)的延時(shí),實(shí)時(shí)性無法保障。
為什么選擇TDH
為了避免數(shù)據(jù)異構(gòu)帶來的開發(fā)成本與運(yùn)維成本的劇增,TDH采用原創(chuàng)的分層架構(gòu)設(shè)計(jì)。其在多個(gè)模型基礎(chǔ)上使用統(tǒng)一的SQL引擎層、計(jì)算框架層、存儲(chǔ)管理層以及資源管理層,用戶無需訪問不同接口即可操作不同的數(shù)據(jù)模型。
原生支持多模型數(shù)據(jù)的計(jì)算框架加上全新開發(fā)的存算策略,TDH大數(shù)據(jù)管理平臺(tái)的多模數(shù)據(jù)方案可以有效的解決用戶因?yàn)閳?chǎng)景切換、數(shù)據(jù)庫切換而導(dǎo)致的接口、開發(fā)語言切換的問題,大幅度減少了大數(shù)據(jù)企業(yè)運(yùn)維團(tuán)隊(duì)的人力投入以及總成本。此外,TDH完全打通所有服務(wù)的監(jiān)控?cái)?shù)據(jù),使用統(tǒng)一的工具監(jiān)控。其覆蓋了大數(shù)據(jù)集群資源監(jiān)控、大數(shù)據(jù)組件監(jiān)控、智能告警通知、監(jiān)控儀表盤、自定義指標(biāo)采集、日志生命周期管理、權(quán)限管控等重點(diǎn)功能,為企業(yè)運(yùn)維團(tuán)隊(duì)提供一套完整的云上智能化運(yùn)維解決方案。
TDH極大程度的提升了業(yè)務(wù)部門、大數(shù)據(jù)開發(fā)部門、大數(shù)據(jù)運(yùn)維部門、數(shù)據(jù)分析部門以及領(lǐng)導(dǎo)層的使用體驗(yàn)。其支持?jǐn)?shù)據(jù)湖、數(shù)據(jù)倉庫、實(shí)時(shí)流處理、綜合搜索、人工智能等主流場(chǎng)景的大數(shù)據(jù)應(yīng)用開發(fā),實(shí)現(xiàn)全場(chǎng)景覆蓋;并且,TDH是業(yè)界SQL支持十分完善的平臺(tái),包括SQL 99/03、分布式事務(wù)、主流數(shù)據(jù)庫方言等等,充分實(shí)現(xiàn)傳統(tǒng)應(yīng)用的平滑遷移。
TDH 8.1.0全新特性為用戶帶來極致體驗(yàn)
一、全新重構(gòu)的頁面布局讓組件部署與管理更便捷、更高效
為了簡化多模型機(jī)構(gòu)的使用和運(yùn)維,TDH 8.1.0 創(chuàng)建了一個(gè)新的統(tǒng)一界面,通過引入集群-產(chǎn)品-服務(wù)這3層布局的方式,更深入的體現(xiàn)出多模型數(shù)據(jù)庫的業(yè)務(wù)價(jià)值。為了方便用戶查看并更高效的進(jìn)行組件部署,TDH8.1.0在較大集群中把同類型產(chǎn)品聚合展示,并圖形化展示多個(gè)組件之間的依賴關(guān)系,對(duì)集群運(yùn)維人員更加友好。
通過全套圖形化工具覆蓋數(shù)據(jù)集成、轉(zhuǎn)換、治理、建模和展現(xiàn)等全部開發(fā)環(huán)節(jié),極大程度地提升了大數(shù)據(jù)開發(fā)工程師的開發(fā)體驗(yàn)。
二、不停服、不中斷業(yè)務(wù)的集群升級(jí)方案支持,整體升級(jí)更加流暢穩(wěn)定
相比以往平臺(tái)升級(jí)期間需要關(guān)閉所有服務(wù)的要求,TDH 8.1.0 采用全新的系統(tǒng)架構(gòu),基于TCOS容器化集群操作系統(tǒng),強(qiáng)化了用戶在不停服、不中斷業(yè)務(wù)的情況下完成平臺(tái)的升級(jí)操作。整個(gè)升級(jí)過程時(shí)間更短、影響更小,操作更簡單。
并且,平臺(tái)中的所有分布式集群均實(shí)現(xiàn)了數(shù)據(jù)與服務(wù)的高可用,確保平臺(tái)健康穩(wěn)定運(yùn)行。TDH8.1.0 利用分布式系統(tǒng)的特點(diǎn),能夠在不中斷業(yè)務(wù)的基礎(chǔ)上平滑地完成系統(tǒng)服務(wù)升級(jí)以及實(shí)現(xiàn)了集群的動(dòng)態(tài)擴(kuò)容和縮容,即彈性擴(kuò)展等操作。
除此之外,TDH 8.1.0還提供平臺(tái)補(bǔ)丁功能,相對(duì)于整體升級(jí),做到了更輕量級(jí)、對(duì)業(yè)務(wù)無感知的在線維護(hù)。其提供平臺(tái)及產(chǎn)品升級(jí)維護(hù)統(tǒng)一操作入口,全流程一鍵完成。同時(shí),完整記錄平臺(tái)版本維護(hù)操作記錄,方便事后審計(jì)回溯,更加安全可控。
平臺(tái)補(bǔ)丁
三、全新自研的云原生操作系統(tǒng)支持更穩(wěn)定、更高效的超大集群管理
TDH 8.1.0持續(xù)為上層大數(shù)據(jù)業(yè)務(wù)容器化運(yùn)行以及應(yīng)用云端化提供關(guān)鍵保障。作為一站式多模型大數(shù)據(jù)管理平臺(tái),其采用全新自研的TCOS 2.1系統(tǒng),支持靈活、按需的進(jìn)行水平擴(kuò)展,支持異構(gòu)硬件(X86,ARM混合部署)、異構(gòu)操作系統(tǒng)的水平擴(kuò)展,支持單獨(dú)擴(kuò)展計(jì)算或存儲(chǔ)資源的水平擴(kuò)展。通過提供集群化部署管理功能,可以方便地安裝部署并管理規(guī)模高達(dá)數(shù)千節(jié)點(diǎn)的單個(gè)/多個(gè)大數(shù)據(jù)集群。
TDH8.1.0延續(xù)采用強(qiáng)大的存算解耦架構(gòu),結(jié)合多模型數(shù)據(jù)庫概念,使得業(yè)務(wù)的橫向擴(kuò)展、縱向延伸更具備靈活性。與之前版本相比,TDH8.1.0具有更靈活的資源彈性,更簡潔的操作和運(yùn)維,更低的總體擁有成本。
全面加強(qiáng)的產(chǎn)品核心功能
以下是TDH 8.1.0主要包含的核心功能與服務(wù):
一、一站式集群部署與管理,充分提升用戶使用體驗(yàn)
為了幫助用戶可以更加便捷地對(duì)大數(shù)據(jù)集群進(jìn)行管理,TDH 提供可視化、一鍵自動(dòng)部署的功能,極大的提升了用戶的使用體驗(yàn)感。同時(shí),通過添加、刪除節(jié)點(diǎn)、停止或啟動(dòng)角色服務(wù)等操作線性提高系統(tǒng)的處理能力。
為已有服務(wù)添加角色
此外,TDH支持對(duì)平臺(tái)的所有組件和服務(wù)進(jìn)行一站式以及可視化監(jiān)控、管理和優(yōu)化。TDH提供監(jiān)控、度量、告警、健康檢測(cè)、磁盤管理、軟件升級(jí)、服務(wù)遷移等功能,實(shí)現(xiàn)一站式集群管理。
二、多模型靈活調(diào)用,滿足各種數(shù)據(jù)分析需求
TDH 8.1.0通過8款異構(gòu)存儲(chǔ)引擎保障10種不同存儲(chǔ)模型的高性能,自動(dòng)化對(duì)應(yīng)多部門業(yè)務(wù)需求。用戶可以根據(jù)業(yè)務(wù)的需要,隨時(shí)增減不同的存儲(chǔ)引擎,做到資源按需分配。
TDH通過提供成套的產(chǎn)品組件與工具等來幫助企業(yè)對(duì)海量數(shù)據(jù)進(jìn)行統(tǒng)一管理,用戶可以通過對(duì)多組件進(jìn)行整合,實(shí)現(xiàn)對(duì)數(shù)據(jù)的快速集成。
三、全套智能運(yùn)維組件開箱即用,讓運(yùn)維穩(wěn)定無憂
基于多年以來在大數(shù)據(jù)運(yùn)維方面積累的豐富經(jīng)驗(yàn),星環(huán)科技發(fā)布的全新Aquila 1.7智能運(yùn)維分析工具支持Kerberos安全認(rèn)證,具備高安全性、高易用性的特點(diǎn),其解決了一些開源工具存在的潛在問題。例如,Ganglia的gmetad節(jié)點(diǎn)存在的High I/O問題可能導(dǎo)致業(yè)務(wù)性能受到影響。通過預(yù)置平臺(tái)豐富的運(yùn)維資源,用戶可以根據(jù)自身運(yùn)維場(chǎng)景來定制不同的運(yùn)維模塊組合,從而對(duì)大數(shù)據(jù)產(chǎn)品、微服務(wù)以及云平臺(tái)的運(yùn)維做到開箱即可用。同時(shí),Aquila還預(yù)置了基礎(chǔ)監(jiān)控、大數(shù)據(jù)監(jiān)控、PaaS層監(jiān)控等多維度的監(jiān)控資源,實(shí)現(xiàn)了整個(gè)TDH平臺(tái)各個(gè)維度的一鍵運(yùn)維,最大程度的提升用戶的使用體驗(yàn)感。
此外,Aquila提供預(yù)置的54個(gè)儀表盤, 110條告警規(guī)則,以及50多條日志搜索規(guī)則。用戶可以通過通用告警模板迅速按需創(chuàng)建多條告警規(guī)則,極大地提升了告警功能的易用性。
規(guī)則定制
通知設(shè)置
TDH平臺(tái)對(duì)碎片化的運(yùn)維數(shù)據(jù)進(jìn)行收集整理并實(shí)現(xiàn)了對(duì)各種指標(biāo)和系統(tǒng)運(yùn)行情況進(jìn)行全面監(jiān)控。其整合了集群健康狀態(tài)檢查,服務(wù)可用性檢查等多種狀態(tài)檢查機(jī)制,能夠及時(shí)發(fā)現(xiàn)異常,并告知集群運(yùn)維人員。此外,用戶還可以實(shí)時(shí)瀏覽各服務(wù)的狀態(tài),并且在告警出現(xiàn)時(shí)采取恰當(dāng)?shù)拇胧┮蕴幚響?yīng)對(duì)。服務(wù)的高可用方案可以避免業(yè)務(wù)出現(xiàn)中斷的情況。通過特色的預(yù)置儀表盤、靈活指標(biāo)采集策略、多樣的告警通知功能達(dá)到對(duì)所采集的運(yùn)維數(shù)據(jù)進(jìn)行事前預(yù)警、事中告警、事后分析的全階段運(yùn)維效果。
寫在最后
TDH8.1.0是星環(huán)科技自主研發(fā)的一站式多模型數(shù)據(jù)管理平臺(tái),采用了創(chuàng)新的多模型技術(shù)架構(gòu)和統(tǒng)一數(shù)據(jù)管理,可以構(gòu)建服務(wù)于整個(gè)企業(yè)的統(tǒng)一數(shù)據(jù)資源庫,讓不同部門的數(shù)據(jù)間的隔閡徹底打破,使跨部門數(shù)據(jù)靈活調(diào)用擁有了技術(shù)支撐,有效的降低了用戶的開發(fā)成本以及總運(yùn)維成本。通過8種異構(gòu)存儲(chǔ)引擎支持業(yè)界完善的10種存儲(chǔ)模型,自動(dòng)化應(yīng)對(duì)多部門業(yè)務(wù)需求,能夠支撐用戶各種高階的數(shù)據(jù)分析場(chǎng)景,幫助用戶完成數(shù)據(jù)自動(dòng)化管理,實(shí)現(xiàn)業(yè)務(wù)價(jià)值。
TDH 8.1.0充分利用極具特色的計(jì)算引擎與存儲(chǔ)模型,為用戶帶來計(jì)算與存儲(chǔ)的高度彈性的同時(shí),實(shí)現(xiàn)了平臺(tái)一站式資源配置和安全管控。一方面平臺(tái)根據(jù)集群資源情況,統(tǒng)一進(jìn)行各產(chǎn)品資源調(diào)度,總體提高集群的使用率;一方面平臺(tái)整體進(jìn)行安全管控,做到多個(gè)產(chǎn)品安全的無縫集成,整個(gè)集群更加安全。
以上就是 TDH 8.1.0 的整體介紹,TDH致力于幫助用戶實(shí)現(xiàn)數(shù)據(jù)全生命周期的管理。
免責(zé)聲明:以上內(nèi)容為本網(wǎng)站轉(zhuǎn)自其它媒體,相關(guān)信息僅為傳遞更多信息之目的,不代表本網(wǎng)觀點(diǎn),亦不代表本網(wǎng)站贊同其觀點(diǎn)或證實(shí)其內(nèi)容的真實(shí)性。如稿件版權(quán)單位或個(gè)人不想在本網(wǎng)發(fā)布,可與本網(wǎng)聯(lián)系,本網(wǎng)視情況可立即將其撤除。