疫情常态化时期,夯实数字化基础支撑,提升企业数字化核心能力,将是企业应对不确定、动态环境的必然选择。3月24日,星环科技全新发布了企业级一站式大数据综合平台TDH 8.0版,专注于帮助企业级用户,快速搭建强大的数字底座,更智能、更全面、更便捷、更安全地运用数据,加速企业数字化转型。
星环科技坚持自主创新研发,保障系统安全可控,为用户提供大数据存储、大数据分析、实时计算、综合搜索、数据挖掘等基础能力,为企业建设数据湖、数据仓库、数据中台提供平台支撑,为企业数字化转型助力。
全新的TDH 8.0采用了领先的多模型技术架构和统一数据管理,支持8种存储引擎、10种存储模型,自动化应对多部门业务需求,能够支撑用户各种高阶的数据分析场景,帮助用户完成数据自动化管理,实现业务价值。
TDH 8.0采用了行业首创的5个层次的统一的多模型技术架构,包括了实时流处理引擎Slipstream、关系型分析引擎Inceptor、宽表数据库Hyperbase、搜索引擎Transwarp Scope、地理空间数据库Spacture、图数据库StellarDB、时序数据库TimeLyre、键值数据库KeyByte、事件存储Transwarp Event Store、数据挖掘与机器学习平台Sophon Discover 10款核心产品,满足用户不同的应用场景的需求。同时配套Manager、Guardian、Aquila、Audit等工具,使TDH的安装、管理、开发、运维、升级便捷,给用户带来极致的体验。
独创的五层大数据平台架构
星环科技在TDH 8.0中首次采用了独创的五层大数据平台架构,其中最底层是贴合服务器硬件和操作系统的统一的资源调度层——星环云操作系统TCOS。TCOS针对多模型数据库的技术特点,优化了资源调度策略,提升了产品性能,为用户提供高性价比的解决方案。
尤其值得一提的是TCOS 基于先进的云原生技术构建,适配了多种主流的CPU架构和多种操作系统,支持不同硬件、不同操作系统的服务器混合部署。在集群扩容时,客户不用担心新旧设备兼容性问题,资源利用率更高。
TCOS之上是存储层。在存储管理层,星环开发了统一的分布式数据管理系统TDDMS,为不同存储引擎提供公共的存储管理服务,包括保障数据均匀分布、负载均衡等数据分片服务,多副本管理、数据一致性等数据高可用服务,以及数据平滑扩容缩容等服务。
在存储引擎层,TDH 8.0提供了8种独立的存储引擎,支持业界主流的10种存储模型。独立的存储引擎保障了不同存储模型的高性能。用户可以根据业务的需要,随时增减不同的存储引擎,做到资源按需分配。
存储层之上是计算层。TDH 8.0使用了星环科技自研的统一的分布式计算引擎Transwarp Nucleon核子,实现高性能跨模型计算。计算引擎能根据不同的存储引擎自动匹配高性能算法,无需用户手工干预,从而便捷地实现跨库关联,避免数据导入导出。
最上层是星环科技统一的SQL编译器Transwarp Quark。TDH中的各个数据库产品遵从一致的SQL规范。客户不会因为场景切换、数据库切换而造成接口、开发语言的切换而烦恼,开发人员学习成本低,开发的代码可移植性强,技术对接容易。
在架构上,TDH采用的存算解耦架构,可以构建服务于整个企业的统一数据资源库,让不同部门的数据间的隔阂彻底打破,使跨部门数据灵活调用拥有了技术支撑。用户可以根据业务的变动,按需创建新模型,按需申请计算和存储资源。任务的生命周期结束时,可以释放占用的计算和存储资源,回收到集群资源池中。
星环科技独创的存算完全解耦,为客户提供了存储能力和计算资源独立扩容的能力,带来高度弹性与资源利用率最大化,为用户提供最适合业务需要的资源配置。
八款异构存储引擎 同时支持10种存储模型
当今“单一模型数据库多个并用”模式面临诸多难题,如开发接口不统一,操作难度高,维护成本高,数据跨库关联困难,资源扩容缩容不灵活等。如何解决用户面临的这些问题,使得数据库能够进行跨部门、跨业务的数据统一存储与管理,实现多业务数据融合,支撑多样化的应用服务,成为企业用户大数据应用的重要需求。
去年5月星环科技TDH 7.0发布时,星环科技首次公开展示了“统一计算框架,统一数据管理,按需增减异构数据存储引擎的多模型数据平台架构”,不仅能解决企业用户面临的这些难题,还能在性能上超越“单一模型数据库多个并用”模式。
本次发布的TDH 8.0进一步完善了10种主流存储模型的兼容性,能够支撑用户各种挑战的、高阶的数据分析场景。
据悉,TDH 8.0通过8种独立的存储引擎,支持业界主流的10种存储模型。这8种存储引擎是:关系型数据存储引擎、宽表存储引擎、搜索引擎、地理空间存储引擎、图存储引擎、键值存储引擎、事件存储引擎和时序存储引擎。
用户可以根据业务的需要随时增减不同的存储引擎,做到资源按需分配。
四款大数据工具组件升级
TDH 8.0全面升级的四款大数据工具组件,让系统的安装部署、扩容升级、安全防卫、风险告警、权限管理等工作变得更便捷。
通过平台配套的Transwarp Manager 管理服务产品,用户只需通过几个手动步骤,就可以部署一个TDH集群。可视化的界面让TDH的安装、配置十分轻松。产品的健康检测、度量、监控、告警功能,也让集群的管理和运维变得简单、容易。同时,TDH 8.0适配了多种国产平台和操作系统,提升了节点通信安全性和可靠性,对图形界面做了改进,带给用户更好的使用体验。
Transwarp Guardian是TDH配套的安全管理产品。它保护集群免受恶意攻击和安全威胁,提供灵活安全的权限配置,并且可以对资源做细粒度的ACL控制。在TDH 8.0版本中,Transwarp Guardian 新增了丰富的运行指标,优化了高并发权限查询性能,改善了信息的总体展示效果,用户能够更清晰、更直观地了解平台的潜在安全风险,从而及时做出相应的优化策略。
作为TDH平台中最常使用的组件,Transwarp Aquila智能运维产品,提供了监控仪表盘、告警通知、日志生命周期管理、日志检索、审计日志等多项功能,帮助运维人员从各个维度便捷的运维整个集群。TDH 8.0版本优化了告警策略和通知模板,新增了丰富的指标、日志和告警规则,加入了拓扑展示等高级运维功能。
TDH配套的一站式审计产品Transwarp Audit整合了大数据平台各节点中的监控信息,实现了对数据访问和操作的集中监控、查看和管理的智能化、可视化审计。在TDH 8.0版本丰富了审计规则,利用决策引擎判定安全风险,自动发现异常访问、越权操作等安全问题,并通过短信邮件推送到相关人员报备。
数据库和大数据技术融合发展大势所趋。星环新一代的多模型数据管理平台TDH 8.0应时而生,用简洁清晰的技术架构,支持纷繁复杂、千变万化的用户场景,在追求极致性能的同时,提供易开发、易运维的一站式服务,让用户通过便捷的接入的方式,友好的开发环境,轻松地搭建、开发、运维自己的数据平台和应用。
(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )