疫情常态化时期,夯实数字化基础支撑,提升企业数字化核心能力,将是企业应对不确定、动态环境的必然选择。3月24日,星环科技全新发布了企业级一站式大数据综合平台tdh 8.0版,专注于帮助企业级用户,快速搭建强大的数字底座,更智能、更全面、更便捷、更安全地运用数据,加速企业数字化转型。
星环科技坚持自主创新研发,保障系统安全可控,为用户提供大数据存储、大数据分析、实时计算、综合搜索、数据挖掘等基础能力,为企业建设数据湖、数据仓库、数据中台提供平台支撑,为企业数字化转型助力。
全新的tdh 8.0采用了领先的多模型技术架构和统一数据管理,支持8种存储引擎、10种存储模型,自动化应对多部门业务需求,能够支撑用户各种高阶的数据分析场景,帮助用户完成数据自动化管理,实现业务价值。
tdh 8.0采用了行业首创的5个层次的统一的多模型技术架构,包括了实时流处理引擎slipstream、关系型分析引擎inceptor、宽表数据库hyperbase、搜索引擎transwarp scope、地理空间数据库spacture、图数据库stellardb、时序数据库timelyre、键值数据库keybyte、事件存储transwarp event store、数据挖掘与机器学习平台sophon discover 10款核心产品,满足用户不同的应用场景的需求。同时配套manager、guardian、aquila、audit等工具,使tdh的安装、管理、开发、运维、升级便捷,给用户带来极致的体验。
独创的五层大数据平台架构
星环科技在tdh 8.0中首次采用了独创的五层大数据平台架构,其中最底层是贴合服务器硬件和操作系统的统一的资源调度层——星环云操作系统tcos。tcos针对多模型数据库的技术特点,优化了资源调度策略,提升了产品性能,为用户提供高性价比的凯发k8官网下载的解决方案。
尤其值得一提的是tcos 基于先进的云原生技术构建,适配了多种主流的cpu架构和多种操作系统,支持不同硬件、不同操作系统的服务器混合部署。在集群扩容时,客户不用担心新旧设备兼容性问题,资源利用率更高。
tcos之上是存储层。在存储管理层,星环开发了统一的分布式数据管理系统tddms,为不同存储引擎提供公共的存储管理服务,包括保障数据均匀分布、负载均衡等数据分片服务,多副本管理、数据一致性等数据高可用服务,以及数据平滑扩容缩容等服务。
在存储引擎层,tdh 8.0提供了8种独立的存储引擎,支持业界主流的10种存储模型。独立的存储引擎保障了不同存储模型的高性能。用户可以根据业务的需要,随时增减不同的存储引擎,做到资源按需分配。
存储层之上是计算层。tdh 8.0使用了星环科技自研的统一的分布式计算引擎transwarp nucleon核子,实现高性能跨模型计算。计算引擎能根据不同的存储引擎自动匹配高性能算法,无需用户手工干预,从而便捷地实现跨库关联,避免数据导入导出。
最上层是星环科技统一的sql编译器transwarp quark。tdh中的各个数据库产品遵从一致的sql规范。客户不会因为场景切换、数据库切换而造成接口、开发语言的切换而烦恼,开发人员学习成本低,开发的代码可移植性强,技术对接容易。
在架构上,tdh采用的存算解耦架构,可以构建服务于整个企业的统一数据资源库,让不同部门的数据间的隔阂彻底打破,使跨部门数据灵活调用拥有了技术支撑。用户可以根据业务的变动,按需创建新模型,按需申请计算和存储资源。任务的生命周期结束时,可以释放占用的计算和存储资源,回收到集群资源池中。
星环科技独创的存算完全解耦,为客户提供了存储能力和计算资源独立扩容的能力,带来高度弹性与资源利用率最大化,为用户提供最适合业务需要的资源配置。
八款异构存储引擎 同时支持10种存储模型
当今“单一模型数据库多个并用”模式面临诸多难题,如开发接口不统一,操作难度高,维护成本高,数据跨库关联困难,资源扩容缩容不灵活等。如何解决用户面临的这些问题,使得数据库能够进行跨部门、跨业务的数据统一存储与管理,实现多业务数据融合,支撑多样化的应用服务,成为企业用户大数据应用的重要需求。
去年5月星环科技tdh 7.0发布时,星环科技首次公开展示了“统一计算框架,统一数据管理,按需增减异构数据存储引擎的多模型数据平台架构”,不仅能解决企业用户面临的这些难题,还能在性能上超越“单一模型数据库多个并用”模式。
本次发布的tdh 8.0进一步完善了10种主流存储模型的兼容性,能够支撑用户各种挑战的、高阶的数据分析场景。
据悉,tdh 8.0通过8种独立的存储引擎,支持业界主流的10种存储模型。这8种存储引擎是:关系型数据存储引擎、宽表存储引擎、搜索引擎、地理空间存储引擎、图存储引擎、键值存储引擎、事件存储引擎和时序存储引擎。
用户可以根据业务的需要随时增减不同的存储引擎,做到资源按需分配。
四款大数据工具组件升级
tdh 8.0全面升级的四款大数据工具组件,让系统的安装部署、扩容升级、安全防卫、风险告警、权限管理等工作变得更便捷。
通过平台配套的transwarp manager 管理服务产品,用户只需通过几个手动步骤,就可以部署一个tdh集群。可视化的界面让tdh的安装、配置十分轻松。产品的健康检测、度量、监控、告警功能,也让集群的管理和运维变得简单、容易。同时,tdh 8.0适配了多种国产平台和操作系统,提升了节点通信安全性和可靠性,对图形界面做了改进,带给用户更好的使用体验。
transwarp guardian是tdh配套的安全管理产品。它保护集群免受恶意攻击和安全威胁,提供灵活安全的权限配置,并且可以对资源做细粒度的acl控制。在tdh 8.0版本中,transwarp guardian 新增了丰富的运行指标,优化了高并发权限查询性能,改善了信息的总体展示效果,用户能够更清晰、更直观地了解平台的潜在安全风险,从而及时做出相应的优化策略。
作为tdh平台中最常使用的组件,transwarp aquila智能运维产品,提供了监控仪表盘、告警通知、日志生命周期管理、日志检索、审计日志等多项功能,帮助运维人员从各个维度便捷的运维整个集群。tdh 8.0版本优化了告警策略和通知模板,新增了丰富的指标、日志和告警规则,加入了拓扑展示等高级运维功能。
tdh配套的一站式审计产品transwarp audit整合了大数据平台各节点中的监控信息,实现了对数据访问和操作的集中监控、查看和管理的智能化、可视化审计。在tdh 8.0版本丰富了审计规则,利用决策引擎判定安全风险,自动发现异常访问、越权操作等安全问题,并通过短信邮件推送到相关人员报备。
数据库和大数据技术融合发展大势所趋。星环新一代的多模型数据管理平台tdh 8.0应时而生,用简洁清晰的技术架构,支持纷繁复杂、千变万化的用户场景,在追求极致性能的同时,提供易开发、易运维的一站式服务,让用户通过便捷的接入的方式,友好的开发环境,轻松地搭建、开发、运维自己的数据平台和应用。