随着数据量和数据类型的不断增加，在一个平台上解决所有的数据问题已经成为许多企业的愿望。这也是大数据企业星环科技的初心。经过多年的自主研发和技术迭代，星环科技正在一步步将愿望变为现实。 在大数据赛道，星环科技是自研多模式异构大数据平台的代表。它曾被ICT研究所评为最富有的大数据产品制造商，它还构建了业界第一个基于容器化的大数据平台。 3月24日，星环科技召开线上发布会，带来全面升级的全系列产品，包括：Transwarp数据中枢(TDH)、Transwarp数据云(TDC)、关系型分布式数据库KunDB、ArgoDB、Transwarp Data Studio大数据开发与治理一站式平台、Transwarp Sophon人工智能平台。 “打造超高速引擎，让大数据平台一站式实现各种模型数据的超高速处理。”通过TDH和TDC两大核心产品，可以看出星环科技离初心越来越近了。 灵活的构建模块，玩转十大存储模型 关系型、非关系型、结构化、半结构化、非结构化……当数据类型越来越多的时候，对应的数据库类型也越来越多，每一种都只能解决一种数据问题。当多个数据库相互独立时，企业的数据管理将变得越来越复杂。 星空科技的多模异构大数据平台TDH就是为此而诞生的。经过8年的迭代，TDH已经成为企业的一站式数据基地。TDH的架构设计基于企业大数据的痛点，也成为了星环科技的差异化竞争力。 首先，存储计算是完全解耦的，哪里不够扩展。 传统数据库，每个存储都会适应自己的计算引擎。由于计算和存储高度耦合，接口独立，很难实现数据通信和关联。事实上，不同类型的数据，如冷数据和热数据，对计算和存储扩展的要求是不同的。 TDH将存储和计算完全解耦，实现“存储不足以扩展存储，计算不足以扩展计算”的资源按需分配。 自发布以来，TDH打造了五层架构，自下而上依次为：星环云操作系统、星环分布式数据管理系统、星环多模型异构存储引擎、星环分布式计算引擎、星环SQL编译器。每一层也是解耦的，这意味着每一层都可以独立扩展。 其次，一把钥匙开一把锁，专门的存储引擎处理特定的存储模型。 在IT技术领域，只有“术业有专攻”，才能实现性能和成本的最佳解决方案。例如，芯片领域正在经历从通用到专用的演变。越来越多的AI训练芯片、AI推理芯片、物联网芯片正在取代很多传统的通用芯片。 大数据基础软件领域也是如此。在这个版本中有三个新的引擎：键值存储引擎、事件存储引擎和时序存储引擎。最后，实现了8个异构存储引擎，以支持业界10种主流存储模式。企业可以按需灵活组合，就像搭积木一样。 第三，统一界面和计算引擎就像使用单个数据库一样简单。 虽然功能越来越强大，但对于客户交互的界面层，星环科技坚持简单易用。TDH提供了统一的编程语言SQL、统一的计算引擎、统一的存储管理系统和统一的资源调度系统。也就是说，在五层结构中，除了中间的存储引擎层是异构多样的，其他四层是统一的。而且，统一分布式计算引擎会自动匹配最合适的存储引擎，无需人工干预。 用星环科技创始人兼CEO孙元浩的话来说，TDH的这些特性可以让企业用户“易于开发、易于运维，同时保证最佳性能。” 比如，一家公司要创建企业级知识图谱，就需要整合不同部门的数据。传统模式有很多困难。例如，不同的 使用TDH，不同的数据库都建立在一个统一的平台上，不需要额外的数据导入和导出。而且通过统一的SQL接口，简化了不同部门不同项目的对接难度，降低了平台运维的复杂度，打破了不同部门之间的数据壁垒。 更强大的数据云，智能应用的沃土。 星环科技数据云的TDC主要是针对企业的私有化场景，相当于将星环科技在数据分析方面的能力作为云服务灵活地提供给外界。 传统云计算以物理资源为中心，基于虚拟化技术，而数据云TDC以数据为中心，基于容器化技术，更能满足企业快速灵活的业务拓展需求。 升级后的TDC底层构建在容器云平台上，开放了数据PaaS、分析PaaS、应用PaaS三种PaaS能力，支持企业更好地进行业务创新。 目前已有大量客户使用星环科技的TDC进行数字化改造。日均客流量超过150万人的郑州地铁就是其中之一。 通过TDC，郑州地铁搭建了大数据云平台一期。基于容器技术和微服务创新架构，郑州地铁实现了计算和网络资源的灵活分配和数据共享。郑州地铁还开放了所有数据的统一接口，实现了数据采集、分析和管理的一体化。 自2013年底运营以来，郑州地铁在全市公共交通中的份额已达45%，多年来积累了大量的客流信息数据。基于大数据云平台，郑州地铁可以挖掘数据价值，探索更多大数据和人工智能场景。 例如，郑州地铁借助TDC建设了智能客流预测系统，将企业内部生产数据与外部相关数据进行整合分析，实现数据赋能。同时打造视频智能分析系统，利用机器学习监测列车运行中的火花现象，提高了安全运营效率，降低了人力成本。 孙元浩介绍，“星环科技成立时有两个使命。首先是希望星环的智能数据引擎快如光速，所以公司取名为Transwarp。warp的意思是曲速，是所有科幻作品中最快的速度。二是搭建数据平台，实现数据全生命周期的管理，让企业不离开星环的平台，就可以处理各种类型的数据和各阶段的数据。” 有了简单清晰的技术架构来支撑复杂多变的用户场景，星环科技离这个目标越来越近了。 本文为“智能进化论”原创作品。智能进化理论专注于云计算和数字化转型领域的科技评论。