“智能湖仓”让数据流动更高效

2021-07-22 05:56石菲
中国信息化 2021年7期
关键词:数据源数据服务数据仓库

石菲

你知道吗?现在每个小时产生的数据比过去二十年的数据总和还要多。

随着数据价值的逐渐飙升,数据分析需求越来越大。如果可以让数据分析师和数据科学家在同一个数据存储中对数据进行操作,不仅可以为数据治理带来更多便利,还可以快速提升数据使用效率,让企业更早享受到数字化转型的成果。

作为较早出海的制造企业,TCL在海外推广服务时就遇到了数据孤岛问题。在将IoT设备日志、设备埋点、售后等7个不同数据源的数据汇入Amazon S3为中心的数据湖后,不仅消除了数据孤岛,确保了数据和业务系统的互联互通,让海外业务与国内业务实现了数据统一。

之前需要一周才能完成的复杂数据报表,现在仅需要1-2小时。TCL每天运行300个以上的作业产生 200多个BI报表,为运营和数字化营销提供了有力支撑。

另一家企业的收益更加直观,启元世界(北京)信息技术服务有限公司是一家人工智能平台公司,以SaaS的形式,为国内多家知名的游戏公司提供虚拟玩家陪玩、游戏商品推荐、关卡数值设计、游戏内容生成等服务。在使用了亚马逊云科技全栈的数据分析服务后,在商品推荐领域实现了收入增长50%以上,用户投诉下降了70%。

这两个例子应用的都是亚马逊云科技“智能湖仓”架构搭建的解决方案,亚马逊云科技“智能湖仓”架构将全面而深入的数据服务无缝集成,打通了数据湖和数据仓库之间的数据移动和访问,并且进一步实现了数据在数据湖、数据仓库,以及在数据查询、数据分析、机器学习等各类专门构建的服务之间按需移动,从而形成统一且连续的整體,满足客户各种实际业务场景下的不同需求。亚马逊云科技“智能湖仓”架构具有灵活扩展、专门构建、数据融合、深度智能和开源开放五大特点,涵盖数据源、数据摄取层、存储层、目录层、数据处理层和消费层六层架构,可帮助客户轻松应对海量业务数据,充分挖掘数据价值。

亚马逊云科技大中华区云服务产品部总经理顾凡表示,“大数据对于现代商业的影响不言而喻。用户期盼从数据中获得洞察,但同时也面临数据存储、处理和分析等方面的诸多挑战,例如数据指数级增长、数据来源不一、数据类型多元化等等。面对细分的应用场景,目前市面上单一、通用的数据解决方案在性能上会有所妥协,很难满足客户的真实需求,用户亟需融合了易用、易扩展、高性能、专门构建、安全及智能等特性于一体的新一代数据管理架构。亚马逊云科技‘智能湖仓架构在打通数据湖和数据仓库的基础上,进一步将各种数据服务无缝集成,确保数据在不同服务之间顺畅流动,致力于帮助客户尽可能最大程度地提高其数据价值,加速创新,并成为数据驱动型组织。”

“智能湖仓”可以让数据在不同存储和分析应用中高效流动,降低了机器学习的门槛,让数据价值更快释放,助力企业快速迈向数字世界。

猜你喜欢
数据源数据服务数据仓库
基于数据仓库的数据倾斜解决方案研究
大数据环境下高校图书馆数据馆员建设研究
图表中的交互 数据钻取还能这么用
公共图书馆流通外包管理研究
数据仓库系统设计与实现
基于Excel的照片查询系统开发与应用
再谈利用邮件合并功能批量生成准考证
数据有增加 图表自适应
胜利油田智慧社区建设研究
数据复用在存储数据仓库中的运用