华为云数智融合计算服务｜数据+AI，助力业务成功

华为云数智融合计算服务DataArts Fabric是华为云提供的数据+AI一站式开发平台，提供从数据处理、分析到模型微调、推理、部署上线的全生命周期管理能力，让数据工程师、数据科学家、AI应用开发工程师等多角色使用自己最熟悉的工具，在同一个工作台上工作，实现从开发到生产的高效协同。DataArts Fabric可实现自动扩缩，以支持最苛刻的应用程序。根据应用程序的需求以细粒度增量扩展资源，与为峰值负载预置资源池的服务相比，可为客户节省高达50%的成本。

DataArts Fabric基于Serverless资源池，让数据和AI的多种工作负载共池、CPU和NPU异构资源共池、开发和生产共池，变革客户的资源投资方式，实现在离线混部、训推一体，帮助客户削峰填谷，提升资源使用率。它提供极致体验，客户无需管理集群，零资源门槛启动开发和生产任务，使客户在快速变化的业务中，低成本试错。

DataArts Fabric提供高性能、高可靠、低时延、低成本的海量存储系统，与华为云的大数据服务组合使用，可大幅度降低成本，帮助企业简单快捷地管理大数据。

1.SQL引擎

DataArts Fabric提供分布式SQL引擎，实现了元数据服务、计算、缓存和存储的分层解耦和弹性，让每一层动态分配资源而不会影响另一层的性能或可用性。语句级别的弹性扩缩、高性能分布式分析引擎可帮助您在几秒钟内查询TB级别数据，在几分钟内查询PB级别数据。

2.分布式Ray

DataArts Fabric支持分布式计算框架Ray，来帮助客户解决规模日益增大的数据处理和机器学习/深度学习任务对分布式计算的问题，也为数据工程和机器学习工程提供统一的完整Workflow。DataArts Fabric Ray支持Ray-Data、Ray-Train、Ray-Serve模块，分别满足分布式数据预处理、分布式训练、分布式模型推理服务的应用场景。

3.异构资源管理

DataArts Fabric支持CPU+NPU资源统一纳管、统一资源分配；资源调度粒度支持容器级和Actor级，并且支持安全沙箱来实现资源隔离、可靠容错。

4.多语义缓存加速

DataArts Fabric提供跨引擎、多模态、多语义加速，例如数据缓存、模型缓存、CheckPoint缓存。

高可靠、高安全，按需使用

1.Data+AI

• 资源管理：支持CPU+NPU；
• AI计算：支持AI计算+数仓+大数据；
• 管理作业调度：数据和AI团队不再相互等待；
• 数据管理：无需OBS中转。

2.Serverless 低成本使用体验

• 按需使用：有业务请求才启动资源，秒级启动业务，秒级弹性伸缩；
• 硬件适配：自动匹配最优硬件，无需在繁多的Flavor机型中做出选择；
• 高可靠：强化的高可靠，多AZ，多Cell架构；
• 高安全：强化的高安全，数据隔离，网络隔离，算力隔离，作业隔离。

3.开源生态

• 基于昇腾生态提供开源Ray的能力，并在开源Ray的能力上提供Redis高可靠。
• Ray dashboard提供可视化监控、故障排查、性能调优以及管理应用运行情况。
• SQL基于开放湖仓生态，支持ORC、Parquet、Iceberg等数据格式。

数据+AI多应用场景全覆盖，助力业务成功

1.数据工程

高效处理大规模数据，通过并行计算加速数据处理过程，如数据清洗、转换和聚合。

2.分布式机器学习

Ray支持分布式训练和调优，可以用于处理大规模数据集和模型，使得模型训练更加高效。

3.实时湖仓

提供标准SQL接口，用户仅需使用SQL便可实现海量数据分析。

注：本文素材来自华为云，版权归作者所有