华为云dataarts fabric:数据+ai 一站式开发平台

你还在纠结硬件选择吗?数据工程师是不是又在为CPU和NPU的调度发愁?不用担心,华为云DataArts Fabric给大家带来了全新的解决方案。它可以把开发和生产放在同一个工作台上,让数据科学家、AI工程师还有数据开发人员都用自己最顺手的工具,一边干一边交流,不再互相等待。华为云给这个平台加上了Serverless功能,你不需要操心集群维护,也不用为了挑Flavor型号纠结,只要有业务请求,资源就能秒级启动。它还提供了50%的成本节省方案,根据你的实际需求细粒度地扩展资源,比那种预先备足峰值负载的方式划算太多。 这个平台能让你把CPU和NPU的算力合在一起用,也能让数据和AI的任务混在一个池子里跑。为了保证安全可靠,它还用安全沙箱把资源隔离开来。在这里你还能享受跨引擎的多语义加速缓存服务,比如数据缓存、模型缓存或者CheckPoint缓存,让运行速度更快更稳。 它的分布式SQL引擎可以快速查询PB级别的数据,只需几秒钟就能把TB数据搞定。它还提供了分布式Ray框架来处理大规模的数据和机器学习任务,甚至还有异构资源管理功能让CPU和NPU统一调度。它支持开放湖仓生态里的ORC、Parquet、Iceberg这些格式,也能兼容华为自家的OBS存储系统。 华为云给它打造了一个极致的使用体验:你不需要管理集群,也不需要在繁多的Flavor机型里做选择。它会自动匹配最优硬件,让你的任务跑得又快又稳。为了让你放心使用,它采用了多AZ、多Cell的高可靠架构,还做了数据隔离和网络隔离保障安全。 这个服务把AI计算和数仓结合起来了,还提供了Ray-Data、Ray-Train、Ray-Serve这些模块来满足分布式预处理、训练和推理的场景需求。无论是实时湖仓分析还是海量数据分析都能搞定,不管是在离线混部还是训推一体都能胜任。这样就能帮助企业大幅度降低成本,提升资源的使用率和效率。 它支持把作业调度给数据和AI团队共同管理,不需要再通过OBS中转数据了。这就实现了从数据处理到模型微调再到推理部署的全生命周期管理能力。 华为云把这些技术融入到了数据+AI一站式开发平台中,给企业提供了简单快捷管理大数据的能力。它让你可以在快速变化的业务中低成本试错,不用担心高额的硬件投资风险。这种变革性的资源投资方式真正帮助客户削峰填谷提升了资源利用率。