logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Alluxio Enterprise AI 3.5 发布,全面提升AI模型训练性能

近日,Alluxio 发布 Alluxio Enterprise AI 3.5 版本。该版本凭借仅缓存写入模式 ( Cache Only Write Mode )、高级缓存管理策略以及 Python 的深度集成等创新功能,大幅加速 AI 模型训练并简化基础设施运维,助力企业高效处理海量数据集、优化 AI 工作负载性能。

文章图片
#人工智能
InfoWorld文章丨将数据编排技术用于AI模型训练

人工智能(AI)和机器学习工作负载依赖大型数据集,并且对数据吞吐量有较高的要求,两者都可以通过优化数据工作流来实现。

文章图片
#人工智能#机器学习#big data
案例分享|Alluxio在自动驾驶模型训练中的应用与部署

杨林三-辉羲智能辉羲智能致力打造创新车载智能计算平台,提供高阶智能驾驶芯片、易用开放工具链及全栈自动驾驶解决方案,运用独创性“数据闭环定义芯片”方法学,助力车企构建低成本、大规模和自动化迭代能力,实现优质高效的自动驾驶量产交付,引领数据驱动时代的高阶智慧出行。创业公司中,如何使用Alluxio?从0-1使用 Alluxio 的过程(调研-部署-上生产)。实践经验分享。《 Alluxio 在自动驾驶

文章图片
#自动驾驶#人工智能#机器学习 +1
听Alluxio小姐姐讲述:Alluxio云上K8S部署如何加速深度学习训练

在2021 Alluxio Day V 中,Alluxio核心研发工程师 邱璐,为我们带来[Alluxio云上K8S部署如何加速深度学习训练]的分享邱璐 毕业于乔治华盛顿大学数据科学专业,有多年开源社区贡献经验,2018年加入Alluxio 团队,主要负责Alluxio与公有云场景的结合,分布式系统选举机制,日志管理,监控系统,机器学习场景下的数据供给研究开发。·以下为邱璐在本次大会中的演讲实录·

文章图片
#深度学习#pytorch#tensorflow +1
实录分享 | 使用Prometheus和Grafana监控Alluxio运行状况

在Grafana中,我们可以使用Prometheus采集的数据,用PromQL筛选出所需的数据,在Web UI界面可绘制种类丰富的图像,如折线图、柱状图、热图等。Prometheus 是一个开源的完整监控解决方案,其对传统监控系统的测试和告警模型进行了彻底的颠覆,形成了基于中央化的规则计算、统一分析和告警新模型。Prometheus 是一个开源的完整监控解决方案,其对传统监控系统的测试和告警模型进

文章图片
#大数据#prometheus#grafana
高达99.57%GPU利用率,Alluxio在MLPerf Storage v2.0基准测试中展现卓越性能

最新的 MLPerf Storage v2.0 测试结果显示,Alluxio 通过分布式缓存技术大幅加速了 AI 训练和 checkpointing 工作负载的 I/O 性能,在多种常见的由于 I/O 瓶颈导致 GPU 利用率不足的场景中,成功将 GPU 利用率提升至 99.57%。

#人工智能#缓存#机器学习 +2
对比速览 | Alluxio 企业版 v.s. 社区版

当前诸多企业面临着日益增长的数据量和复杂的数据管理挑战。特别是在模型训练的过程中,诸如GPU短缺、GPU利用率不高等问题已经成为许多企业在技术实施中面临的挑战。同时,大数据分析中跨云数据访问速度慢、成本高等问题也给企业带来了痛点。为了应对这些挑战,企业们积极寻求更便捷的数据管理和模型训练加速解决方案。Alluxio企业版提供了针对商业级需求的增强功能和支持。企业版不仅仅是Alluxio社区版的延伸

文章图片
#人工智能#云计算#缓存 +1
案例分享|Alluxio在自动驾驶模型训练中的应用与部署

杨林三-辉羲智能辉羲智能致力打造创新车载智能计算平台,提供高阶智能驾驶芯片、易用开放工具链及全栈自动驾驶解决方案,运用独创性“数据闭环定义芯片”方法学,助力车企构建低成本、大规模和自动化迭代能力,实现优质高效的自动驾驶量产交付,引领数据驱动时代的高阶智慧出行。创业公司中,如何使用Alluxio?从0-1使用 Alluxio 的过程(调研-部署-上生产)。实践经验分享。《 Alluxio 在自动驾驶

文章图片
#自动驾驶#人工智能#机器学习 +1
Alluxio Enterprise AI 3.6发布|加速模型分发、优化checkpoint写入并增强多租户支持

Alluxio Enterprise AI 3.6加速模型分发、优化checkpoint写入并增强多租户支持

#人工智能
突破大模型 | Alluxio助力AI大模型训练-成功案例(一)

其实从 2022 年的下半年我们就开始调研 Alluxio 了,但是因为种种原因,中途搁置了一段时间,导致 Alluxio 推迟到今年才上线。在我们调研与上线的过程中,Alluxio 社区是我们最强大的外援,为我们提供了海量的帮助。本次我们在算法场景对 Alluxio 小试牛刀,取得的结果令人十分惊喜。从性能上讲,在算法模型上线的场景,我们将 UnionStore 用 Alluxio 替换后,最高

文章图片
#人工智能#云计算#GPU
    共 25 条
  • 1
  • 2
  • 3
  • 请选择