
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
国产GPU替代英伟达面临"纸面参数强,真实业务弱"的尴尬现状。文章提出"三层Benchmark体系"评测方法:1)MicroBenchmark检测硬件极限性能;2)MacroBenchmark评估框架适配与算子支持;3)End-to-EndBenchmark验证业务场景下的稳定性与效率。评测重点不在跑分,而在发现硬件在真实业务中的瓶颈与风险,为商业决策提供依

自动驾驶算法训练面临多模态数据处理瓶颈:传统方法在图像和LiDAR点云的异构数据加载、预处理及融合环节效率低下。本文提出平台级优化方案:1)采用NIXL实现SSD到GPU的零拷贝直传,IO等待降低85%;2)利用CUDA/Triton重写核心算子,点云体素化耗时从30ms降至2ms;3)开发FlashBEV融合算子,相比PyTorch实现提速40倍且显存占用减少90%。最终在消费级GPU上实现专业

通过整合Kubernetes、Kubeflow和PyTorch分布式训练技术栈,我们构建了一个高度自动化、可扩展、高效的自动驾驶数据闭环MLOps平台。系统引入了联邦学习和在线学习等高效数据处理技术,支持多模态模型和大规模分布式训练,并通过形式化验证和对抗样本测试等严格安全验证框架保障模型质量。这一技术栈不仅缩短了模型迭代周期,还通过严格的评估和监控确保了安全性与可靠性,成为自动驾驶领域MLOps

Scrapy是一个快速的、高层次的web爬虫框架,用于抓取web站点并从页面中提取结构化的数据。本文综述了Scrapy的架构、运作流程、项目结构、核心概念,以及中间件的使用。通过腾讯工作项目实战案例,展示了Scrapy在爬虫项目中的应用,包括创建项目、编写Spider、使用Item Pipeline处理数据等关键步骤,是爬虫开发者的实用指南。

扩散模型资源汇总包括以下内容:Awesome-Diffusion-Models:涵盖图像生成、医学成像、强化学习等应用的资源集合。视频生成、编辑、恢复等:最新扩散模型列表。图像处理综述:恢复、增强、编码、质量评估等。图扩散生成:论文、代码和数据集。

摘要:Databricks的Photon引擎是一款革命性的矢量化查询引擎,专为大数据处理优化。它采用C++编写,通过矢量化执行显著提升SQL查询性能(最高12倍加速),同时降低80%的总拥有成本。Photon兼容现有Spark API,无需代码修改即可实现性能飞跃,支持Delta/Parquet表处理各类工作负载。其核心技术包括SIMD优化、自适应执行和高效内存管理,在TPC-H基准测试中平均提速

摘要:KimiLinear模型开创性采用线性注意力机制,在5.7T Token训练下实现推理速度6倍提升,性能超越传统Transformer。模型首创KDA架构,通过Delta Rule改进确保梯度稳定,并创新性地用时间衰减核函数替代RoPE位置编码。该突破不仅验证了线性注意力的潜力,更提供了大模型训练实践范本。核心开发者张宇分享的关键经验包括:采用渐进式扩展策略、重视"内科"

2024年3月,我参与了某新能源车企“自动驾驶数据标注平台V3.0”的重构与研发工作,在项目中担任系统架构师,负责总体架构设计、服务拆分、核心组件选型和关键链路治理。该平台面向自动驾驶感知算法训练,主要处理摄像头图像、激光雷达点云、多传感器融合帧、轨迹片段和场景标签等数据,支撑数据导入、任务分发、人工标注、模型预标注、质检审核、数据集发布和训练回流等业务。旧平台采用单体架构,存在模块耦合高、任务调

摘要:本文分享了某大型科技公司"企业级AIGC能力中台"的安全架构设计经验。作为系统架构师,我主导设计了基于零信任理念的安全体系,重点解决API密钥泄露、数据越权访问等核心问题。针对传统静态APIKey管理混乱问题,采用OAuth2.0动态令牌机制;针对RAG场景的数据越权,创新性地将权限控制下沉到向量检索阶段,通过元数据注入和预计算过滤实现细粒度控制。项目最终建成日均2000

本文以某新能源车企自动驾驶云平台重构项目为例,阐述了云原生架构下的可靠性设计方案。针对50万辆在线车辆并发连接、数据丢失及任务积压等问题,项目采用Kubernetes云原生架构,通过三层设计实现系统高可靠:基础设施层利用Kubernetes自愈能力和KEDA事件驱动弹性伸缩应对高并发;应用层通过Sentinel实现核心链路熔断降级;验证层采用ChaosMesh进行混沌测试。最终平台日均处理10PB








