logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

ModelScope+Transformers+SwanLab实现Qwen-1.5-7b的指令微调任务

利用ModelScope+Transformers+SwanLab高效实现Qwen-1.5-7b的指令微调任务,以支持文本分类任务

文章图片
#人工智能#机器学习#深度学习 +2
Qwen-1.5-7b指令微调实战:SwanLab可视化训练

Qwen1.5是通义千问开源模型的1.5版本,以Qwen-1.5作为基座大模型,通过指令微调的方式实现高准确率的文本分类是学习大语言模型微调的入门级任务。在这篇文章我将带大家使用swanlab、modelscope、transformers 、datasets、peft、accelerate六个开源工具,完成从数据集准备、代码编写、可视化训练的全过程

文章图片
#人工智能#机器学习#自然语言处理
上下文工程+“ChatGPT Pulse”,字节开源 MineContext

摘要:字节跳动Viking团队开源发布MineContext——主动式上下文感知AI伙伴,帮助用户高效管理信息。它通过无负担收集、主动推送和智能浮现三大功能,实现信息的自动整理与精准呈现,解决信息过载、知识孤岛等问题。支持多模态信息收集,所有数据本地存储保障隐私安全。项目采用Apache 2.0协议开源,欢迎开发者参与共建。未来将增强多端适配、创作能力等方向持续进化,并计划开源OpenContex

文章图片
Qwen-1.5-7b指令微调实战:SwanLab可视化训练

Qwen1.5是通义千问开源模型的1.5版本,以Qwen-1.5作为基座大模型,通过指令微调的方式实现高准确率的文本分类是学习大语言模型微调的入门级任务。在这篇文章我将带大家使用swanlab、modelscope、transformers 、datasets、peft、accelerate六个开源工具,完成从数据集准备、代码编写、可视化训练的全过程

文章图片
#人工智能#机器学习#自然语言处理
到底了