logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

浅谈企业数字化转型之主数据管理系统(MDM)

搭建主数据管理系统,可以有效帮助企业建立统一的数据规范,建立统一的管理维护流程,将从不同来源提取的通用数据,分布在集团范围内的不同系统(例如,企业ERP、CRM、以及集团中的子公司使用的不同业务系统)之间的通用基础数据,分离出来,建立数据的单一可信版本,进行集中统一管理。将这些被分离出来的通用的主数据,MDM对其进行质量标准、管理标准、定义规则等统一等流程的管理,可实现集团范围内主数据平滑、一致,

文章图片
#大数据#人工智能#数据仓库 +1
从零训练一个小模型-nanoGPT 模型训练 (一)数据预处理

这篇文章介绍了如何通过nanoGPT项目入门大模型训练。从数据预处理开始讲解,详细说明了如何将莎士比亚文本转换为模型可处理的数字格式,包括字符编码、训练集/验证集划分、二进制文件保存等关键步骤。重点剖析了数据预处理的完整流程:从原始文本读取、字符编号映射,到最终生成训练所需的二进制数据文件。用通俗易懂的方式解释了tokenization的核心概念,对比了字符级和词片段级tokenization的区

#transformer
从零训练一个小模型-nanoGPT 模型训练 (二)参数配置内容

了解大模型训练工程中的配置管理部分,重点介绍了configurator.py和config/文件夹的作用。configurator.py负责参数读取规则,通过命令行参数覆盖默认配置,并进行参数校验和防呆设计。config/文件夹包含不同训练场景的配置模板,如train_shakespeare_char.py用于字符级模型训练,finetune_shakespeare.py用于微调,train_gp

#transformer
从零训练一个小模型-nanoGPT 模型训练 (二)参数配置内容

了解大模型训练工程中的配置管理部分,重点介绍了configurator.py和config/文件夹的作用。configurator.py负责参数读取规则,通过命令行参数覆盖默认配置,并进行参数校验和防呆设计。config/文件夹包含不同训练场景的配置模板,如train_shakespeare_char.py用于字符级模型训练,finetune_shakespeare.py用于微调,train_gp

#transformer
从零训练一个小模型-nanoGPT 模型训练 (一)数据预处理

这篇文章介绍了如何通过nanoGPT项目入门大模型训练。从数据预处理开始讲解,详细说明了如何将莎士比亚文本转换为模型可处理的数字格式,包括字符编码、训练集/验证集划分、二进制文件保存等关键步骤。重点剖析了数据预处理的完整流程:从原始文本读取、字符编号映射,到最终生成训练所需的二进制数据文件。用通俗易懂的方式解释了tokenization的核心概念,对比了字符级和词片段级tokenization的区

#transformer
AI 02 |RAG检索增强生成概念理解及技术实现

RAG(检索增强生成)技术通过结合检索与生成模型,模拟人类"查阅-理解-回答"的认知过程。其核心包含三个环节:1)Retrieval基于语义检索从知识库获取相关信息,使用嵌入模型和向量数据库实现高效搜索;2)Augmented对检索结果进行组织优化,通过提示工程和上下文构建增强生成质量;3)Generation由大语言模型基于增强上下文生成准确回答。RAG将静态知识库与动态生成

#人工智能#RAG#AI
AI 01| 通过实例理解Agent架构概念、及执行流程中涵盖的技术组件

摘要: 随着大语言模型(LLM)的发展,AI Agent(智能代理)已从传统决策单元升级为具备规划、记忆、工具调用等能力的自主系统。其核心架构包括:LLM模型(理解与推理)、记忆模块(短期对话+长期知识库)、规划模块(任务分解与动态调整)、工具调用(执行外部操作)及ReAct循环(行动-观察-优化)。典型应用场景涵盖个人助理、客服、金融分析等,但面临幻觉、效率、安全等挑战。未来,融合反思能力的Ag

#人工智能
AI绘画神器Midjourney教学解析

MidJourney是一款基于Discord平台的AI绘画工具,通过文字指令(Prompt)生成高质量图像。用户只需在Discord频道中输入"/imagine"加上描述词,即可获得AI创作的图片。该工具提供Upscale(提升分辨率)和Variation(生成变体)等优化功能,支持多种风格如吉卜力、新海诚等动漫风格。使用技巧包括拆解提示词为"基础描述+风格关键词+细

文章图片
#人工智能
到底了