logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

38.红黑树(王道第7章查找补充知识)

红黑树是二叉排序树-左子树结点值≤根结点值≤右子树结点值。①每个结点或是红色,或是黑色的②根节点是黑色的③叶结点(外部结点、NULL结点、失败结点)均是黑色的④不存在两个相邻的红结点(即红结点的父节点和孩子结点均是黑色)⑤对每个结点,从该节点到任一叶结点的简单路径上,所含黑结点的数目相同struct RBnode { //红黑树的结点定义int key;//关键字的值//父节点指针//左孩子指针/

文章图片
#数据结构#算法#c语言 +1
字节面试题:激活函数选择对模型梯度传播的影响

激活函数公式对梯度反向传播的影响主要问题极易导致梯度消失(导数在饱和区趋近于0)梯度消失,计算慢ReLU有效缓解梯度消失(正区间导数为1),加速收敛Dying ReLU(负区间导数为0)缓解梯度消失,同时避免了Dying ReLU(负区间有微小梯度)需要选择或学习 $\alpha$Swish/Mish平滑地门控信息流,梯度传播特性优异,在许多前沿模型中表现最佳计算成本稍高激活函数通过其导数$g'(

#机器学习#算法#人工智能
DPO论文阅读:Direct Preference Optimization:Your Language Model is Secretly a Reward Model

本文提出了一种名为​​直接偏好优化(DPO)​​ 的新方法,用于训练大型语言模型(LMs)以更好地对齐人类偏好。传统方法如基于人类反馈的强化学习(RLHF)涉及两个复杂步骤:先拟合奖励模型,再通过强化学习(如PPO算法)优化策略。但RLHF过程不稳定、计算成本高,且需要大量调参。DPO则颠覆了这一流程:它通过数学映射将奖励模型参数化,使最优策略能以​​闭式解​​直接提取,仅用简单的二元交叉熵损失函

文章图片
#语言模型#人工智能#自然语言处理
字节面试手撕题:版本号排序

为了对版本号进行排序,我们需要将每个版本号字符串转换为整数元组,然后根据这些元组进行排序。其基本思想是选择一个基准元素,将数组分为两部分:小于基准的部分和大于基准的部分,然后递归地对这两部分进行排序。给定版本号:version = ["1.5.1", "1.45.0", "1.99.99", "3.3.3.3", "1.5", "6"]:利用Python元组的自然排序机制,逐个比较每个部分的值。:

#面试
目标检测中的标签分配算法总结

标签分配是目标检测训练的关键步骤,决定了模型学习什么。从基于固定规则(IoU阈值)->基于统计(ATSS)->动态分配(PAA, OTA/SimOTA, TOOD)是标签分配算法的主要演进方向。动态分配算法是当前主流和前沿,它利用模型预测信息动态地为每个真实目标选择最合适的正样本(通常要求分类置信度高且定位准确),显著提升了检测性能。选择哪种标签分配算法取决于具体的检测框架(Anchor-base

#人工智能
Python中的相对路径/ ./ ../详细解析

Python中的相对路径/ ./ ../详细解析,带具体例子

#python
图像二值化阈值调整——OTSU算法(大津法/最大类间方差法)

图像二值化阈值调整——OTSU算法(大津法/最大类间方差法)

文章图片
#算法
8.2 对比学习的损失函数

类别代表损失核心思想负样本需求距离对比直接优化样本对距离需要InfoNCE将正样本从噪声中分类需要聚类一致性SwAV通过聚类分配实现一致性隐含特征预测预测另一视图特征,防止坍塌不需要排序排序正负样本相似度需要随着自监督学习的发展,损失函数逐渐从显式负样本对比转向隐式负样本或无负样本设计,但 InfoNCE 仍然是当前最主流的形式。

#机器学习#算法
大模型 Agent(智能体)技术简介

大模型 Agent 技术标志着 AI 从“智能助手”迈向“自主智能体”的范式转变。它通过赋予 LLM规划、记忆、工具调用和反思能力,使其能够像人类一样理解目标、制定策略、执行行动并完成复杂任务。尽管面临可靠性、安全性和效率等挑战,Agent 已在自动化、科研、机器人等领域展现出革命性潜力,是通往通用人工智能(AGI)的关键路径之一。随着技术的成熟,未来我们将看到更多能独立解决问题、甚至主动创造价值

#语言模型
    共 127 条
  • 1
  • 2
  • 3
  • 13
  • 请选择