logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

蓝牙(2):BR/EDR的连接过程;查询(发现)=》寻呼(连接)=》安全建立=》认证=》pair成功;类比WiFi连接过程。

BR/EDR 流程:查询(发现)=》寻呼(连接)=》安全建立=》认证=》pair成功查询(发现)流程Inquiry (discovering),类比WiFi的probe request/response寻呼(连接)流程Paging (connecting),类比WiFi的association request/response。连接模式,connected mode。物理连接已经建立,可以进行ke

文章图片
谷歌十诫 Ten things we know to be true, Google‘s Core values

1. Focus on the user and all else will follow.以用户为中心,其他一切都会随之而来。2. It’s best to do one thing really, really well.最好真正、真正地把一件事做好。3. Fast is better than slow.快比慢好。6. You can make money without doing evi

文章图片
Transformer模型-数据预处理,训练,推理(预测)的简明介绍

Transformer模型-数据预处理,训练,推理(预测)的简明介绍。在继续探讨之前,假定已经对各个模块的功能有了充分的了解,我们从头梳理一遍流程。

文章图片
#transformer#深度学习#人工智能 +1
Transformer模型-encoder编码器,padding填充,source mask填充掩码的简明介绍

encoder编码器层是对之前文章中提到的子层的封装。它接收位置嵌入的序列,并将其通过多头注意力机制和位置感知前馈网络。在每个子层之后,它执行残差连接和层归一化。因为要循环n次,所以封装到一起就比较方便。为了充分利用多头注意力子层的优势,输入标记会先通过一堆编码器层,然后再传递给解码器。这在文章开头的图片中用Nx表示,而上面的图片展示了这些堆叠的编码器如何将其输出传递给解码器层,这将在下一篇文章中

文章图片
#transformer#深度学习#人工智能 +1
Transformer模型-Feed Forward前馈网络,MLP和Relu激活函数的简明介绍:即2个线性层,中间通过Relu()连接。

位置感知Position-Wise前馈网络(FFN)由两个全连接层(fully connected dense layers,就是线性层(Linear Layer),或密集层(Dense Layer))组成,或者也可以称为多层感知机(MLP:multi-layer perceptron)。在层与层之间,使用ReLU激活函数,即max(0, X)。任何大于0的值保持不变,而任何小于或等于0的值都将变

文章图片
#transformer#深度学习#pytorch +2
Excel使用技巧:函数技巧:tab选择函数,Ctrl+A 可以弹出 “函数参数”窗口;if+AND 一起使用来判断结果

Excel使用技巧:函数技巧:tab选择函数,Ctrl+A 可以弹出 “函数参数”窗口;if+AND 一起使用来判断结果

文章图片
Transformer模型-线性层(Linear Layer),全连接层(Fully Connected Layer)或密集层(Dense Layer)的简明介绍:通过训练得出最佳拟合线

线性层(Linear Layer)是神经网络中的一种基本层,也被称为全连接层(Fully Connected Layer)或密集层(Dense Layer)。线性层在神经网络中起到的作用是对输入数据进行线性变换。线性层的基本操作可以表示为:(y) 是输出向量。(W) 是权重矩阵,其中的每个元素都是可学习的参数。(x) 是输入向量。(b) 是偏置向量,也是一个可学习的参数。线性层会对输入数据 (x)

文章图片
#transformer#深度学习#pytorch +2
实测有效:Win11右键直接显示所有选项,默认“显示更多”的设置教程!

典型的产品经理和工程部门为了制造工作内容(业绩)而做的垃圾功能,要不然没事儿干就得layoff。win11真是喜欢做这种出力不讨好的,浪费人力物力做些垃圾功能,比如右键菜单。windows键 -> cmd 以管理员身份运行 ->

文章图片
#产品经理#运维
一篇搞清楚M.2,NGFF,mSATA, NVMe,SSD固态硬盘,WiFi网卡等。

总结:M.2是个物理接口的SPEC,既支持mSATA 固态硬盘,也支持基于PCIE的NVMe,WIFI网卡等。避坑指南:因为M.2比较灵活,所以配置很多。比如有些移动硬盘芯片只支持新NVME,而不支持mSATA。虽然2种接口都可以插上,但是mSATA不支持。所以一定要认准自己的设备型号购买。

文章图片
人工智能论文GPT-3(3):2020.5 Language Models are Few-Shot Learners;架构;训练数据集;开源

自GPT-3问世以来,OpenAI对于其技术实现的细节采取了相当谨慎的态度,仅仅以大致的框架进行了介绍。随着时间的推移,OpenAI似乎变得更为封闭而非开放,这也正是马斯克对OpenAI提出批评的核心所在。现在,我们普遍认识到,虽然许多模型都基于Transformer架构,但各家在应用上的方法却大相径庭。在这场竞赛中,OpenAI已经取得了显著的领先地位,其他公司只能奋力追赶。面对这种压力,一些公

文章图片
#人工智能#gpt-3#语言模型 +3
    共 11 条
  • 1
  • 2
  • 请选择