logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

指定位置安装conda虚拟环境或者包

前言配置环境一直都是一个头疼的事,docker的出现可以说是极大的方便了程序狗配置环境的痛苦,只需要配置一次,就可以永久使用,岂不是美哉但存在一个问题就是,当我们编译好dockerfile文件,使用镜像一段时间后,开始一个新的项目时,往往需要一些新的python包或者需要新建一个canda虚拟环境,这个时候你可以申请一个容器后正常操作需要的包或者环境,但当这个容器生命周期一结束,下次重新申请一..

多模态大模型的发展、挑战与应用

随着 AlexNet [1] 的出现,过去十年里深度学习得到了快速的发展,而卷积神经网络也从 AlexNet 逐步发展到了 VGG [2]、ResNet [3]、DenseNet [4]、HRNet [5] 等更深的网络结构。研究者们发现,网络越深模型的性能越好。然而,经过多年的发展,研究者们逐渐触碰到了卷积神经网络的极限,而其规模也只发展到了千万到亿的数量级,例如 ResNet-152 的参数量

#多模态
北大和华为诺亚联合提出的一种时间感知的视频多模态大模型TimeChat(CVPR 2024)

本工作提出了TimeChat,一个专为长视频理解而设计的时间感知型多模态大型语言模型。我们的模型结合了两个关键的架构创新:(1) 一个时间戳感知的帧编码器,它将每个帧的视觉内容与时间戳绑定;(2) 一个滑动视频Q-Former,它产生不同长度的视频标记序列以适应不同时长的视频。此外,我们构建了一个包含6个任务和总共125K实例的指令调整数据集,以进一步提升TimeChat的指令跟随性能。实验结果在

文章图片
dockerfile之vllm大模型镜像构建

基础镜像:nvidia/cuda:11.8.0-devel-ubuntu22.04。

#python#docker
深入理解流形约束超连接(Manifold-Constrained Hyper-Connections)

这里的数据都是以文中的OLMo-1B(n=4)为代表进行说明的参数量上:不管是静态HC还是动态HC,增加参数量均可忽略不计:针对一个1B的模型,静态HC增加的参数量约为0.00007%,而动态HC也仅为0.03%左右。计算复杂度上:无论静态还是动态超连接,引入的额外 FLOPs 均可忽略不计:针对一个1B的模型,静态HC增加的计算量约为0.127%,而动态HC也仅为0.2%左右。针对一个1B的模型

文章图片
#神经网络
支持10K长视频理解的多模态大模型MovieChat(CVPR 2024)

最近,将视频基础模型和大型语言模型结合起来构建视频理解系统可以克服特定预定义视觉任务的限制。然而,现有的系统只能处理很少帧数的视频。对于长视频,计算复杂性、内存成本和长期时间连接带来了额外的挑战。利用Atkinson-Shiffrin记忆模型,将Transformers中的tokens作为记忆载体,并结合我们特别设计的记忆机制,我们提出了MovieChat来克服这些挑战。

文章图片
Python OpenCV 利用DNN模块进行目标检测,语义分割和风格转换

前言本文不介绍具体的原理,只展示Python下利用OpenCV的DNN模块进行自然图像下的目标检测,语义分割和风格转换OpenCV下的测试只能是进行推理过程,也就是网络的前向过程,而不能进行网络的训练目前OpenCV支持Caffe,TensorFlow,PyTorch,DarkNet,ONNX等多个框架,一些常用的深度卷积神经网络结构也支持,使用起来简单,非常方便(图片从《OpenCV深度学习应用

#python#opencv#dnn +1
深入理解流形约束超连接(Manifold-Constrained Hyper-Connections)

这里的数据都是以文中的OLMo-1B(n=4)为代表进行说明的参数量上:不管是静态HC还是动态HC,增加参数量均可忽略不计:针对一个1B的模型,静态HC增加的参数量约为0.00007%,而动态HC也仅为0.03%左右。计算复杂度上:无论静态还是动态超连接,引入的额外 FLOPs 均可忽略不计:针对一个1B的模型,静态HC增加的计算量约为0.127%,而动态HC也仅为0.2%左右。针对一个1B的模型

文章图片
#神经网络
Python OpenCV 利用DNN模块进行目标检测,语义分割和风格转换

前言本文不介绍具体的原理,只展示Python下利用OpenCV的DNN模块进行自然图像下的目标检测,语义分割和风格转换OpenCV下的测试只能是进行推理过程,也就是网络的前向过程,而不能进行网络的训练目前OpenCV支持Caffe,TensorFlow,PyTorch,DarkNet,ONNX等多个框架,一些常用的深度卷积神经网络结构也支持,使用起来简单,非常方便(图片从《OpenCV深度学习应用

#python#opencv#dnn +1
OpenCV函数imread报错:未定义标识符 "IMREAD_GRAYSCALE"、"IMREAD_UNCHANGED"、"IMREAD_COLOR"

在OpenCV中使用imread函数时,除了第一个参数外(第一个参数是指定需要读取的图片的路径和图片名),我们还可以指定一个参数,常用的就是"IMREAD_UNCHANGED"、"IMREAD_GRAYSCALE"、"IMREAD_COLOR"三个属性了1)"IMREAD_UNCHANGED"指定用图片的原来格式打开,

    共 21 条
  • 1
  • 2
  • 3
  • 请选择