logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

吴恩达强化学习复盘(12)近似Q函数|绝对贪婪策略

近似 Q 函数(Approximate Q - function)是强化学习中的一个重要概念。在强化学习中,智能体通过与环境进行交互来学习最优策略,以最大化长期累积奖励。Q 函数(也称为动作价值函数)表示在某个状态下采取某个动作后,智能体预期能获得的长期累积奖励。然而,在许多实际问题中,由于状态空间和动作空间可能非常大甚至是连续的,直接存储和计算每个状态 - 动作对的 Q 值是不现实的。因此,需要

文章图片
#人工智能
吴恩达强化学习复盘(13)小批量化和软更新(复盘完结)

小批量化是指在强化学习算法中,将经验样本(例如状态、动作、奖励等)分成小的批次,然后使用这些小批次来更新模型参数,而不是每次只使用一个样本进行更新。是一种用于提高学习效率和稳定性的技术。在强化学习中,软更新(Soft Update)是一种用于更新模型参数的技术,它与传统的硬更新(Hard Update)相对。软更新是指在每次学习步骤中,以较小的幅度将目标网络的参数向当前网络的参数进行更新。具体来说

文章图片
#人工智能
从明码 CSV 到 AES 加密 TXT:Cocos3.8 游戏数据加密实践

文章摘要: 本文探讨了Cocos3.8小游戏开发中的数据存储安全方案。作者初期使用明码CSV存储存在篡改风险,尝试二进制存储时遇到跨平台兼容问题,最终采用AES加密+TXT文件的折衷方案。思路代码Node.js,在游戏运行时解密使用,兼顾安全性与开发效率。最终代码使用c# winform

文章图片
#cocos2d
多模态大模型的新进展-空间超感知与预测性感知的尝试

多模态大模型的新进展-纽约大学和斯坦福大学提出的"空间超感知"范式通过四个递进阶段(语义感知、流式事件认知、隐式3D空间认知和预测性世界建模)突破现有框架限制。研究团队构建的VSI-SUPER基准测试显示,传统模型在长时空间回忆和持续空间计数任务中准确率极低。而基于预测性感知范式的新方法,通过预测下一帧特征、量化"意外度"和智能记忆管理,在120分钟视频任务

文章图片
#人工智能
Nest.js基础-4:Nest.js,游戏服务器,微服务架构

NestJS适合开发中小型、弱战斗、高IO的游戏服务器,如棋牌、休闲联机等场景。它原生支持WebSocket,具备强工程化能力(TypeScript+模块化),性能够满足数千并发连接。但NestJS不适合大型MMO或强实时战斗游戏的核心服务器开发,因其单线程架构无法满足CPU密集型任务和毫秒级延迟需求。建议将NestJS用于网关、逻辑服和外围服务(如账号、商城),而将核心战斗服务交给Go/C++实

文章图片
#node.js#typescript#游戏
Nest.js基础-5:关于Docker的简单概述

本文介绍了Docker和Docker Compose在游戏服务器开发中的应用。作者通过Node.js游戏服务器+Redis+MySQL的项目示例,展示了Docker的核心概念:镜像(Image)作为安装包,容器(Container)作为运行实例。重点讲解了Docker Compose如何简化多容器管理,通过一个配置文件(docker-compose.yml)即可一键启动整个后端环境,实现服务间的自

文章图片
#docker#typescript#node.js
多模态大模型的新进展-空间超感知与预测性感知的尝试

多模态大模型的新进展-纽约大学和斯坦福大学提出的"空间超感知"范式通过四个递进阶段(语义感知、流式事件认知、隐式3D空间认知和预测性世界建模)突破现有框架限制。研究团队构建的VSI-SUPER基准测试显示,传统模型在长时空间回忆和持续空间计数任务中准确率极低。而基于预测性感知范式的新方法,通过预测下一帧特征、量化"意外度"和智能记忆管理,在120分钟视频任务

文章图片
#人工智能
Node.js游戏服务器项目移植 4-MongoDB的移植

我的开发环境是老版本的win10,一开始安装的mongodb社区版的8.3版本,结果经常报1053错误无法启动mongod服务。查了半天结果要么改到版本6,要么升级win10,我实在不愿意改操作系统开发的时候降到版本6.反正API大体上是没变化的。核心层做了一个nodejs队mongodb通信的封装,而DBManager是在这个核心层进一步的二次封装,用来管理MongoDB 游戏数据库

文章图片
#node.js#游戏#mongodb
Node.js游戏服务器项目移植 5-唯一 ID 生成方案

本文针对游戏后端业务中需要区间内不重复数字ID的场景,提出了三种ID生成方案:1)轻量级随机ID生成器RandomIds,适用于小量临时ID;2)预洗牌内存ID池ForcedRandomIds,适合中等量级内存随机ID;3)磁盘持久化ID池IdsPool,支持海量ID且服务重启不丢失。文章详细分析了各方案的实现原理、适用场景及优缺点,并提供了源码示例和选型建议。其中RandomIds简单但性能受限

文章图片
#node.js#游戏
Node.js游戏服务器项目移植 6-轻量化Token登录概述

本文介绍了基于Express框架的轻量级邮箱登录系统设计方案。系统采用Token无状态认证方案,使用MongoDB存储用户数据,通过UUID生成唯一Token和用户ID,实现自动注册登录功能。文章详细阐述了系统架构、设计思路和功能实现,包括基础服务配置、数据库连接封装、工具方法设计以及核心接口实现(邮箱自动登录、测试登录、独立注册等)。同时指出了当前方案的局限性(内存缓存、无过期机制等),并提出了

文章图片
#node.js#游戏#服务器
    共 62 条
  • 1
  • 2
  • 3
  • 7
  • 请选择