一、前言最近需要获取微信小程序上的数据进行分析处理，第一时间想到的方式就是采用python爬虫爬取数据，尝试后发现诸多问题，比如无法获取目标网址、解析网址中存在指定参数的不确定性、加密问题等等，经过一番尝试，终于使用 Charles 抓取到指定微信小程序中的数据，本文进行记录并总结。环境配置：电脑：Windows10，连接有线网手机：iPhone Xr，连接无线网注：有线网与...

记一次生产redis序列化与反序列化问题org.springframework.data.redis.serializer.SerializationException: Cannot deserialize; nested exception is org.springframework.core.serializer.support.SerializationFailedException:

错误信息One of the configured repositories failed (unknown),and yum doesn't have enough cached data to continue. At this point the onlysafe thing yum can do is fail. There are a few ways to work "...

前言1.下载 CentOS-7-x86_64-Minimal-2003 安装包。下载地址。此安装包是以最小系统的形式安装。2.默认安装完成后，可以直接ping通外网，如www.baidu.com等。若采用DVD版本的安装包，安装后需要额外设置网络，本人之前采用 CentOS-7-x86_64-DVD-2003 此版本安装后，无法ping通外网，几乎所有网上设置centos7网络的方案都尝试了一遍均

错误前端上传文件，后端方法中 @RequestParam("file") MultipartFile file 方法接收报错。原因刷新页面的请求地址是：http://localhost:8080/uploadImage，后台中上传文件的映射地址（action="/uploadImage"）也是 /uploadImage，刚打开上传页面 uploadImage.html 刷新时的请求并非...

代码提测时，在Linux中的日志中出现如下错误：2019-07-05 19:10:59 ERROR [freemarker.runtime:60] - Error executing FreeMarker templateFreeMarker template error:The following has evaluated to null or missing:==> err...

一、背景介绍近期有需求需要抓取微信小程序中的数据分析，与一般的网页爬虫类似，主要目标是获取主要的URL地址进行数据爬取，而问题的关键在于如何获取移动端request请求后https加密的参数。本文从最初的抓包到获取URL、解析参数、数据分析及入库等，一步步进行微信小程序的数据爬取。此次爬取的目标是微信小程序“财神股票”中的已受理科创版公司名单数据，如下：注：抓包、分析、爬取等全过...

一、前言从0构建AI推荐系统好久没继续深入研究了，一方面因为工作较忙，另一方面在准备task任务系列，从0开始一步步完成简单框架的搭建与应用。最近看到一篇文件介绍电影推荐系统，感觉非常有意思，抽半天的时间动手实践了一下，本文记录学习电影推荐系统的全过程。本文完整代码已经上传至GitHub：简单的电影推荐系统。二、相关环境介绍编程语言：python编辑器：pycharm第三方...

介绍一款MySQL官方自带的测试数据集合。数据级别最多达百万级，如下，但是数据结构相对简单，列数较少，适合练手。介绍地址见github：https://github.com/datacharmer/test_db打包下载下来就是一个约35M左右的zip文件，解压后文件如下：注：该测试数据主要通过employees.sql来完成数据录入。employees.sql中包含建表、构建视图、导入资源文件（

一、前言从0构建AI推荐系统好久没继续深入研究了，一方面因为工作较忙，另一方面在准备task任务系列，从0开始一步步完成简单框架的搭建与应用。最近看到一篇文件介绍电影推荐系统，感觉非常有意思，抽半天的时间动手实践了一下，本文记录学习电影推荐系统的全过程。本文完整代码已经上传至GitHub：简单的电影推荐系统。二、相关环境介绍编程语言：python编辑器：pycharm第三方...