logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

数据库分库分表(sharding)

分库分表(sharding)分库分表前的问题任何问题都是太大或者太小的问题,我们这里面对的数据量太大的问题。用户请求量太大因为单服务器TPS,内存,IO都是有限的。 解决方法:分散请求到多个服务器上; 其实用户请求和执行一个sql查询是本质是一样的,都是请求一个资源,只是用户请求还会经过网关,路由,http服务器等。单库太大单个数据库处理能力有限;单库所在服务器上磁盘空间不足;单库上操作的IO瓶颈

#数据库
深入剖析爬虫逆向中浏览器无限debugger解决方案

深入剖析爬虫逆向中浏览器无限deb2、禁用某处的端点定位到某一行,鼠标右击选择Never pause here3、条件断点此处设置i>64、中间人工具替换特征的字符串(fiddler,charles)5、重写无限debugger关键函数里面没有参杂一些其他逻辑的(在函数执行之前置空重写)6、(function(){}).constructor === Function是true的浏览器有效(

文章图片
#javascript#爬虫#python
ubuntu下hbase的搭建和依赖环境搭建以及相关操作

ubuntu从0安装HBase和HBase所依赖的环境的安装配置简单说三步走java环境的安装和配置hadoop安装和配置hbase安装和配置我的搭建环境ubuntu:18软件源阿里云java:openjdk version “1.8.0_252”Hadoop:hadoop-2.7.7Hbase:hbase-1.4.13由于后面需要安装openssh-server所以我在这里将软件源修改为国内的更

文章图片
#ubuntu#hbase#linux
物联网亿万级通信一站式解决方案EMQ

EMQ X 是开源社区中最流行的 MQTT 消息服务器。EMQ官网:https://www.emqx.cn/EMQ X 公司主要提供三个版本:开源版、企业版、平台版可在官网首页产品导航查看每一种产品;主要体现在支持的连接数量、产品功能和商业服务等方面的区别。**为什么选择EMQ X?**从支持 MQTT5.0、稳定性、扩展性、集群能力等方面考虑,EMQX 的表现应该是最好的。

文章图片
#物联网
开发者工具在爬虫精进时的必知必会

Source面板的使用Page:当前网站的资源目录面板Filesysterm:可以加载本地的文件,可以调试编辑相当于一个ideaOverrides:将远程的资源下载到本地,然后可以在开发者工具下惊醒编辑,并且开发者工具会更新展示编辑后的文件,可以将一些请求代理到本地的文件当中Content scripts:是Chrome插件加载的脚本Snippets:代码片段的工具添加条件断点Watch监控变量基

文章图片
#爬虫
vuex 结构图及vuex 核心概念和 API

vuex 结构图vuex 核心概念和 API1. statevuex 管理的状态对象它应该是唯一的const state = {xxx: initValue}2. mutations包含多个直接更新 state 的方法(回调函数)的对象谁来触发: action 中的 commit(‘mutation 名称’)只能包含同步的代码, 不能写异步代码const mutations = {yyy (sta

到底了