logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

关于反爬虫的一些总结

1、爬取过程中的302重定向在爬取某个网站速度过快或者发出的请求过多的时候,网站会向你所在的客户端发送一个链接,需要你去验证图片。我在爬链家和拉钩网的过程中就曾经遇到过:对于302重定向的问题,是由于抓取速度过快引起网络流量异常,服务器识别出是机器发送的请求,于是将请求返回链接定到某一特定链接,大多是验证图片或空链接。在这种时候,既然已经被识别出来了,就使用

Rsync使用非ssh默认端口从远程服务器同步文件到本地

rsync -avreH --progress '-e ssh -p Port' root@remoteip:/remotepath/ /localpath/比如rsync -avreH --progress '-e ssh -p 1001' root@222.222.222.222:/data/backup/ ./

windows需要关闭的大量读写硬盘的服务

众所周知,现在PC的瓶颈在硬盘。尤其是机械硬盘,io非常有限。但是,微软自作聪明的很多服务在大量的读写磁盘,如果是机械硬盘会造成系统卡顿,如果是固态硬盘,则会造成硬盘寿命的缩减。superfetch服务。我们打开资源监视器,会发现一个叫做svchost(LocalSystemNetworkRestricted)的东西大量读写虚拟缓存,把整个io吃满了。没错,这就是微软自作聪明的预读服务。本来是想通

#windows
error: ‘std::memset’ has not been declared问题的解放办法

error: ‘std::memchr’ is not a member of ‘std’error: ‘std::sprintf’ has not been declarederror: ‘std::strcmp’ has not been declarederror: ‘std::strlen’ has not been declarederror: ‘std::memcpy’ has

No implementation found for native 以及 java.lang.UnsatisfiedLinkError问题解决一例

05-09 01:36:35.029: I/dalvikvm-heap(766): Grow heap (frag case) to 8.971MB for 1228816-byte allocation05-09 01:36:35.368: D/dalvikvm(766): GC_CONCURRENT freed 1K, 4% free 9116K/9479K, paused 6ms+5ms

利用Xen设计虚拟机器

利用Xen设计虚拟机器切换解析度为800x600最近更新日期:2008/09/09我们常常讲,最好将不同的伺服器架设在不同的主机硬体上面,也就是说,每部主机所负责的任务越简单越好,如此一来不但可以减少主机debug的时程,也能够简化安装与设计主机的架构。但是,每个服务一部主机对于小企业或者是个体户来说,光是放置主机的空间、电源、以及后续的管理问题,就会导致一堆困扰的

使用Vmware安装CentOS作为web开发机实践

1.准备软件下载vmware 11。不附加地址了。百度即可,有永久激活的key。下载CentOS,这里使用CentOS 6.2。下面是一个镜像的achieve。http://archive.kernel.org/centos-vault/6.2/isos/x86_64/这里用的镜像是 CentOS-6.2-x86_64-minimal.iso2.在Vmware中建立虚拟机新建虚拟

OpenStack 企业私有云的若干需求(3):多租户和租户间隔离(multi-tenancy and isolation)

原文链接  :http://www.cnblogs.com/sammyliu/p/5269831.html本系列会介绍OpenStack 企业私有云的几个需求:自动扩展(Auto-scaling)支持多租户和租户隔离 (multi-tenancy and tenancy isolation)混合云(Hybrid cloud)支持主流硬件支持、云快速交付 和 SLA 保证大规模扩

emulator: ERROR: Unable to load VM from snapshot.解决方法

通过虚拟机运行一个应用时,出现:emulator: ERROR: Unable to load VM from snapshot. The snapshot has been saved for a different hardware configuration.解决方法是将AVD的快照(Snapshot)删除,具体操作步骤:1.打开AVD编辑详情:Eclipse->Windows->A

Ubuntu 12.10 安装运行 Office 2010

在Ubuntu上安装运行office一直是一个头痛的问题,目前比较好的解决方案一个是永中office,一个是正在开发的wps for linux,还有一个deepin论坛中的wine office2003。这个wine 的office版本比较老,而且功能比较简单。在Ubuntu 12.10上安装运行Microsoft Office 2010,大家肯定猜测到使用wine。顺便一提最近wine

    共 22 条
  • 1
  • 2
  • 3
  • 请选择