ElasticSearch数据备份与恢复最近线上业务ES日志量过于庞大, 达到500亿条(约30TB)记录，需要对旧的索引进行归档处理。用scan和scroll的方式导出备份基本是不可能的了, 本文主要是记录(Ubuntu环境)通过sshfs共享文件系统来进行快照方式备份数据。假设ES集群有三个节点:192.168.1.10192.168.1.11192.168.1.121. 创建共享目录

1.Caused by: java.lang.NoClassDefFoundError: scala/collection/GenTraversableOnce$class具体错误日志:Caused by: java.lang.NoClassDefFoundError: scala/collection/GenTraversableOnce$classat org.elasticsearc

最近经常碰到MySQL server has gone away和Lostconnection during query的问题。不定期发生的问题困扰了我好久。关于MySQL server has gone away，一般是由于在规定的时间(time_out)内如果没有任何操作的话，就会被MySQL强行关闭连接。我检查了脚本多出相关连接的地方，发现有些连接打开后，并没有直接进行数据的增删查

vscode中的python插件突然出了问题：在Ctrl+Shift+P后选择Python: Select Interpreter， vscode报了错误:command 'python.setInterpreter' not found联想到刚刚在系统中安装了conda, 猜测可能是这个问题造成的。排查后果然是这个原因，解决方法：菜单栏的文件 -> 首选项 -> 设置， 搜索...

活捉到一个有意思的项目：https://github.com/PavelDoGreat/WebGL-Fluid-Simulation除了webGL的功效，大神对于数学公式也是玩的6。啥都不说了，分享，学习。

同步的方法基本与多线程相同。 1) Lock当多个进程需要访问共享资源的时候，Lock可以用来避免访问的冲突。import multiprocessingimport sysdef worker_with(lock, f):with lock:fs = open(f,"a+")fs.write('Lock acqu

vscode中的python插件突然出了问题：在Ctrl+Shift+P后选择Python: Select Interpreter， vscode报了错误:command 'python.setInterpreter' not found联想到刚刚在系统中安装了conda, 猜测可能是这个问题造成的。排查后果然是这个原因，解决方法：菜单栏的文件 -> 首选项 -> 设置， 搜索...

Centos7下安装了jenkins, 却发现安装不了插件。jenkins安装插件失败Caused: javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.security.provider.certpath.SunCertPath

简单总结一下Ionic项目的手动打包与发布流程:typescript/angular/ionic的关系Typescript: 是javascript的超集，也即包含了javascript所有的元素，同时它也是面向对象编程语言；Angular: 除了AngularJs(1.0), 当前新版的angular是基于typescript构建的一个web前端框架；Ionic: Ionic默认是...

在开发阶段, 我们的前端和后端可能分别运行在同一台机器的不同端口或同一个局域网内的不同ip上, 前端访问后端api时就会碰到跨域的场景.这个时候我们可以通过在Augular中设置proxy来解决这个CrossDomain问题.当然在之后正式发布时, 一般通过后端web服务器(如nginx)或后端代码配置来实现跨域控制.以下是在Ionic/Angular中设置proxy代理的参考步骤:(1)...