原文作者：逖靖寒的世界原文地址：分布式实时统计系统--RAINBIRD最近Twitter开发了一款分布式实时统计系统Rainbird。Rainbird可以用于实时数据的统计：统计网站中每一个页面，域名的点击次数内部系统的运行监控（统计被监控服务器的运行状态）记录最大值和最小值性能要求作为大型网站的分布式应用，需要具备以下性能：极高的写入性能，可以达到100,000的WPS非常高的读取性能，可以达到

因为postgres用docker镜像安装，所以host不需要安装pg，只需要安装客户端sudo apt-get install -y postgresql-clientpostgres+postGIS使用https://github.com/appropriate/docker-postgis 有各种版本组合，目前使用 pg11 + pGIS 2.5把3个文件放到1个文件夹里我这里是./mach

原文作者：？？?原文地址：idea新工具Big Data Tools安装Big Data Tools插件为了连接hadoop集群，可以在上面操作hdfs，方便好用。1、首先下载Big Data Tools插件在idea右边工具栏点击Big Data Tools。也可以在这里找到。点击OK就可以了...

前情介绍：在自动化测试框架中，数据驱动的意思是指定的是测试用例或者说测试套件是由外部数据集合来驱动的框架。数据集合（也可称之为数据来源）可以是任何类型的数据文件比如xls，xlsx，csv等等，甚至可以是数据库中的表。总之，是一个放数据的地方就对了。核心思想就是数据和测试代码分离，即使当测试数据发生大量变化的情况下测试代码（或者说测试用例）可以保持不变。最常见的例子是需要用多个不同的账号和密码来登

线上环境出现问题，由于某数据上报接口的大量请求，导致rabbitmq的消息队列中Ready消息超过300W条，rabbitmq挂掉一、信息确认确认线上数据库配置线上数据库几主几从，多少个分库数据库配置文件须和线上保持一致（bin_log）数据库容量应和线上环境一致确认服务器是否有第三方系统依赖最大多少个线程生产消息和最大多少个线程消费消息确认线上并发数据线上最大TPS线上最大线程数二、业务逻辑客户

下载地址 ：https://jenkins.io/zh/download/由于用dmg安装包去安装jenkins，Jenkins不会用本地的用户去构建，任何创建的文件都是“jenkins”用户所有，这会造成很多权限问题，无法调用自己写的脚本，执行shell会出现没有权限的错误这里直接下载war包, 不要下载Mac OS X,下载完成的到jenkins.war文件执行命令：java -jar /Us

目录一、算法测试1、模型评估2、鲁棒性 (robustness)3、模型安全4、响应速度二、业务测试三、白盒测试四、模型监控五、算法测试学习入门一、算法测试1、模型评估如何评估模型？可以通过泛化能力。泛化能力指的是学习方法对未知数据的预测能力。就好比运动员平时都是在训练场进行训练，而评估运动员的真实实力要看在大赛中的表现。我们实际希望的，是在新样本上能表现得很好的学习器，为了达到这个目的，应该从训

xxx

原文作者：归来朝歌原文地址：logstash之Input插件1、stdin标准输入和stdout标准输出Logsrtash含有两个非常重要的基础插件，input与output；首先执行命令：bin/logstash -e 'input { stdin { } } output { stdout { codec=> rubydebug } }'程序启动之后输入：hello logstash2、

原文作者：实时流式计算原文地址：从霍普金大学数据错误谈谈如何保证实时计算数据准确性作为全球新冠疫情数据的实时统计的权威，约翰斯·霍普金斯大学的实时数据一直是大家实时关注的，也是各大媒体的主要数据来源。在今天早上的相当一段长的时间，霍普金斯大学的全球疫情分布大屏中显示，全球确诊人数已经突破200万。有图有真相随后相关媒体也进行了转发，不过这个数据明显波动太大，随后该网站也修改了数据约翰斯·霍普金斯大