opencompass使用自定义接口和自定义数据集进行评测

本次应用的目的是拿nginx做服务器的负载均衡，而且提供的服务已用docker进行部署，该docker提供访问的端口有两个，分别对应不同的服务。因此首先需要查看docker映射的端口，然后通过修改upsteam，location，proxy三个模块达到目的。1.查看docker服务映射的端口netstat -ltunp #查看端口如上图所示，本机的docker服务端口是...

前言，最近在搞大量数据插入MySQL的时候悲催的发现速度越来越慢，因为我的数据来多个源，使用流式更新，而且产品要求在这个表里面不能有数据重复，划重点！衡量数据是否重复的字段是文本内容，字段类型是text，…那么问题来了，如何在千万级数据量实现去重插入呢？而且要快！自杀式做法1.管它重复不重复，先插入了再说2.使用group by 先对不能重复的字段进行分组，在用一个having coun...