logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

【精华】数据库分库分表(sharding)系列

转别人一个关于数据库分表的专栏系统,写的很好数据库Sharding的基本思想和切分策略关于垂直切分Vertical Sharding的粒度数据库分库分表(sharding)系列(一) 拆分实施策略和示例演示数据库分库分表(sharding)系列(二) 全局主键生成策略数据库分库分表(sharding)系列(三) 关于使用框架还是自主开

#数据库
用SQL语句查询elasticsearch

以前我是这样查询elasticsearch的:POST /cdr*/hj_scpcdr/_search{"from" : 0,"size" : 0,"_source" : {"includes" : [ "filedate", "vestss", "permark", "subpp", "SUM" ],"excludes" : [ ]},"fiel

#elasticsearch
elasticsearch高级配置之分片分布规则设置

Java代码  cluster.routing.allocation.allow_rebalance  设置根据集群中机器的状态来重新分配分片,可以设置为always, indices_primaries_active和indices_all_active,默认是设置成indices_all_active来减少集群初始启动时机器之间的交互。 Java代码  

#elasticsearch
elasticsearch出现TranslogCorruptedException导致shard不能启动的问题修复

测试elasticsearch过程中,遇到translog损坏的异常,将修复的过程记录下来。1. 问题单机数据量有8亿+,一个index,20+个字段,使用bulk不停的写数据,bulk.size=5W,此时机器意外断电宕机。机器修复后重启ES,出现translogCorruptedException异常:[plain] viewplain c

通过elasticsearch批量创建kibana的visualize图表及dashboard

kibana中展示的visualize图表及dashboard,是保存在Elasticsearch的kibana-int索引的dashboard类型中的(以kibana3来说明)。下面获取一保存的一个dashboardGET http://localhost:9200/kibana-int/dashboard/skytone.optlog{"_index": "kibana-int",

#elasticsearch
把Elasticsearch作为时间序列数据库使用

这篇文章算是对另一篇《Elasticsearch as a Time Series Data Store》的简单翻译吧,自己的理解吧。首先_source被关闭了,这样原始的json文档不会被重复存储一遍。其次_all也被关闭了。而且每个字段的store都是False,也就是不会单独被存储。这些都关掉了,那么数据存哪里了?存在doc_values里。doc_values用于在做聚合运算的时候,根

#elasticsearch
TPC,TPCC,TPMC(数据库性能衡量指标)

第一章 什么是TPC和tpmC?1 TPCTPC(Transaction Processing Performance Council,事务处理性能委员会)是由数10家会员公司创建的非盈利组织,总部设在美国。该组织对全世界开放,但迄今为止,绝大多数会员都是美、日、西欧的大公司。TPC的成员主要是计算机软硬件厂家,而非计算机用户,它的功能是制定商务应用基准程序(Benchm

#数据库
TPC,TPCC,TPMC(数据库性能衡量指标)

第一章 什么是TPC和tpmC?1 TPCTPC(Transaction Processing Performance Council,事务处理性能委员会)是由数10家会员公司创建的非盈利组织,总部设在美国。该组织对全世界开放,但迄今为止,绝大多数会员都是美、日、西欧的大公司。TPC的成员主要是计算机软硬件厂家,而非计算机用户,它的功能是制定商务应用基准程序(Benchm

#数据库
网易云数据库架构设计实践(摘要摘录)

完整文章在《程序员》第2013.11期第108页云计算并不是天生为数据库设计的,在云端使用关系型数据库面临着软硬件可靠性差、可预测性低和控制能力弱等诸多挑战,网易云数据库在架构设计中充分考虑了上述因素影响,并通过相应的技术手段解决了这些问题。架构设计图1为网易云数据库的总体架构图,下面将详细介绍各个模块扮演的角色和主要功能。管理服务器:整个系统的调度控制模块,负责实

    共 17 条
  • 1
  • 2
  • 请选择