数据库性能文章 | HeapDump性能社区

Redis高级玩法：如何利用SortedSet实现多维度排序

Key命名设计：可读性、可管理性、简介性规范建议使用冒号即:进行分割拼接，因为很多Redis客户端是根据冒号分类的。比如有几个Key：apps:app:1、apps:app:2和apps:app:3。

阿飞Javaer5年前

14501

数据库

Redis client链接池配置不当引起的频繁full gc

说明：本次实践基于Redis版本3.2.11。关于SortedSet 首先，我们都知道Redis的SortedSet是可以根据score进行排序的，以手机应用商店的热门榜单排序为例，根据下载量倒序

阿飞Javaer5年前

9857

数据库

full gc

现象笔者负责的一个RPC服务就是简单的从Redis Cluster中读取数据，然后返回给上游。理论上该服务的对象大部分都应该是朝生夕死的，但是笔者查看gc log 的时候发现 age =2 的对象还真

朱纪兵4年前

9973

数据库

MySQL之KEY分区引发的血案

RedLock: 看完这篇文章后请不要有任何疑惑了

需求背景业务表tb_image部分数据如下所示，其中id唯一，image_no不唯一。image_no表示每个文件的编号，每个文件在业务系统中会生成若干个文件，每个文件的唯一ID就是字段id：业务表t

阿飞Javaer4年前

10195

数据库

本文重点讲述Redis的哪些metrics需要重要监控（篇幅有限，不能涵盖所有），以及我们如何获取这些metrics数据。从而确保对我们应用至关重要的Redis是否健康运行，以及当出现问题时能及时通知

阿飞Javaer5年前

11049

数据库

分布式

后台经常会有小伙伴咨询RedLock相关问题，笔者在此再来一篇文章剖析一下RedLock，希望此文能解决你对它所有的疑惑和误解。为什么需要RedLock这一点很好理解，因为普通的分布式锁算法在加锁时

阿飞Javaer3年前

10648

数据库

构建企业级业务高可用的延时消息中台

Redis OOM（out of memory）内存占用过高，故障分析过程。

业务场景剖析公司业务系统（比如：电商系统）中有大量涉及定时任务的业务场景，例如：实现买卖双方在线沟通的IM系统，为了确保接收方能够收到消息，服务端一般都会有重试策略，即服务端在消息发出的一段时间内，如

孙玄｜奈学教育4年前

9706

数据库

本文正在参加「Java应用线上问题排查经验/工具分享」活动先点赞再看，养成好习惯背景全国最大的短信平台，大家都用过我们的产品。数据量比较大，最多时候一天近7亿条短信。简单介绍一下redis（我们平台用

Chay3年前

10069

Java语言

记一次线上请求偶尔变慢的排查

前言最近解决了个比较棘手的问题，由于排查过程挺有意思，于是就以此为素材写出了本篇文章。 Bug现场这是一个偶发的性能问题。在每天几百万比交易请求中，平均耗时大约为300ms，但总有那么100多笔会超过

巡山小汪4年前

9098

Java语言

Elasticsearch调优篇-慢查询分析笔记

jvm

慢查询

前言- elasticsearch提供了非常灵活的搜索条件给我们使用，在使用复杂表达式的同时，如果使用不当，可能也会为我们带来了潜在的风险，因为影响查询性能的因素很多很多，这篇笔记主要记录一下慢查询可

侠梦4年前

10894

数据库

大招落地：MySQL 插入更新死锁源码分析

sql

天再来分析一个死锁场景。下面开始真正的内容。建表语句：```javaCREATE TABLE `tenant_config` ( `id` bigint(21) NOT NULL AUTO_INCR

挖坑的张师傅4年前

9736

Java语言

前言又和大家见面了！又两周过去了，我的云笔记里又多了几篇写了一半的文章草稿。有的是因为质量没有达到预期还准备再加点内容，有的则完全是一个灵感而已，内容完全木有。羡慕很多大佬们，一周能产出五六篇文章，给

后端技术漫谈3年前

10388

数据库

5G时代，如何彻底搞定海量数据库的设计与实践

5G时代，业务数据越来越丰富，业务使用MySQL数据库作为后台存储，存储引擎使用InnoDB，会带来哪些挑战？如何针对公司业务特点及MySQL数据库特性，制定若干数据库使用规范供一线RD在设计业务时参

孙玄｜奈学教育4年前

9382

数据库

从一次数据库问题排查实战

sql

Mybatis

前言上周五,一同事在开发时遇到了一个问题,叫我帮忙看下.在描述这个同事遇到问题之前,我先简单做一些知识的铺垫,否则不好描述.这里面涉及到的知识点有Spring的事务传播机制、数据库的隔离级别等.本篇重

肥朝4年前

9032

Java语言

最近解决了一个生产 SQL 慢查询的问题，排查问题之后发现一些比较隐匿且容易忽略的问题。业务背景介绍最近业务上需要上线一个预警功能，需要查出一段时间内交易，求出当前交易成功率。当成功率低于设定阈值时

楼下小黑哥3年前

8933

Java语言

一个让人惊讶的排序导致的死循环问题

首先重现问题--表中的数据大概是这样的：```java+----------+---------------------+| image_no | create_time |+----

阿飞Javaer4年前

8838

数据库

看我如何把Redis使用优化到极致

hashtag

我们有个这样的需求：每天每一个抢购商品只能买一次，并且全场抢购商品总购买次数不允许超过5次。那么，整个商品限购的流程大概如下图所示：那么，在每次购买成功商品成功后，发送的MQ大概是这样的（假设当前这笔

阿飞Javaer4年前

9664

其他

一种探究 InnoDB 的存储格式的新方式

后端

存储

文件的存储结构包含了系统大量的实现细节，比如 java 的 class 文件结构，rocksdb 的存储结构。MySQL InnoDB 的存储格式比较复杂，但确实我们理解 MySQL 技术内幕不必可少

MySQL 死锁套路：一次诡异的批量插入死锁问题分析

8122

其他

后端

线上最近出现了批量insert的死锁，百思不得解。死锁记录如下：```2018-10-26T11:04:41.759589Z 8530809 [Note] InnoDB: (1) TRANSACTI

如何在 Mac 下用 Clion 调试 MySQL 源码

10016

数据库

Clion

调试

前面写了几篇文章来通过调试 MySQL 源码来分析死锁问题，有读者问如何用 IDE 调试源码，这篇文章简单介绍一下如何在 Mac 下调试。之所以使用调试的方式来分析死锁问题是因为在解决 MySQL 死

一个诡异的MySQL查询超时问题，居然隐藏着存在了两年的BUG

8245

数据库

这一周线上碰到一个诡异的BUG。线上有个定时任务，这个任务需要查询一个表几天范围内的一些数据做一些处理，每隔十分钟执行一次，直至成功。通过日志发现，从凌晨5：26分开始到5：56任务执行了三次，三次都

CoderW3年前

7743

其他

前言最近发现线上出现一个奇葩的问题，这问题让笔者定位了好长时间，期间排查问题的过程还是挺有意思的，正好博客也好久不更新了，就以此为素材写出了本篇文章。 Bug现场我们的分库分表中间件在经过一年的沉淀之

巡山小汪3年前

7316

数据库

Mysql的sql优化方法

带你重走 TiDB TPS 提升 1000 倍的性能优化之旅

1、选择最合适的字段属性 2、尽量把字段设置为NOT NULL 3、使用连接(JOIN)来代替子查询(Sub-Queries) 4、使用联合(UNION)来代替手动创建的临时表 5、事务 6、锁定表 7、使用外键 8、使用索引 9、优化de的查询语句

wski3年前

7544

数据库

掉坑了！GROUP_CONCAT函数引发的线上问题

实战案例

性能优化这个事情核心只有一句话，用户响应时间去哪儿了？性能优化很困难的原因在于，为了定位用户响应时间在各个模块的分布，需要对系统的各个部件进行测量和分析，从底层硬件，CPU、IO、网络到上层应用架构，应用代码跟数据库的交互方式都需要涉及。

TiDB_Robot3年前

7532

其他

GROUP_CONCAT

数据库时间慢了14个小时，Mybatis说，这个锅我不背！

本文分享一篇在工作遇到的一个问题，关于MySQL GROUP_CONCAT函数导致的问题。希望能帮忙到你。业务场景在说遇到的坑之前，先描述一下大致的业务场景。系统有一个排班的功能，一个医生一天可以排

阿飞云3年前

8722

数据库

MySQL 死锁套路：再来看一例走不同索引更新的例子

在本次问题排查的过程中，多次用到单元测试，这也是单元测试的魅力所在，用最简单的代码，最轻量的逻辑，最节省时间的方式来验证和追踪错误。

程序新视界3年前

7414

数据库

索引

前面有文章介绍了利用调试MySQL源码的方式来调试锁相关的信息，这里利用这个工具来解决一个比较简单的问题，线上的表字段较多，这里简单成为了一个表：```CREATE TABLE `t3` ( `id

MySQL 死锁套路：唯一索引下批量插入顺序不一致

7420

数据库

解决思路：将数据存放在更快的地方；适当合并I/O；利用分布式架构

侠梦2年前

7501

数据库

insert

死锁的本质是资源竞争，批量插入如果顺序不一致很容易导致死锁，我们来分析一下这个情况。为了方便演示，把批量插入改写为了多条 insert。先来做几个小实验，简化的表结构如下：```CREATE TABL

8429

Java语言

空中楼阁之纸上谈兵 mysql的dbcp的配置