199浏览

0评论

MongoDB 7.0 搭建 Sharding 副本集群

本文是在ubuntu 22.03 系统版本上部署的，最低支持mongodb-6.0.4以上，所以这里安装mongodb7.01 安装mongo安装方式有多种，本人是使用的第一种方式，时间也就20分钟吧，能接受。1.1...

MongoDB
• 2024-01-30

82浏览

0评论

Redis订阅模式在生产环境引起的内存泄漏

内存泄漏内存泄漏指的就是在运行过程中定义的各种各样的变量无法被垃圾回收器正常标记为不可达并触发后续的回收流程，主要原因还是因为对可回收对象引用没有去除，导致垃圾回收...

• 2024-01-30

151浏览

0评论

MySQL 启动错误 The server quit without updating PID file

首先来说我是如何发现这个错误的，公司的网站需要修改一些东西，前端通知让我备份一下网站的数据库和目录。在我手动执行了备份任务2分钟后，前端告诉我网站打开提示数据库错误。...

• 2024-01-28

93浏览

0评论

一种轻量分表方案-MyBatis拦截器分表实践

背景部门内有一些亿级别核心业务表增速非常快，增量日均100W，但线上业务只依赖近一周的数据。随着数据量的迅速增长，慢SQL频发，数据库性能下降，系统稳定性受到严重影响。本篇文章，...

• 2024-01-28

109浏览

0评论

[postgres]配置主从异步流复制

前言环境信息 IP 角色 操作系统 PostgreSQL版本 192.168.1.112 主库 Debian 12 15.3 192.168.1.113 从库 Debian 12 15.3 配置主从...

PostgreSQL
• 2024-01-28

192浏览

0评论

SQL手工注入

两要素 用户能够控制输入的内容 web应用把用户输入的内容，在没有经过过滤或者严格过滤的情况下带入到数据库中执行分类 GET和POST 整数型，字符型，搜索型万能密码’1 or 1...

• 2024-01-28

178浏览

0评论

MySQL数据库精选（从入门使用到底层结构）

基本使用MySQL通用语法及分类 DDL: 数据定义语言，用来定义数据库对象（数据库、表、字段） DML: 数据操作语言，用来对数据库表中的数据进行增删改 DQL: 数据查询语言，用来查询数据...

• 2024-01-28

190浏览

0评论

es从线上库导出数据并导入开发环境

背景来了个需求，需要从某个线上es库查询一些数据出来并进行大屏展示。问需求方有没有开发环境的es库，答：没有，说要不直连他们的线上库。后面想想也行吧，业务方都这么说了，结果开网...

• 2024-01-28

107浏览

0评论

MySQL root密码忘记，原来还有更优雅的解法！

一直以来，对于MySQL root密码的忘记，以为只有一种解法-skip-grant-tables。问了下群里的大咖，第一反应也是skip-grant-tables。通过搜索引擎简单搜索了下，无论是百度，抑或Google，...

• 2024-01-24

155浏览

0评论

什么是 MySQL JDBC 连接池中最高效的连接检测语句？

在回答这个问题之前，首先我们看看 MySQL 中有哪些常用的 JDBC 连接池： c3p0 DBCP Druid Tomcat JDBC Pool HikariCP这些连接池中，c3p0 是一个老牌的连接池，很多流行框架，在其老版...

• 2024-01-24

231浏览

0评论

开源数据血缘和元数据管理框架DataHub的血缘摄取 V0.12.1版本

DataHUb的安装很简单：你有绿色上网就soeasy前置条件，你已经运行好DataHub整个Docker-Compse服务打开地址：http://host:9002/ 输入账号DataHub 密码DataHub查看框架运行路线轨迹...

• 2024-01-24

201浏览

0评论

[原创]OpenEuler20.03安装配置PostgreSQL13.4详细图文版

OpenEuler安装配置PostgreSQL编写时间：2021年9月18日作者：liupp邮箱：liupp@88.com 序号 更新内容 更新日期 更新人 1 完成第一至三章内容编辑； 2021年9...

PostgreSQL
• 2024-01-24

95浏览

0评论

OpenEuler22.03安装PostgreSQL15.5并配置一主二从

环境准备 序号 IP 标识(hostname) CPU/内存配置 系统盘 数据盘 1 192.168.8.190 pg01 8C+16G 80G 500G 2 192.168.8.191 pg02 ...

PostgreSQL
• 2024-01-24

94浏览

0评论

【Redis】一文掌握Redis原理及常见问题

Redis是基于内存数据库，操作效率高，提供丰富的数据结构（Redis底层对数据结构还做了优化），可用作数据库，缓存，消息中间件等。如今广泛用于互联网大厂，面试必考点之一，本文从数据结构，到...

• 2024-01-24

92浏览

0评论

【经典问题】mysql和redis数据一致性问题

前言MySQL和Redis数据一致性算是个很经典的问题，在之前也看到过很多相关的文章，最近心血来潮，想把一致性问题的解决方案和存在问题都总结一下。不推荐方案1 先更新MySQL，再更新R...

• 2024-01-24

186浏览

0评论

Mysql事务实现原理

在日常工作中，数据库是我们必须使用的，其中使用最多的也是大部分中小公司的选择是Mysql，跳槽面试中也是必问的，今天我们就说一下Mysql事务MySQL中的事务实现原理主要涉及以下几...

• 2024-01-24

201浏览

0评论

Redis系列：使用 Redis Module 扩展功能

1 啥是Redis ModuleRedis Module是Redis的一种扩展模块，从 4.0版本开始，允许用户自定义扩展模块，在Redis内部实现新的数据类型和功能，使用统一的调用方式和传输协议格式扩展Redi...

• 2024-01-24

108浏览

0评论

工作中使用Redis的10种场景

前言Redis作为一种优秀的基于key/value的缓存，有非常不错的性能和稳定性，无论是在工作中，还是面试中，都经常会出现。今天这篇文章就跟大家一起聊聊，我在实际工作中使用Redis的10...

• 2024-01-24

174浏览

0评论

mysql和redis库存扣减和优化

前言大流量情况下的库存是老生常谈的问题了，在这里我整理一下mysql和redis应对扣除库存的方案，采用jmeter进行压测。JMETER设置库存初始值50，线程数量1000个，1秒以内启动全部，一...

• 2024-01-24

132浏览

0评论

关于MySQL日期函数你不知道的用法

MySQL提供了丰富的日期和时间函数，用于处理和操作日期时间数据。本篇博文将深入介绍一些常用的MySQL日期函数，通过详细的例子带你了解这些函数的用法和实际应用。1. CURDATE()...

• 2024-01-24

105浏览

0评论

MySQL驱动扯后腿？Spring Boot用虚拟线程可能比用物理线程还差

之前已经分享过多篇关于Spring Boot中使用Java 21新特性虚拟线程的性能测试案例： Spring Boot 3.2虚拟线程搭建静态文件服务器有多快？ Spring Boot 虚拟线程与Webflux在JWT验...

• 2024-01-24

233浏览

0评论

如何通过SQL语句在MongoDB中实现数据加密和安全管理？

如何通过SQL语句在MongoDB中实现数据加密和安全管理？概述：
MongoDB是一种流行的文档型数据库，它使用NoSQL的方式存储和管理数据。然而，有时候我们需要对数据进行加密，以确保数据...

• 2024-01-24

160浏览

0评论

如何通过SQL语句在MongoDB中实现分布式数据库的部署和管理？

如何通过SQL语句在MongoDB中实现分布式数据库的部署和管理？摘要：本文将介绍如何通过SQL语句在MongoDB中实现分布式数据库的部署和管理。首先，我们将简要介绍MongoDB以及其分布...

• 2024-01-24

192浏览

0评论

如何使用SQL语句在MySQL中进行数据校验和完整性约束？

如何使用SQL语句在MySQL中进行数据校验和完整性约束？数据校验和完整性约束是数据库管理系统中常用的方法，用于确保数据的正确性和完整性。在MySQL中，我们可以通过使用SQL语句来...

• 2024-01-24

199浏览

0评论

比较和选择MySQL不同类型的锁

MySQL 是一种常用的关系型数据库管理系统，广泛应用于各种类型的应用程序中。在多用户并发访问数据库的情况下，为了保证数据的一致性和完整性，我们经常需要使用锁来控制并发访问...

• 2024-01-24

142浏览

0评论

处理和优化 MySQL 死锁锁定

很抱歉，由于技术限制，我无法提供具体代码示例。但是我可以帮你提供一个讲解MySQL锁、死锁处理与优化的大纲，供你参考。MySQL 锁的死锁处理与优化一、MySQL锁的分类 读锁（共享锁） ...

• 2024-01-24

187浏览

0评论

优化 MySQL 并发控制锁的性能

MySQL 锁的并发控制与性能优化，需要具体代码示例摘要：
在MySQL数据库中，锁的并发控制是非常重要的，它能够确保数据的一致性和完整性。本文将详细介绍MySQL中锁的种类和使用场景，...

• 2024-01-24

110浏览

0评论

MySQL 锁、事务隔离级别与应用的关系

MySQL 锁的事务隔离级别与应用
在数据库中，事务隔离级别是非常重要的概念，它决定了并发事务之间的隔离程度。MySQL 提供了四种事务隔离级别：READ UNCOMMITTED、READ COMMITTED...

• 2024-01-24

90浏览

0评论

深入探讨MySQL InnoDB引擎的锁机制

MySQL InnoDB 锁的深入解析在MySQL数据库中，锁是保证数据完整性和一致性的重要机制。而InnoDB存储引擎作为MySQL中最常用的存储引擎之一，其锁机制更是备受关注。本文将深入解...

• 2024-01-24

191浏览

0评论

分类与应用：了解MySQL锁的类型和用途

MySQL 锁的分类与应用在并发访问数据库的情况下，为了保证数据的一致性和完整性，MySQL 提供了锁机制。锁可以将关键资源进行保护，控制并发事务对数据的访问和修改。本文将介绍 M...

• 2024-01-24

223浏览

0评论

分享MySQL中锁的使用技巧

MySQL 锁的使用技巧分享随着数据库应用的日益广泛，对数据库的并发控制和数据完整性要求也越来越高。在MySQL数据库中，锁是一种重要的并发控制手段，可以有效地保护数据的完整性...

• 2024-01-24

170浏览

0评论

常见的MySQL锁问题及其解决方案

MySQL 锁的常见问题与解决方案MySQL 是一种常用的关系型数据库管理系统，它使用锁来实现并发控制，保证数据的一致性和完整性。然而，MySQL 锁的使用也会带来一些问题。本文将介绍...

• 2024-01-24

101浏览

0评论

MySQL 并发控制中的锁策略

MySQL 锁的并发控制策略引言：
在数据库系统中，为了保证数据的一致性和完整性，需要对并发操作进行控制。而锁机制是一种常用的并发控制策略。MySQL作为一种常用的关系数据库管理...

• 2024-01-24

89浏览

0评论

解析MySQL锁的实现机制

MySQL 锁的实现原理解析引言:
在并发访问数据库的环境中，为了保障数据的完整性和一致性，数据库系统需要实现锁机制。锁机制通过限制对共享资源的访问，确保不同的事务能够有序地...

• 2024-01-24

165浏览

0评论

解析MySQL内部实现的锁机制

MySQL 锁的内部实现解析及代码示例引言：
在多用户环境下，数据库中的数据可能同时被多个用户进行读写操作，这时就需要使用锁（Lock）机制来保证数据的一致性和并发控制。MySQL 是一...

• 2024-01-24

175浏览

0评论

MySQL 主从延迟的常见原因及解决方法

主从延迟作为 MySQL 的痛点已经存在很多年了，以至于大家都有一种错觉：有 MySQL 复制的地方就有主从延迟。对于主从延迟的原因，很多人将之归结为从库的单线程重放。但实际上，这个...

• 2024-01-24

189浏览

0评论

MySQL 并行复制方案演进历史及原理分析

有过线上 MySQL 维护经验的童鞋都知道，主从延迟往往是一个让人头疼不已的问题。不仅仅是其造成的潜在问题比较严重，而且主从延迟原因的定位尤其考量 DBA 的综合能力：既要熟悉复...

• 2024-01-24

131浏览

0评论

MySQL 性能压测工具-sysbench，从入门到自定义测试项

sysbench是一个开源的、基于LuaJIT（LuaJIT 是 Lua 的即时编译器，可将代码直接翻译成机器码，性能比原生 lua 要高） 的、可自定义脚本的多线程基准测试工具，也是目前用得最多的 MyS...

• 2024-01-24

179浏览

0评论

基于案例分析 MySQL Group Replication 的故障检测流程

故障检测（Failure Detection）是 Group Replication 的一个核心功能模块，通过它可以及时识别集群中的故障节点，并将故障节点从集群中剔除掉。如果不将故障节点及时剔除的话，一方面...

• 2024-01-24

152浏览

0评论

XtraBackup 搭建从库的一般步骤及 XtraBackup 8.0 的注意事项

搭建从库，本质上需要的只是一个一致性备份集及这个备份集对应的位置点信息。之前介绍的几个备份工具（ MySQL中如何选择合适的备份策略和备份工具 ）均可满足。这里，我们重点看看...

• 2024-01-24

102浏览

0评论

MySQL 官方出品，比 mydumper 更快的多线程逻辑备份工具-MySQL Shell Dump & Load

mysqldump 和 mydumper 是我们常用的两个逻辑备份工具。无论是 mysqldump 还是 mydumper 都是将备份数据通过 INSERT 的方式写入到备份文件中。恢复时，myloader（ mydumper 中...

• 2024-01-24

164浏览

0评论

一文说透 MySQL JSON 数据类型（收藏）

JSON 数据类型是 MySQL 5.7.8 开始支持的。在此之前，只能通过字符类型（CHAR，VARCHAR 或 TEXT ）来保存 JSON 文档。相对字符类型，原生的 JSON 类型具有以下优势： 在插入时能自动校...

• 2024-01-24

89浏览

0评论

使用 LOAD DATA LOCAL INFILE，sysbench 导数速度提升30%

最近给 sysbench 提了一个 feature（https://github.com/akopytov/sysbench/pull/450），支持通过 LOAD DATA LOCAL INFILE 命令导入压测数据。下面我们来具体看看这个 feature 的...

• 2024-01-24

110浏览

0评论

MySQL 中如何归档数据

归档，在 MySQL 中，是一个相对高频的操作。它通常涉及以下两个动作： 迁移。将数据从业务实例迁移到归档实例。 删除。从业务实例中删除已迁移的数据。在处理类似需求时，都是开发...

• 2024-01-24

74浏览

0评论

MySQL 中如何定位 DDL 被阻塞的问题

经常碰到开发、测试童鞋会问，线下开发、测试环境，执行了一个DDL，发现很久都没有执行完，是不是被阻塞了？要怎么解决？包括在群里，也经常会碰到类似问题：DDL 被阻塞了，如何找到阻塞它的...

• 2024-01-24

84浏览

0评论

MySQL 分区表，为什么分区键必须是主键的一部分？

随着业务的不断发展，数据库中的数据会越来越多，相应地，单表的数据量也会越到越大，大到一个临界值，单表的查询性能就会下降。这个临界值，并不能一概而论，它与硬件能力、具体业务有关...

• 2024-01-24

155浏览

0评论

MySQL中如何选择合适的备份策略和备份工具

数据库备份的重要性毋庸置疑，可以说，它是数据安全的最后一道防线。鉴于此，对于备份，我们通常会做以下要求： 多地部署 对于核心数据库，我们通常有两地三中心的部署要求。对于备份...

• 2024-01-24

161浏览

0评论

MySQL中 VARCHAR 可设置的最大长度是多少？

在使用MySQL的过程中，在存储字符串时，大家或许都有过这样或那样的困惑，譬如：1. 对于固定长度的字符串，为什么推荐使用 CHAR 来存储？2. VARCHAR 可设置的最大长度是多少？3. 给定...

• 2024-01-24

143浏览

0评论

Binlog分析利器-binlog_summary.py

Binlog中，除了具体的SQL，其实，还包含了很多有价值的信息，如， 事务的开始时间。 事务的结束时间。 事务的开始位置点。 事务的结束位置点。 操作的开始时间（一个事务通常会包含多个...

• 2024-01-24

148浏览

0评论

Handler_read_*的总结

在分析一个SQL的性能好坏时，除了执行计划，另外一个常看的指标是"Handler_read_*"相关变量。 Handler_read_key Handler_read_first Handler_read_last Handler_read_next ...

• 2024-01-24