后端 - sdk社区 | 技术至上

5 年前 / JavaEdge

原来这就是大厂的MySQL主从复制及读写分离方案

1 单机 =》集群随着数据量的增大，读写并发的增加，系统可用性要求的提升，单机 MySQL 出现危机：容量问题，难以扩容，考虑数据库拆分、分库分表读写压力，QPS 过大，特别是分析类需求会影响到业务事务，考虑多机集群、主从复制高可用性不足，易宕机，考虑故障转移、MHA/MGR/Orchestrator高峰时数据库连接数经常超过上限一致性问题，考虑分布式事务，X/A 柔性事务读写分离的实现是基于主从复制架构：一主多从，只写主库，主库会自动将数据同步到从库。为什么要读写分离？主库将变更写binlog

8170 阅读

收藏
5 年前 / 搬运工2号

mybatis 以及 mybatisplus 根据条件批量删除

mybatis 以及 mybatisplus 根据queryWrapper条件批量删除需求背景需要大量的替换数据根据学校和年级相同的全部删除再增加更明白点本案例是根据非id的字段值批量删除刚开始使用foreach ,但是涉及到两个字段值上代码案例if (list != null ){ //将数据库的现有的删除 QueryWrapper queryWrapper = new QueryWrapper(); for (String key : list) { String[] val

6858 阅读

收藏
5 年前 / 搬运工2号

达梦DM8 DW实时主备集群搭建

一、DM DW集群简介DM 数据守护（Data Watch）将主库（生产库）产生的 Redo 日志传输到备库，备库接收并重新应用 Redo 日志，从而实现备库与主库的数据同步。DM 数据守护的核心思想是监控数据库状态，获取主、备库数据同步情况，为 Redo日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。 DM 数据守护主要由主库、备库、Redo 日志、Redo 日志传输、Redo 日志重演、守护进程（dmwatcher）、监视器（dmmonitor）组成。如下图所示： DM8 数

6671 阅读

收藏
5 年前 / yalishanda

select into from、insert into select 的用法和区别

select into 和 insert into 都能满足复制表的作用,但是二者又有区别,下面具体看下select into语法：SELECT vale1, value2 into Table2 from Table1此处创建目标表table2 并把table1 中的数据复制到table2注意：要求table2 表不存在但是测试运行「SELECT * into test1 from test where id

5965 阅读

收藏
5 年前 / 搬运工2号

springboot jpa 利用mysql group_concat合并多行数据

公司有一个springboot项目，用户存在user表中，用户的角色存在role表中。现需要返回所有用户列表，并且返回该用户的角色，但同一个用户有可能有多个角色，需要将角色拼接起来返回。原始数据如下：user表idname1张三2李四3王五role表useridname1部门经理1项目经理2架构师2开发我们需要返回的结果是姓名角色张三部门经理,项目经理李四架构师王五开发在MySql 中可以使用GROUP_CONCAT函数配合GROUP BY来实现 select user.*,GROUP_CONC

5835 阅读

收藏
5 年前 / 阿满

MySQL索引数据结构简介

1.什么是索引索引是帮助MySQL高效获取数据的排好序的数据结构索引结构* 二叉树不能自动归并广度和深度不可控* 红黑树可以自动归并但是每个节点只能存两个数据深度不可控* HASH 可以快速定位，但是无法进行大于小于和范围查询，部分索引可以适用* BTREE 可以设置度，广度和深度可控索引底层数据结构B Tree1. 度（Degree）-节点的数据存储个数2. 叶节点具有相同的深度3. 叶节点的指针为空4. 节点中的数据key从左到右递增排列B+Tree1. 非叶子节点不存储data，

5388 阅读

收藏
5 年前 / 搬运工2号

Mysql统计近30天的数据，无数据的填充0

Mysql统计近30天的数据，无数据的填充0。这个应该是我们在做统计分析的时候，经常遇到的一个需求。先说一般的实现方式，就是按照日期进行分组，但是这样会有一个问题，如果数据库表中有一天没有数据，那么是统计不出来结果的。类似下图 2020-01-01 102020-01-03 202020-01-04 4这个时候，我们发现，2020-01-02 这一天是没有数据的，我们希望没有数据的这一天得到也能返回日期，而对应的数据是0，期望如下： 2020-01-01 102020-01-02

5372 阅读

收藏
5 年前 / yalishanda

Mysql数据导出之mysqldump

一、mysqldump 简介mysqldump 是 MySQL 自带的逻辑备份工具。它的备份原理是通过协议连接到 MySQL 数据库，将需要备份的数据查询出来，将查询出的数据转换成对应的insert 语句，当我们需要还原这些数据时，只要执行这些 insert 语句，即可将对应的数据还原。二、备份命令2.1 命令格式1、mysqldump [选项] 数据库名 [表名] > 脚本名2、mysqldump [选项] --数据库名 [选项表名] > 脚本名3、mysqldump [选项] --all-

5232 阅读

收藏
5 年前 / 用户_1603641960

关于mysql Statement violates GTID consistency 错误

在执行如下Mysql语句时create table 表A as select * from 表B会提示如下错误Statement violates GTID consistency: CREATE TABLE ... SELECT.原因MySQL5.6及以上的版本，开启了 enforce_gtid_consistency=true 功能导致的，MySQL官方解释说当启用 enforce_gtid_consistency 功能的时候，MySQL只允许能够保障事务安全，并且能够被日志记录的SQL语

1955 阅读

收藏
5 年前 / DDwyane

Mac Brew 安装 Mysql 5.7

MacBook安装Mysql安装MySQL5.7版本brew install mysql@5.7echo 'export PATH="/usr/local/opt/mysql@5.7/bin:$PATH"' >> ~/.zshrc设置密码mysql_secure_installation安装完后启动mysqlbrew services start mysql@5.7若服务未启动就会出现以下错误ERROR 2002 (HY000): Can't connect to local MySQL ser

1413 阅读

收藏
5 年前 / 搬运工2号

MySQL内存管理，内存分配器和操作系统

导读作者：Sveta Smirnova翻译：郑志江校对：徐晨亮原文：MySQL Memory Management, Memory Allocators and Operating System本文涉及链接在文末展示When users experience memory usage issues with any software, including MySQL®, their first response is to think that it’s a symptom of a memo

1112 阅读

收藏
1 年前 / 小乌龟

MySQL的锁的使用示例

MySQL的锁的使用示例MySQL提供了几种不同类型的锁定机制，其中最常用的是表锁定和行锁定。以下是在MySQL中使用这些锁的一些示例SQL代码。表锁定表锁定可以禁止其他用户对表进行修改。在使用LOCK TABLES命令进行锁定之后，只有获取锁的用户可以对表进行读写操作，直到执行UNLOCK TABLES命令释放锁。-- 锁定表，只允许当前会话对其进行读取和写入LOCK TABLES your_table_name WRITE;-- 执行需要的操作... -- 你的 SQL 操作-- 释放锁定U

954 阅读

收藏
5 年前 / 含笑倾城

对于千万级数据库查询速度优化

一.建立uid和insert_time两个独立索引查询语句为：select count(*) from table where insert_time >= "2021-01-14 00:00:00" and uid="jh"查询两次的耗时分别为：103s，102s，查询出的count结果为110万+这条语句表面是有uid和insert_time两个索引，但是实际查询的时候，explain的结果是，只用了uid索引2.查询语句为：select count(*) from table where

750 阅读

收藏
5 年前 / DDwyane

用 Git 操作的数据库？这个项目火了

Git 是一个开源的分布式版本控制系统，可以敏捷高效地管理代码，让项目代码支持同时存在多个不同的版本和分支，是程序员在项目开发中的必备工具。除了代码文件可以进行版本控制之外，数据其实也可以版本控制！今天，Dolt 项目荣登 GitHub 趋势榜榜首，该仓库的介绍是 “Git for Data”，一个面向数据的 Git，目前已收获了几千个 star。下面我们来简单了解下 Dolt 项目。什么是 Dolt？根据官方介绍，Dolt 是一个基于 Git 协议的开源 SQL 数据库，使用 Golang 语

686 阅读

收藏
5 年前 / king

MySQL 数据库的优化，你知道有哪些？

前言数据库优化一方面是找出系统的瓶颈,提高MySQL数据库的整体性能,而另一方面需要合理的结构设计和参数调整,以提高用户的相应速度,同时还要尽可能的节约系统资源,以便让系统提供更大的负荷.1.优化一览图2.优化笔者将优化分为了两大类,软优化和硬优化,软优化一般是操作数据库即可,而硬优化则是操作服务器硬件及参数设置.2.1 软优化2.1.1 查询语句优化1.首先我们可以用EXPLAIN或DESCRIBE(简写:DESC)命令分析一条查询语句的执行信息.2.例:DESC SELECT * FROM

677 阅读

收藏

加载中...