mysql数据对比工具
导读:笔者最近在采用 trino 代替旧有方案进行媒体接口数据拉取。需通过将 trino 拉取的数据入到测试库,并与旧方案拉取到生产库中的数据进行对比从而验证逻辑准确性。在进行数据对比时为提高效率因此...
2024.11.15MySQL数据库支持多种数据压缩和传输方法,以减少网络带宽使用和提高性能。以下是MySQL中可用的一些数据压缩和传输方法:
客户端与服务器之间的压缩连接:MySQL客户端和服务器之间可以使用压缩协议通信。当客户端和服务器之间的连接启用压缩时,发送的所有数据都会先进行压缩,然后再通过网络发送。在接收端,数据会被解压缩,然后进行处理。
要启用压缩连接,可以使用以下方法之一:
在命令行客户端中,使用--compress选项启用压缩连接:mysql --compress -u username -p在MySQL Connector/Python中,将compress参数设置为True:mysql.connector.connect(user=‘username‘, password=‘password‘, compress=True)在其他编程语言的MySQL驱动程序中,查找相应的选项以启用压缩连接。行级压缩:InnoDB存储引擎提供了行级压缩功能,可以减少磁盘空间使用和I/O操作。行级压缩适用于InnoDB表,通过压缩每行数据来节省存储空间。
要启用行级压缩,请将ROW_FORMAT选项设置为COMPRESSED:
CREATE TABLE compressed_table (id INT PRIMARY KEY AUTO_INCREMENT,data VARCHAR(255)) ENGINE=InnoDB ROW_FORMAT=COMPRESSED;或者,可以将现有表修改为使用行级压缩:
ALTER TABLE existing_table ROW_FORMAT=COMPRESSED;页压缩:页压缩是InnoDB存储引擎的另一种压缩方法,它与透明页面压缩(TSC)技术一起工作,将数据文件中的页压缩为更小的大小。这可以减少磁盘空间使用和I/O操作。要启用页压缩,需要在创建或修改表时指定KEY_BLOCK_SIZE:
CREATE TABLE compressed_table (id INT PRIMARY KEY AUTO_INCREMENT,data VARCHAR(255)) ENGINE=InnoDB ROW_FORMAT=COMPRESSED KEY_BLOCK_SIZE=8;或者,可以将现有表修改为使用页压缩:
ALTER TABLE existing_table ROW_FORMAT=COMPRESSED KEY_BLOCK_SIZE=8;需要注意的是,在某些情况下,数据压缩可能会导致额外的CPU开销,因此在使用这些功能之前,请根据实际需求进行性能测试。
导读:笔者最近在采用 trino 代替旧有方案进行媒体接口数据拉取。需通过将 trino 拉取的数据入到测试库,并与旧方案拉取到生产库中的数据进行对比从而验证逻辑准确性。在进行数据对比时为提高效率因此...
2024.11.15解决方法一:(最重要的一种方法)你看下my.ini,有无[mysql]default-character-set=utf8[client]default-character-set=utf8[mysq...
2024.11.15前言:备份乃不死之王!一、全表结构备份:select INTO 语句:表示从一个表中选取数据,然后把数据插入另一个表中,常用来备份一张表 insert INTO new_table_name sele...
2024.11.14修改MySQL数据库名称的方法如下:1.语句修改法:rename DATABASE db_name TO new_db_name这个语法在mysql 5.1.7中被添加进来,到了5.1.23又去掉了。...
2024.11.12概述其实主要是为了偷懒,所以就搞了一个自动编写MySQL数据库备份脚本,每次写备份脚本传参就可以了,仅供参考。1、MySQL备份模板(上传到下载平台)#!/bin/bash##############...
2024.11.14