程序员经验分享-hwhale

Mysql Group Replication 简介及单主模式组复制配置

2023-10-27
一 Mysql Group Replication简介
   Mysql Group Replication(MGR)是一个全新的高可用和高扩张的MySQL集群服务。
    高一致性，基于原生复制及paxos协议的组复制技术，以插件方式提供一致数据安全保证；
    高容错性，大多数服务正常就可继续工作，自动不同节点检测资源征用冲突，按顺序优先处理，内置自动防脑裂机制；
    高扩展性，自动添加移除节点，并更新组信息；
    高灵活性，单主模式和多主模式。单主模式自动选主，所有更新操作在主进行；多主模式，所有server同时更新。
二 Mysql Group Replication与传统复制的区别和大幅改进
   1.传统复制
      主-从复制：有一个主和不等数量的从。主节点执行的事务会异步发送给从节点，在从节点重新执行。（异步和半同步）
   （半同步相对异步Master会确认Slave是否接到数据，更加安全）
   （原理见主从复制笔记）
   2.并行复制
   并行复制：复制->广播->正式复制
   优势：
   弹性复制（高扩展性）：server动态添加移除
   高可用分片（高扩展性）：分片实现写扩展，每个分片是一个复制组。
   替代主从复制（高扩展性）：整组写入，避免单点争用。
   自动化系统：自动化部署Mysql复制到已有复制协议的自动化系统。
   故障检测与容错：自动检测，若服务faild,组内成员大多数达成认为该服务已不正常，则自动隔离。
         组内成员会构成一个视图，组内成员主动加入或离开（主动或被动），都会更新组配置，更新视图。成员自愿离开，先更新组配置，然后采用大多数成员（不包含主动脱离的成员）意见是否确认该成员离开更新视图。如果是故障要排除，则需大多数服务确认（包括故障成员意见），然后才会更新组配置和视图。   
        最大允许即时故障数：f=(n-1)/2,多数正常则正常
三 主从复制限制

   1.存储引擎必须为innodb

   2.每个表必须提供主键

3.只支持ipv4，网络需求较高

   4.一个group最多只能有9台服务器

   5.不支持Replication event checksums，

   6.不支持Savepoints

   7.multi-primary mode部署方式不支持SERIALIZABLE事务隔离级别

   8.multi-primary mode部署方式不能完全支持级联外键约束

    9.multi-primary mode 部署方式不支持在不同节点上对同一个数据库对象并发执行 DDL( 在不同节点上对同一行并发进行 RW 事务，后发起的事务会失败 )
 四 单主模式布置组复制
   （组中server可在独立物理机运行，也可在同一台机器，同一机器采用多实例，也就是逻辑认为是独立机器）
    1.安装mysql5.7包
   1.卸载系统已有数据库 
    
    
    

  1. #检测系统是否已安装mariadb,如有则卸载
    2. 

  2. rpm -qa | grep mariadb
    3. 

  3. rpm -e mariadb-libs --nodeps
    4.
   2.编译安装mysql5.7 
     
     
    

  1. 
#添加mysql用户组并添加mysql用户(不允许登录)

    2. 

  2. groupadd mysql
    3. 

  3. useradd -r -g mysql -s /bin/false -M mysql
    4. 

  4. #下载mysql源码包
    5. 

  5. wget https://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.17.tar.gz
    6. 

  6. #安装编译工具和依赖包
    7. 

  7. yum install -y cmake make gcc gcc-c++
    8. 

  8. yum install -y ncurses-devel openssl-devel bison-devel libaio libaio-devel
    9. 

  9. 

    10. 

  10. # boost库安装
    11. 

  11. # 该步骤可以省略，在cmake阶段添加参数-DDOWNLOAD_BOOST=1 -DWITH_BOOST=/usr/local/boost即可
    12. 

  12. wget http://sourceforge.net/projects/boost/files/boost/1.59.0/boost_1_59_0.tar.gz
    13. 

  13. tar -zxvf boost_1_59_0.tar.gz -C /usr/local
    14. 

  14. mv /usr/local/boost_1_59_0 /usr/local/boost
    15. 

  15. cd /usr/local/boost
    16. 

  16. ./bootstrap.sh
    17. 

  17. ./b2 stage threading=multi link=shared
    18. 

  18. ./b2 install threading=multi link=shared
    19. 

  19. 

    20. 

  20. #安装编译mysql
    21. 

  21. cd
    22. 

  22. tar -zxvf mysql-5.7.17.tar.gz
    23. 

  23. cd mysql-5.7.17
    24. 

  24. #使用cmake工具设置参数，新版的php都从configure改用cmake
    25. 

  25. 

    26. 

  26. cmake \
    27. 

  27. -DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
    28. 

  28. -DMYSQL_DATADTR=/usr/local/mysql/data \
    29. 

  29. -DSYSCONFDIR=/etc \
    30. 

  30. -DMYSQL_USER=mysql \
    31. 

  31. -DWITH_MYISAM_STORAGE_ENGINE=1 \
    32. 

  32. -DWITH_INNOBASE_STORAGE_ENGINE=1 \
    33. 

  33. -DWITH_ARCHIVE_STORAGE_ENGINE=1 \
    34. 

  34. -DWITH_MEMORY_STORAGE_ENGINE=1 \
    35. 

  35. -DWITH_READLINE=1 \
    36. 

  36. -DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \
    37. 

  37. -DMYSQL_TCP_PORT=3306 \
    38. 

  38. -DENABLED_LOCAL_INFILE=1 \
    39. 

  39. -DENABLE_DOWNLOADS=1 \
    40. 

  40. -DWITH_PARTRTION_STORAGE_ENGINE=1 \
    41. 

  41. -DEXTRA_CHARSETS=all \
    42. 

  42. -DDEFAULT_CHARSET=utf8 \
    43. 

  43. -DDEFAULT_COLLATION=utf8_general_ci \
    44. 

  44. -DWITH_DEBUG=0 \
    45. 

  45. -DMYSQL_MAINTAINER_MODE=0 \
    46. 

  46. -DMITH_SSL:STRING=bundled \
    47. 

  47. -DWITH_ZLIB:STRING=bundled \
    48. 

  48. -DDOWNLOAD_BOOST=1 \
    49. 

  49. -DWITH_BOOST=/usr/local/boost
    50. 

  50. 

    51. 

  51. 
make && make install

    52. 

  52. #默认1个线程编译，可使用指定线程数加快编译
    53. 

  53. #make -j $(grep processor /proc/cpuinfo | wc -l) && make install
    54. 

  54. 

    55. 

  55. #将mysql目录权限给mysql用户
    56. 

  56. 
chown -Rf mysql:mysql /usr/local/mysql

    57. 

  57. 

    58. 

  58. #设置mysql的默认配置文件
    59. 

  59. 
cp /usr/local/mysql/support-files/my-default.cnf /etc/my.cnf

    60. 

  60. #把mysql命令加入查找路径
    61. 

  61. 
echo "export PATH=$PATH:/usr/local/mysql/bin" >>/etc/profile

    62. 

  62. source /etc/profile
    63.
   防火墙和selinux设置 
     
     
    

  1. firewall-cmd --permanent --add-port=3307/tcp
    2. 

  2. 
firewall-cmd --permanent --add-port=3308/tcp

    3. 

  3. 
firewall-cmd --permanent --add-port=3309/tcp

    4. 

  4. 
firewall-cmd --permanent --add-port=3407/tcp

    5. 

  5. 
firewall-cmd --permanent --add-port=3408/tcp

    6. 

  6. 
firewall-cmd --permanent --add-port=3409/tcp

    7. 

  7. 
firewall-cmd --reload

    8. 

  8. 

    9. 

  9. 
setenforce 0

    10. 

  10. sed -i 's#enforcing#permissive#g' /etc/selinux/config

    11.
   3.部署组复制实例 
     
     
    

  1. mkdir /data
    2. 

  2. #初始化数据库，创建数据库
    3. 

  3. mysqld --initialize-insecure --user=mysql --basedir=/usr/local/mysql --datadir=/data/s1
    4. 

  4. mysqld --initialize-insecure --user=mysql --basedir=/usr/local/mysql --datadir=/data/s2
    5. 

  5. mysqld --initialize-insecure --user=mysql --basedir=/usr/local/mysql --datadir=/data/s3
    6.
   4.配置组复制实例S1 
     
     
    

  1. cat > /data/s1/my.cnf <<EOF
    2. 

  2. 

    3. 

  3. 
[mysqld]

    4. 

  4. # server configuration
    5. 

  5. user=mysql
    6. 

  6. datadir=/data/s1
    7. 

  7. basedir=/usr/local/mysql/
    8. 

  8. port=3307
    9. 

  9. socket=/usr/local/mysql/s1.sock
    10. 

  10. 

    11. 

  11. #复制框架
    12. 

  12. server_id=1
    13. 

  13. gtid_mode=ON
    14. 

  14. enforce_gtid_consistency=ON
    15. 

  15. master_info_repository=TABLE
    16. 

  16. relay_log_info_repository=TABLE
    17. 

  17. binlog_checksum=NONE
    18. 

  18. log_slave_updates=ON
    19. 

  19. log_bin=binlog
    20. 

  20. binlog_format=ROW
    21. 

  21. 

    22. 

  22. #组复制设置
    23. 

  23. #server必须为每个事务收集写集合，并使用XXHASH64哈希算法将其编码为散列
    24. 

  24. transaction_write_set_extraction=XXHASH64
    25. 

  25. #告知插件加入或创建组命名，UUID 
    26. 

  26. loose-group_replication_group_name="aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa"
    27. 

  27. #server启动时不自启组复制
    28. 

  28. loose-group_replication_start_on_boot=off
    29. 

  29. #告诉插件使用IP地址，端口3407用于接收组中其他成员转入连接
    30. 

  30. loose-group_replication_local_address="127.0.0.1:3407"
    31. 

  31. #启动组server，种子server，加入组应该连接这些的ip和端口；其他server要加入组得由组成员同意
    32. 

  32. 
loose-group_replication_group_seeds="127.0.0.1:3407,127.0.0.1:3408,127.0.0.1:3409"

    33. 

  33. loose-group_replication_bootstrap_group=off
    34. 

  34. loose-group_replication_single_primary_mode=FALSE

    35. 

  35. loose-group_replication_enforce_update_everywhere_checks= TRUE

    36. 

  36. 

    37. 

  37. EOF
    38.
   5.用户凭据 
    
    
    

  1. #启动mysql实例1服务
    2. 

  2. nohup mysqld --defaults-file=/data/s1/my.cnf >/data/s1/nohup.out 2>/data/s1/nohup.out &
    3. 

  3. #登录mysql s1
    4. 

  4. 
mysql -uroot -h127.0.0.1 -P3307 --skip-password

    5. 

  5. #修改root密码
    6. 

  6. alter user 'root'@'localhost' identified by '123456';
    7. 

  7. #下面操纵不写入二进制日志，避免修改传递给其他实例，先关闭
    8. 

  8. set sql_log_bin=0;

    9. 

  9. #创建拥有replication slave权限mysql用户
    10. 

  10. create user rpl_user@'%';

    11. 

  11. grant replication slave on *.* to rpl_user@'%'  identified by 'rpl_pass';

    12. 

  12. flush privileges;

    13. 

  13. #开启二进制写入
    14. 

  14. set sql_log_bin=1;
    15. 

  15. #分布式恢复加入组的server执行第一步
    16. 

  16. 
#change master to语言将server配置为，在下次需要从其他成员恢复状态时，使用group_replication_recovery复制通道的给定凭证。

    17. 

  17. change master to master_user='rpl_user',master_password='rpl_pass' for channel 'group_replication_recovery';

    18. 

  18. #建议每个mysql通过配置唯一主机名，通过DNS或本地设置。（相同可能导致无法恢复）
    19.
   6.启动组复制 
     
     
    

  1. #安装组复制插件
    2. 

  2. install plugin group_replication soname 'group_replication.so';

    3. 

  3. #检测插件是否安装成功
    4. 

  4. show plugins;

    5. 

  5. +----------------------------+----------+--------------------+----------------------+---------+
| Name                       | Status   | Type               | Library              | License |
+----------------------------+----------+--------------------+----------------------+---------+
......
| group_replication          | ACTIVE   | GROUP REPLICATION  | group_replication.so | GPL     |
+----------------------------+----------+--------------------+----------------------+---------+
    6. 

  6. #server s1引导组，启动组复制程序（复制组只启动一次就行）
    7. 

  7. set global group_replication_bootstrap_group=ON;
    8. 

  8. start group_replication;
    9. 

  9. set global group_replication_bootstrap_group=OFF;
    10. 

  10. #检测组是否创建并已加入新成员
    11. 

  11. select * from performance_schema.replication_group_members;
    12. 

  12. +---------------------------+--------------------------------------+-------------+-------------+--------------+
| CHANNEL_NAME              | MEMBER_ID                            | MEMBER_HOST | MEMBER_PORT | MEMBER_STATE |
+---------------------------+--------------------------------------+-------------+-------------+--------------+
| group_replication_applier | 70bf7af3-1657-11e7-82a8-000c29433013 | test1       |        3307 | ONLINE       |
+---------------------------+--------------------------------------+-------------+-------------+--------------+

    13. 

  13. 

    14.
   7.测试 
    
    
    

  1. mysql> create database test;
    2. 

  2. 2017-03-31T23:23:45.535115Z 8 [Note] Plugin group_replication reported: 'Primary had applied all relay logs, disabled conflict detection'
    3. 

  3. Query OK, 1 row affected (0.03 sec)
    4. 

    5. 

  5. mysql> use test;
    6. 

  6. Database changed
    7. 

  7. 

    8. 

  8. mysql> create table t1(c1 int primary key,c2 text not null);
    9. 

  9. Query OK, 0 rows affected (0.03 sec)
    10. 

    11. 

  11. mysql> insert into t1 values (1 , 'Luis');
    12. 

  12. Query OK, 1 row affected (0.01 sec)
    13. 

    14. 

  14. mysql> select * from t1;
    15. 

  15. +----+------+
    16. 

  16. | c1 | c2   |
    17. 

  17. +----+------+
    18. 

  18. |  1 | Luis |
    19. 

  19. +----+------+
    20. 

  20. 1 row in set (0.00 sec)
    21. 

    22. 

  22. mysql> show binlog events;
    23. 

  23. +---------------+------+----------------+-----------+-------------+----------------------------------------------------------------------------------------------------------------------+
    24. 

  24. | Log_name      | Pos  | Event_type     | Server_id | End_log_pos | Info                                                                                                                 |
+---------------+------+----------------+-----------+-------------+----------------------------------------------------------------------------------------------------------------------+
| binlog.000001 |    4 | Format_desc    |         1 |         123 | Server ver: 5.7.17-log, Binlog ver: 4                                                                                |
| binlog.000001 |  123 | Previous_gtids |         1 |         150 |                                                                                                                      |
| binlog.000001 |  150 | Gtid           |         1 |         211 | SET @@SESSION.GTID_NEXT= '21355e09-16ea-11e7-bb6b-000c29433013:1'                                                    |
| binlog.000001 |  211 | Query          |         1 |         386 | ALTER USER 'root'@'localhost' IDENTIFIED WITH 'mysql_native_password' AS '*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9' |
| binlog.000001 |  386 | Gtid           |         1 |         447 | SET @@SESSION.GTID_NEXT= 'aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa:1'                                                    |
| binlog.000001 |  447 | Query          |         1 |         506 | BEGIN                                                                                                                |
| binlog.000001 |  506 | View_change    |         1 |         645 | view_id=14910585094598745:1                                                                                          |
| binlog.000001 |  645 | Query          |         1 |         710 | COMMIT                                                                                                               |
| binlog.000001 |  710 | Gtid           |         1 |         771 | SET @@SESSION.GTID_NEXT= 'aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa:2'                                                    |
| binlog.000001 |  771 | Query          |         1 |         861 | create database test                                                                                                 |
| binlog.000001 |  861 | Gtid           |         1 |         922 | SET @@SESSION.GTID_NEXT= 'aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa:3'                                                    |
| binlog.000001 |  922 | Query          |         1 |        1044 | use `test`; create table t1(c1 int primary key,c2 text not null)                                                     |
| binlog.000001 | 1044 | Gtid           |         1 |        1105 | SET @@SESSION.GTID_NEXT= 'aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa:4'                                                    |
| binlog.000001 | 1105 | Query          |         1 |        1173 | BEGIN                                                                                                                |
| binlog.000001 | 1173 | Table_map      |         1 |        1216 | table_id: 220 (test.t1)                                                                                              |
| binlog.000001 | 1216 | Write_rows     |         1 |        1258 | table_id: 220 flags: STMT_END_F                                                                                      |
| binlog.000001 | 1258 | Xid            |         1 |        1285 | COMMIT /* xid=40 */                                                                                                  |
+---------------+------+----------------+-----------+-------------+----------------------------------------------------------------------------------------------------------------------+
17 rows in set (0.00 sec)

    25.
   8.第二个实例添加(S2)       
     
     
    

  1. cat > /data/s2/my.cnf <<EOF
    2. 

  2. 

    3. 

  3. [mysqld]
    4. 

  4. # server configuration
    5. 

  5. user=mysql
    6. 

  6. datadir=/data/s2
    7. 

  7. basedir=/usr/local/mysql/
    8. 

  8. port=3308
    9. 

  9. socket=/usr/local/mysql/s2.sock
    10. 

  10. 

    11. 

  11. #复制框架
    12. 

  12. server_id=2
    13. 

  13. gtid_mode=ON
    14. 

  14. enforce_gtid_consistency=ON
    15. 

  15. master_info_repository=TABLE
    16. 

  16. relay_log_info_repository=TABLE
    17. 

  17. binlog_checksum=NONE
    18. 

  18. log_slave_updates=ON
    19. 

  19. log_bin=binlog
    20. 

  20. binlog_format=ROW
    21. 

  21. 

    22. 

  22. #组复制设置
    23. 

  23. #server必须为每个事务收集写集合，并使用XXHASH64哈希算法将其编码为散列
    24. 

  24. transaction_write_set_extraction=XXHASH64
    25. 

  25. #告知插件加入或创建组命名，UUID 
    26. 

  26. loose-group_replication_group_name="aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa"
    27. 

  27. #server启动时不自启组复制
    28. 

  28. loose-group_replication_start_on_boot=off
    29. 

  29. #告诉插件使用IP地址，端口3408用于接收组中其他成员转入连接
    30. 

  30. loose-group_replication_local_address="127.0.0.1:3408"
    31. 

  31. #启动组server，种子server，加入组应该连接这些的ip和端口；其他server要加入组得由组成员同意
    32. 

  32. 
loose-group_replication_group_seeds="127.0.0.1:3407,127.0.0.1:3408,127.0.0.1:3409"

    33. 

  33. loose-group_replication_bootstrap_group=off
    34. 

  34. loose-group_replication_single_primary_mode=FALSE

    35. 

  35. loose-group_replication_enforce_update_everywhere_checks= TRUE
    36. 

  36. 

    37. 

  37. EOF
    38.
   9.用户凭证（S2） 
     
     
    

  1. #启动mysql实例2服务
    2. 

  2. nohup mysqld --defaults-file=/data/s2/my.cnf >/data/s2/nohup.out 2>/data/s2/nohup.out &
    3. 

  3. #登录mysql s1
    4. 

  4. mysql -uroot -h127.0.0.1 -P3308 --skip-password
    5. 

  5. #修改root密码
    6. 

  6. alter user 'root'@'localhost' identified by '123456';
    7. 

  7. #下面操纵不写入二进制日志，避免修改传递给其他实例，先关闭
    8. 

  8. set sql_log_bin=0;

    9. 

  9. #创建拥有replication slave权限mysql用户
    10. 

  10. create user rpl_user@'%';

    11. 

  11. grant replication slave on *.* to rpl_user@'%' identified by 'rpl_pass';

    12. 

  12. flush privileges;

    13. 

  13. #开启二进制写入
    14. 

  14. set sql_log_bin=1;
    15. 

  15. #分布式恢复加入组的server执行第一步
    16. 

  16. 
#change master to语言将server配置为，在下次需要从其他成员恢复状态时，使用group_replication_recovery复制通道的给定凭证。

    17. 

  17. change master to master_user='rpl_user',master_password='rpl_pass' for channel 'group_replication_recovery';

    18. 

  18. #建议每个mysql通过配置唯一主机名，通过DNS或本地设置。（相同可能导致无法恢复）
    19.
   10.添加组 
    
    
    

  1. #安装组复制插件
    2. 

  2. install plugin group_replication soname 'group_replication.so';

    3. 

  3. #检测插件是否安装成功
    4. 

  4. show plugins;

    5. 

  5. +----------------------------+----------+--------------------+----------------------+---------+
| Name                       | Status   | Type               | Library              | License |
+----------------------------+----------+--------------------+----------------------+---------+
......
| group_replication          | ACTIVE   | GROUP REPLICATION  | group_replication.so | GPL     |
+----------------------------+----------+--------------------+----------------------+---------+
    6. 

  6. #添加到复制组（不用再设置启动，该组已在是s1时启动）
    7. 

  7. set global group_replication_allow_local_disjoint_gtids_join=ON;

    8. 

  8. 
start group_replication;

    9. 

  9. #检测组是否创建并已加入新成员
    10. 

  10. select * from performance_schema.replication_group_members;
    11. 

  11. 
+---------------------------+--------------------------------------+-------------+-------------+--------------+
| CHANNEL_NAME              | MEMBER_ID                            | MEMBER_HOST | MEMBER_PORT | MEMBER_STATE |
+---------------------------+--------------------------------------+-------------+-------------+--------------+
| group_replication_applier | 21355e09-16ea-11e7-bb6b-000c29433013 | test1       |        3307 | ONLINE       |
| group_replication_applier | 25b39bc8-16ea-11e7-bc1e-000c29433013 | test1       |        3308 | ONLINE       |
+---------------------------+--------------------------------------+-------------+-------------+--------------+

    12.
   11.测试同步是否正常 
       
       
    

  1. mysql> show databases like 'test';
    2. 

  2. +-----------------+
    3. 

  3. | Database (test) |
    4. 

  4. +-----------------+
    5. 

  5. | test            |
    6. 

  6. +-----------------+
    7.
问题：
#在建立第二个mysql实例s2时，会有以下现象，s2一直处于 RECOVERING 状态。 
      
      
    

  1. +---------------------------+--------------------------------------+-------------+-------------+--------------+
    2. 

  2. | CHANNEL_NAME              | MEMBER_ID                            | MEMBER_HOST | MEMBER_PORT | MEMBER_STATE |
    3. 

  3. +---------------------------+--------------------------------------+-------------+-------------+--------------+
    4. 

  4. | group_replication_applier | 21355e09-16ea-11e7-bb6b-000c29433013 | test1       |        3307 | ONLINE       |
    5. 

  5. | group_replication_applier | 25b39bc8-16ea-11e7-bc1e-000c29433013 | test1       |        3308 | RECOVERING   |
    6. 

  6. +---------------------------+--------------------------------------+-------------+-------------+--------------+
    7.
错误日志如下： 
     
     
    

  1. [ERROR] Slave I/O for channel 'group_replication_recovery': error connecting to master 'rpl_user@test1:3307' - retry-time: 60  retries: 1, Error_code: 2003
    2. 

  2. [ERROR] Plugin group_replication reported: 'There was an error when connecting to the donor server. Check group replication recovery's connection credentials.'
    3.
原因：mysql组复制用的是域名连接，我的主机设置名字为test1,但没有在hosts文件中声明其IP为127.0.0.1。（DNS就更没有了）导致s2无法正常访问s1。因而报错。
解决方法：修改/etc/hosts文件，追加127.0.0.1 对应主机名为test1。然后重新启动组复制就可以。
   
《Mysql Group Repaliation》京东翻译
参考博客 http://www.voidcn.com/blog/d6619309/article/p-6346153.html   
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

数据库

负载均衡与高可用

mysql

高可用

Mysql Group Replication 简介及单主模式组复制配置 的相关文章

  • 如何在不超时的情况下解析大型 CSV 文件？

    我正在尝试解析 50 MB 的 csv 文件 文件本身很好 但我正在尝试解决所涉及的大量超时问题 每个设置上传明智 我可以轻松上传并重新打开文件 但浏览器超时后 我收到 500 内部错误 我的猜测是我可以将文件保存到服务器上 打开它并保留我

  • MYSQL 查询返回“资源 id#12”而不是它应返回的数值

    不知道为什么 但这返回了错误的值 我正在取回此资源 ID 12 而不是我正在寻找的数值 1 执行此操作的代码是 type SELECT account type from user attribs WHERE username userna

  • MySQL 与 PHP 的连接无法正常工作

    这是我的情况 我正在尝试使用 Apache 服务器上的 PHP 文件连接到 MySQL 数据库 现在 当我从终端运行 PHP 时 我的 PHP 可以连接到 MySQL 数据库 使用 php f file php 但是当我从网页执行它时 它只

  • mysql语句中的*星号是什么意思？

    Ex mysql query SELECT FROM members WHERE id id 这意味着选择表中的所有列

  • C#：SQL 查询生成器类

    在哪里可以找到好的 SQL 查询构建器类 我只需要一个简单的类来构建 SQL 字符串 仅此而已 我需要它用于 C 和 MySql 我真的不需要像 Linq 或 NHibernate 这样的东西 谢谢 由于 Google 将我引导至此页面 我

  • 将记录分成两列

    我的数据库中有一个 学生 表 其中包含大约 5 000 条记录 我想将这些记录显示在two分区 如何在不执行查询两次的情况下做到这一点 仅使用单个查询 显示示例http www freeimagehosting net uploads f1

  • MySql 最后插入 ID，连接器 .net

    我正在使用 MySql Connector net 我需要获取最后一个查询生成的插入 id 现在 我假设返回值是MySqlHelper ExecuteNonQuery应该是最后一个插入id 但它只返回1 我正在使用的代码是 int inse

  • 显示表 FULLTEXT 索引列

    我希望运行一个查询 该查询将返回表中全文索引的列列表 该表采用 MyISAM 格式 我将使用 php 来构建查询 理想情况下 我会运行查询 它会返回信息 以便我可以构造一个以逗号分隔的列字符串 例如 名 姓 电子邮箱 这在 MySQL 中可

  • PDO SQLSRV 和 PDO MySQL 在获取 int 或 float 时返回字符串

    当您获取时 PDO MS SQL Server 和 PDO MySQL 都会返回一个字符串数组 即使列的 SQL 类型本应是数字类型 例如 int 或 float 我设法解决了这个问题 但我想了解为什么它们一开始就这样设计 是不是因为PDO

  • 查询中列的顺序重要吗？

    当从 MySQL 表中选择列时 与表中的顺序相比 选择列的顺序是否会影响性能 不考虑可能覆盖列的索引 例如 您有一个包含行 uid name bday 的表 并且有以下查询 SELECT uid name bday FROM table M

  • MYSQL - 查找最近的前一天

    我可以以某种方式 不使用 PHP 找到一周中最近的前一天日期吗 Like 最近的上一个星期二的日期是哪一天 CURDATE INTERVAL WEEKDAY CURDATE wday IF WEEKDAY CURDATE gt wday 0

  • java mysql 准备好的语句

    我正在尝试使用 java 向数据库中进行简单的插入 它告诉我我的 sql 语法已关闭 但是 当我复制打印出来的字符串并将其放入 phpmyadmin 中的 sql 命令中时 它会正确执行该命令 并且我似乎无法弄清楚 java 中的字符串查询

  • MySQL Connector/C++ 库链接错误问题

    PROBLEM 好吧 我一直在尝试遵循 MySQL Forge Wiki 和其他一些网站上的示例代码 这些网站提供了有关如何获得简单数据库连接的教程 但由于某种原因 我的项目总是因链接错误而失败 我可以我自己不明白为什么或如何解决它 我仍在

  • MySQL 使用 ALTER IGNORE TABLE 出现重复错误

    我的 MySQL 中有一个有重复项的表 我尝试删除重复项并保留一项 我没有主键 我可以通过以下方式找到重复项 select user id server id count as NumDuplicates from user server

  • InnoDB 因读未提交而死锁！ - Java - Glassfish - EJB3（JPA/Hibernate）

    几天来 我在使用 Glassfish EJB3 和 Mysql InnoDB 的 Java 应用程序上遇到了死锁问题 配置 Mysql InnoDB Ver 14 12 Distrib 5 0 51a 适用于 debian linux gn

  • 如何正确转义mysql？

    我刚刚发现如果我写 select from tbl where name like foo 然后添加 foo 作为参数及其值 a 用户数据 它不会正确转义 我勒个去 它想要 a 即使我使用参数 我还是忍不住觉得我对 sql 注入持开放态度

  • Mysql 中 UNION 子句的替代方案

    我有两张桌子 表 a 表 b table a ID 1 2 3 4 5 7 table b ID 2 3 4 5 6 我必须得到这样的输出而无需UNION命令 ID 1 2 3 4 5 6 7 注意 我有一个联合解决方案 select fr

  • 在 MySQL 中使用 COUNT 时如何返回 0 而不是 null

    我使用此查询返回存储在 sTable 中的歌曲列表以及存储在 sTable2 中的总项目数 SQL queries Get data to display sQuery SELECT SQL CALC FOUND ROWS str repl

  • Laravel leftJoin 仅右表的最后一条记录

    我是 Laravel 的新手 我有两张桌子 1 产品 2 价格 products id product int p key name varchar prices id price int p key id product int

  • MySQL 按重复项从上到下排序

    我有一个lammer问题 因为我不是mysql专业人士 我有类似的字段 id color 1 red 2 green 3 yellow 4 green 5 green 6 red 我想按重复项进行分组 最常见的重复项先进行分组 所以应该这样

随机推荐

  • Python脑电图(EEG)青光眼即时诊断神经网络模型

    脑电图 EEG EEG 测量由大脑神经元内的离子电流引起的电压波动 临床上 EEG 是指在一段时间内记录大脑的自发电活动 如从放置在头皮上的多个电极记录的那样 EEG 结果显示大脑活动的变化可能有助于诊断大脑状况 对 EEG 数据集进行目视

  • 有没有20行以内，却很有意思的C语言代码？

    分享一组有趣代码 佛祖 耶稣 龙 键盘 编程序的小伙伴都有过这样的经历 在编完程序的时候都希望自己的程序不会出错 因为出错以后一行一行检查的感觉真的太痛苦了 这里我介绍了一个有意思的代码 可以直接在编辑器里复制进去 保佑自己的代码不出错哈哈

  • 2021_lg_03.SQL实战：如何用sql计算用户留存问题

    如何用sql计算用户留存问题 一 留存 1 留存的含义 留存 指基准日到APP的用户在之后的n日当天返回APP的人数 留存率 基准日之后的n天当日返回的用户数 基准日的用户数 100 或者指基准日产生某个行为的用户在之后的第一天 第二天 第

  • 启动docker服务遇到问题：Job for docker.service failed because the control process exited with error code.

    问题 通过systemctl start docker启动docker服务时 遇到了错误 查看docker serviece后发现 原因 之前修改了 etc docker daemon json文件 添加了dns 114 114 114 1

  • PID控制器开发笔记之十一：专家PID控制器的实现

    前面我们讨论了经典的数字PID控制算法及其常见的改进与补偿算法 基本已经覆盖了无模型和简单模型PID控制经典算法的大部 再接下来的我们将讨论智能PID控制 智能PID控制不同于常规意义下的智能控制 是智能算法与PID控制算法的结合 是基于P

  • 【程序员面试金典】找出缺失的整数

    题目描述 数组A包含了0到n的所有整数 但其中缺失了一个 对于这个问题 我们设定限制 使得一次操作无法取得数组number里某个整数的完整内容 唯一的可用操作是询问数组中第i个元素的二进制的第j位 最低位为第0位 该操作的时间复杂度为常数

  • 项目打包工具使用教程（innosetup）

    夏季小学期的时候用VS2015敲了一个关于WinForm的项目 和C 类似 项目完成之后想把它发布成一个可以在win10系统里直接的程序 而且最好有和我们平时安装软件一样 一步步选择 效果图 首先下载innosetup 网址 https p

  • 转载：MATLAB R2018b 安装教程

    MATLAB R2018b 安装教程 LegendLYC 2019 03 26 22 21 50 46687 收藏 116 分类专栏 安装教程 div class div

  • Java实现：猴子吃桃问题

    Java实现 猴子吃桃问题 文章目录 Java实现 猴子吃桃问题 1 问题 2 解决方案 3 实现代码 4 执行结果 5 解决方法说明 穷举法 1 问题 猴子吃桃问题 有一只猴子第一天摘下若干个桃子 当即吃掉了一半 又多吃了一个 第二天又将

  • TypeError:__init__() got an unexpected keyword argument 'xxx'

    如上图所示 出现此类问题通常是打错了一些英文

  • 浙大PAT 2-13. 两个有序序列的中位数 （解题思路）

    2 13 两个有序序列的中位数 时间限制 40 ms 内存限制 32000 kB 代码长度限制 8000 B 判题程序 Standard 已知有两个等长的非降序序列S1 S2 设计函数求S1与S2并集的中位数 有序序列A0 A1 AN 1的

  • 关于如何自定义docker的网络网段

    在修改docker的网段前 请务必关闭所有正在运行中的容器 编辑文件 etc docker daemon json 如果没有则需要创建 cat daemon json default address pools base 172 40 0

  • Powershell - 环境设置

    PowerShell 图标可以在任务栏和开始菜单中找到 只需点击图标 它就会打开 要打开它 只需单击图标 然后将打开以下屏幕 这意味着 PowerShell 已准备好供你使用 PowerShell 版本 最新版本的 PowerShell 是

  • JDK多版本配置及切换版本不生效问题解决

    一 准备工作 首先你要有多个版本的jdk 如果没有请移至 https www oracle com java technologies downloads 下载 具体下载方法可参考 Java同学入职环境安装全讲解 二 配置环境变量 在环境变

  • es6 实现数组的操作

    1 实现数组的去重 1 1 方法一 let arr id 1 name aa id 2 name bb id 3 name cc id 4 name dd id 5 name ee id 1 name aa id 1 name aa id

  • 医疗产业数字化转型现况及方向

    报告以医疗产业的各种应用场景为切入点 分析不同场景下数字化转型程度和路径 通过对医疗产业数字化整体发展现况的解析 探讨医疗产业链中数字化场景应用所带来的机遇及相应挑战 基于已描绘的医疗产业链数字化转型图谱 挖掘在医疗数字化转型浪潮中做出突出

  • 被问 Linux 命令 su 和 sudo 的区别？当场蒙了！

    tanjuntao github io 之前一直对 su 和 sudo 这两个命令犯迷糊 最近专门搜了这方面的资料 总算是把两者的关系以及用法搞清楚了 这篇文章来系统总结一下 1 准备工作 因为本篇博客中涉及到用户切换 所以我需要提前准备好

  • idea插件生成dao类service类controller类以及mapper.xml

    idea插件生成dao类service类controller类以及mapper xml 安装插件Easycode和MybatisX 不用自己写代码 1 Files Settings Plugins 分别搜索Easycode和MybatisX

  • Redis 持久化之 RDB 与 AOF 详解

    Redis 持久化 我们知道Redis的数据是全部存储在内存中的 如果机器突然GG 那么数据就会全部丢失 因此需要有持久化机制来保证数据不会因为宕机而丢失 Redis 为我们提供了两种持久化方案 一种是基于快照 另外一种是基于 AOF 日志

  • Mysql Group Replication 简介及单主模式组复制配置

    一 Mysql Group Replication简介 Mysql Group Replication MGR 是一个全新的高可用和高扩张的MySQL集群服务 高一致性 基于原生复制及paxos协议的组复制技术 以插件方式提供一致数据安全保

热门标签