插件窝 干货文章 怎样在ThinkPHP6中进行数据库水平分库操作?

怎样在ThinkPHP6中进行数据库水平分库操作?

数据库 分库 gt 连接 626    来源:    2024-10-24

随着业务规模的扩大,数据库所需处理的数据量也不断增加,导致单一数据库面临着压力。这时候我们就需要进行数据库水平分库操作,将数据分散到不同的数据库中,从而提高系统的性能和可扩展性。本文将介绍在thinkphp6中如何进行数据库水平分库操作。

一、什么是数据库水平分库?

数据库水平分库是将一个数据库中的数据分散到多个数据库中的过程。我们可以将数据按照某种规则(比如按照用户ID或时间段)划分到不同的数据库中,从而降低单一数据库的负载压力。同时,在数据量大的情况下,水平分库还能提高查询效率,增强数据安全性。

二、ThinkPHP6中水平分库的实现

在ThinkPHP6中,我们可以通过使用数据库中间件的方式来实现水平分库。 将数据库中间件放在ThinkPHP6的MySQL连接中,用于控制分库。

立即学习“PHP免费学习笔记(深入)”;

  1. 安装Thinkswoole

在ThinkPHP6中,采用Thinkswoole作为数据库中间件。我们需要在项目中安装Thinkswoole。

在composer.json文件中加入ThinkSwoole的版本信息,然后使用composer进行安装。

  1. 修改数据库配置

首先找到config/database.php文件,将MySQL连接替换成Swoole连接。注释掉原来的MySQL连接信息:

// 'mysql' => [
    //     // 默认数据连接标识
    //     'default' => env('database.driver', 'mysql'),
    //     // 数据库连接信息
    //     'connections' => [
    //         'mysql' => [
    //             // 数据库类型
    //             'type' => 'mysql',
    //             // 主机地址
    //             'host' => env('database.hostname', '127.0.0.1'),
    //             // 数据库名
    //             'database' => env('database.database', ''),
    //             // 用户名
    //             'username' => env('database.username', 'root'),
    //             // 密码
    //             'password' => env('database.password', ''),
    //             // 端口
    //             'hostport' => env('database.hostport', '3306'),
    //             // 数据库连接参数
    //             'params' => [],
    //             // 数据库编码默认采用utf8
    //             'charset' => 'utf8',
    //             // 数据库表前缀
    //             'prefix' => env('database.prefix', ''),
    //             // 数据库调试模式
    //             'debug' => env('database.debug', true),
    //             // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
    //             'deploy' => 0,
    //             // 数据库读写是否分离 主从式有效
    //             'rw_separate' => false,
    //             // 读写分离后 主服务器数量
    //             'master_num' => 1,
    //             // 指定从服务器序号
    //             'slave_no' => '',
    //             // 是否严格检查字段是否存在
    //             'fields_strict' => true,
    //             // 数据集返回类型
    //             'resultset_type' => 'array',
    //             // 自动写入时间戳字段
    //             'auto_timestamp' => false,
    //             // 时间字段取出后的默认时间格式
    //             'datetime_format' => false,
    //             // Builder类
    //             'builder' => '',
    //             // Query类
    //             'query' => '\think\db\Query',
    //             // 是否需要进行SQL性能分析
    //             'sql_explain' => false,
    //         ],
    //     ],
    // ],

添加Swoole连接信息:

 // swoole
    'swoole' => [
        // 默认数据连接标识
        'default' => 'swoole',
        // 数据库连接信息
        'connections' => [
            'swoole' => [
                // 数据库类型
                'type' => 'mysql',
                // 服务器地址
                'hostname' => [
                    '127.0.0.1:3305',
                    '127.0.0.1:3306',
                ],
                // 数据库名
                'database' => 'test',
                // 用户名
                'username' => 'root',
                // 密码
                'password' => '',
                // 端口
                'hostport' => '',
                // 数据库连接参数
                'params' => [],
                // 数据库编码默认采用utf8mb4
                'charset' => 'utf8mb4',
                // 数据库表前缀
                'prefix' => '',
                // 数据库调试模式
                'debug' => true,
                // 数据库部署方式:0 集中式(单一服务器),1 分布式(主从服务器)
                'deploy' => 0,
                // 数据库读写是否分离 主从式有效
                'rw_separate' => false,
                // 读写分离后 主服务器数量
                'master_num' => 1,
                // 指定从服务器序号
                'slave_no' => '',
                // 自动写入时间戳字段
                'auto_timestamp' => false,
                // 时间字段取出后的默认时间格式
                'datetime_format' => 'Y-m-d H:i:s',
                // Builder类
                'builder' => '',
                // Query类
                'query' => '\think\db\Query',
                // 是否需要进行SQL性能分析
                'sql_explain' => false,
            ],
        ],
    ],

上述代码中,我们定义了两个服务器地址(127.0.0.1:3305和127.0.0.1:3306),这是为了实现多数据节点的分库。数据库名、用户名、密码等信息不变。

  1. 创建数据库中间件

在app/middleware目录下创建Db.php的数据库中间件,添加以下代码:

<?php
namespace appmiddleware;

use thinkRequest;
use thinkContainer;

class Db
{
    public function handle(Request $request, Closure $next)
    {
        $serverIds = $this->getServerIds($request);
        //定义一个连接池
        $conns = [];
        foreach($serverIds as $sid) {
            $sid = $request->$sid;
            if(empty($conns[$sid])) {
                $conns[$sid] = Container::getInstance()
                                         ->make('db')->connect($sid);
            }
        }
        Container::getInstance()->bind('db', function() use ($conns) {
            return $conns;
        });
        return $next($request);
    }

    protected function getServerIds(Request $request)
    {
        return ['uid'];
    }
}

这里创建了一个名为Db的中间件。在handle方法中,首先获取当前请求的服务器ID数组。然后依次将这些服务器地址与连接池$cons中已有的地址比较,如果不存在就加入连接池中。最后将连接池$conns绑定到容器实例中。在getServerIds方法中,我们可以设置服务器ID的名称,这里默认为uid。

  1. 注册中间件

在config/middleware.php中加入以下代码:

return [
    ...
    appmiddlewareDb::class,
];

这段代码是用来注册中间件的,在中间件执行活动列表中添加了我们的Db中间件。

  1. 实现分库操作

接下来,我们将实现在模型中水平分库操作。这里以用户表为例,将用户ID以10万为一个库的界限进行分片操作,表示用户ID在0-10万之间的数据存储在一个数据库里,以此类推,直到将用户ID在90万-100万之间的数据存储在第10个数据库里。

<?php
namespace appmodel;

use thinkModel;

class User extends Model
{
    protected $connection = [
        1 => 'user_1',
        2 => 'user_2',
        3 => 'user_3',
        4 => 'user_4',
        5 => 'user_5',
        6 => 'user_6',
        7 => 'user_7',
        8 => 'user_8',
        9 => 'user_9',
        10 => 'user_10',
    ];

    protected $pk = 'uid';

    public function getTableName(): string
    {
        $id = ceil($this->id / 100000);
        return $this->connection[$id] . '.' . $this->table;
    }
}

这里我们定义了10个数据库连接,每个连接表示一个数据库分片,实现了水平分库的目的。接着我们定义getTableName方法,用于获取当前模型对应的数据表名。根据模型中的主键ID值计算出需要访问的数据库连接,返回数据库连接和数据表名称的组合。

总结:

本文介绍了在ThinkPHP6中的水平分库操作。随着业务的不断扩展和数据规模的增加,水平分库可以提高系统的性能和可扩展性,以及增强数据安全性。在ThinkPHP6中可以使用Thinkswoole中间件等方法实现水平分库操作。