• 探索 PHP 如何生成全局唯一的 id


    探索开始

    1.基于时间 + 随机码生成 id

    php 提供了一个生成唯一值生成函数 uniqid ($prefix,$more_entropy), 这是一个基于毫秒级时间生成 id 的函数,不带参数执行输出 13 位字符随机码,$prefix 返回随机码的前缀,$more_entropy 设为 true 时为加熵,返回字符会变为 23 位(不包括 $prefix)。编辑代码如下:

    • 单进程版代码

        $start_time = microtime(true);
        $container = [];
        $all_count = 1000000; //生成id总数量(一百万个)
        for ($i = 0; $i < $all_count; $i++) {
            //生成随机id
            $random = uniqid();  //长这样子:5e1401c70b7db
            $container[$random] = $i; //去掉重复id
        }
        $waste_time = bcsub(microtime(true), $start_time, 4);//计算时间
        $conclusion = '耗时:' . $waste_time . 's,共生成id个数:' . $all_count . ',重复id个数:' . ($all_count - count($container));
        dump($conclusion);
      

    执行代码,返回

    多次重复执行,发现重复 id 都是 0,耗时都在 60 秒以上,平均每秒可以生成一两万个 id,感觉 uniqid () 不加参数也不错嘛,但是这是幻觉而已,坏得很,经不起考验的。

    • 多进程版代码
            $start_time = microtime(true);
            $process_count = 50; //进程数量
            $all_count = 1000000; //生成id总数量(一百万个)
            $per_process_count = floor($all_count / $process_count); //每个进程生成id总数量
            for ($i = 0; $i < $process_count; $i++) {
                //开多进程模拟真实场景
                MultiProcessHelper::instance($process_count)->multiProcessTask(function () use ($per_process_count, $i) {
                    //生成随机id
                    $container = [];
                    for ($j = 0; $j < $per_process_count; $j++) {
                        $random = uniqid(); //长这样子:5e1401c70b7db
                        $container[] = $random;
                    }
                    //把生成的id放到缓存里面
                    Cache::set($i, $container);
                });
            }
    
            MultiProcessHelper::recycleProcess();//回收子进程
            //以下是整理多个并发进程生成id的重复情况
            $container = [];
            for ($i = 0; $i < $process_count; $i++) {
                $res = Cache::get($i);
                foreach ($res as $v) {
                    $container[$v] = 0; //去掉重复id
                }
            }
            $waste_time = bcsub(microtime(true), $start_time, 4);//计算时间
            $conclusion = '耗时:' . $waste_time . 's,共生成id个数:' . $all_count . ',重复id个数:' . ($all_count - count($container));
            dump($conclusion);
    

    执行代码,返回

    结果发现时间变短了,平均每秒生成的 id 数量达到了 10 万个。但是别忘了,异步执行任务的进程是 50 个,榨干了 cpu 了。再看,重复个数不再为 0,而是有 10 万个之多,大概 1/10 都重复了,所以不加熵使用 uniqid 不能保证生成唯一 id。

    如果设置 $prefix 为 mt_rand (),mt_rand () 会生成 0 到最大随机数数(21 亿左右)的随机整数,$more_entropy=true,那样将返回更加随机的 id,利用这一点设计随机码生成规则。编辑代码如下:

    $random = uniqid(mt_rand(), true);  //长这样子:21083019475e14021cdceb11.02999582
    
    • 单进程版执行结果

    这个超强了,每秒可以生成百万级别的 id(加熵之后,使用的算法不一样了,总之加熵时 uniqid 更快了),重复率为 0

    • 多进程版执行结果

    重复率为 0,可以断定一该方式生成唯一 id 可行,性能和重复概率表现很好,唯一不足就是 id 无序

    2. 使用 session_create_id ()

    该函数是 php7.1 之后提供的,是 php 用来生成 session_id 使用的,php 使用它来生成每个请求会话,应该唯一是相当好的,不然呢!测试一波:

    $random = session_create_id(); //长这样子:6khfg75a13khre330nqu1t84ab
    
    • 单进程版执行结果

    • 多进程版执行结果

    由上可见,session_create_id 性能和重复率都表现不错,值得信赖

    3. 使用 uuid

    uuid 已经形成的国际规范,目前出来的版本有四五个,最常用的是由时间戳 + 顺序号 + 机器标识 + 进程标识规则生成的 id,与此相关的 composer 包很多了,不造重车轮是最大的生产力,直接选用 https://packagist.org/packages/ramsey/uuid 包,测验一下:

    $random = Uuid::uuid1()->toString(); //长这样子:480dac52-3102-11ea-89e3-525400cae48b
    
    • 单进程版执行结果

    • 多进程版执行结果

    结果令人意外,uuid 生成速度还行,但是多进程异步生成时,并不能保证高标准的唯一性,出现了 8 个重复的,虽然很少,但是很意外,说好的全球唯一呢,有点虚,哈哈!总的来说还是不错的,重复率已经做到相当低了。

    4. 使用雪花算法

    以上三种都是只会生成无序的随机字符,但是我们有些时候需要依靠唯一 id 对数据库进行排序的,比如我们要生成全库唯一 id 时,我们就需要 id 满足顺序性、整数类型(提高索引效率),而由雪花算法生成的 id 可以满足这一点(雪花 id 有时间顺序)。雪花算法原理图如下:

    安装 composer 包:来使用

    $snowflake=new Snowflake(); 
    //可以添加机器码,可设置1024个,以增强随机性,但1024太小治标不治本,当集群进程数超于这个时,加上多机器时间戳的不靠谱了,还是会出现问题,这里只做简单使用
    $random = $snowflake->id(); //长这样子:55141599398592512
    
    • 单进程版执行结果

    • 多进程版执行结果

    分析结果,单进程使用雪花算法生成 id,可以保持十几万个每秒的生成速度,且重复率保持为 0,但是去到并发生成时,问题出现了,重复了很多,重复率 1/2,恐怖,可断,雪花算法如上面那样简单使用的话,是难以适合高并发场景的!

    5.id 计算器生成 id

    id 计算器生成 id 就是的首要工作就是要设置一个公共变量,该变量增量为 1,每次进程从这里申请一次 id,id 的值都会加一,这样一直累加下去,就保证了全局唯一性,且都是整数。这方面,Redis 很能胜任,一是性能很好,二是跨机器,另外 Redis 提供的原子性函数 incr,简直天造地设了。来,操作一波:

    $random = Cache::inc('id');  //长这样子:1,2,3,4,5,...
    
    • 单进程版执行结果

    • 多进程版执行结果

    这种方式生成的 id, 能够保持很好的 id 递增性,即保证的顺序性,由于 incr 是原子操作,重复率几乎为 0,产生速率,有赖于 Redis 的软件性能、网络等等因素,也算是了比较好方案了。

    总结

    以上各种id生成方式,各有各的优缺点,不能一概而论。要哪一种更好,还是要看具体需求,适合就是最好的。但总的来说,唯一性、性能是绝对高尚的。
    除了上述几种方式之外,还有很多生成唯一id的方案,也可以奇技淫巧一下(猥琐发育),在上面几种方式为基础打造新的更加高效和可靠的生成方式
    

    上面提到的雪花算法生成唯一 ID 的 Package,已内置了 Redis 的支持,即使在多线程环境下,也不会生成重复的 ID:

    // 在 Laravel 中,你可以这样使用
    $snowflake = (new Snowflake())->setSequenceResolver(
        new LaravelSequenceResolver($this->app->get('cache')->store())
    );
    
    $snowflake->id();
    

    底层是基于 redis psetex 实现的并发锁,保证同一时间、同一机器中心 ID、同一 workID 下生成的 ID 不重复。

    $lua = "return redis.call('exists',KEYS[1])<1 and redis.call('psetex',KEYS[1],ARGV[2],ARGV[1])";
    if ($store->connection()->eval($lua, 1, $key = $currentTime, 1, 1000)) {
        return 0;
    }
    return $store->connection()->incrby($key, 1);
    
  • 相关阅读:
    mac 给 iPhone 充电一直闪跳 / Mac usb 连接闪动/跳动/时断等情况的解决
    【转】理解 configure 脚本
    python中的none类型
    [转]文件下载方式
    [转]这篇文章把跨域讲清楚了
    c开发php拓展
    golang socket编程,实现http协议
    【转】浏览器何时发送一个Option请求
    linux 任务的前后台管理
    【转】Go 中 io 包的使用方法
  • 原文地址:https://www.cnblogs.com/caibaotimes/p/14481986.html
Copyright © 2020-2023  润新知