正文

揭秘分布式系统：如何高效、稳定地生成唯一序列号？

/0 浏览量
0321

在分布式系统中，唯一序列号的生成是一个常见且关键的需求。序列号在事务处理、分布式锁、分布式ID生成等领域有着广泛的应用。本文将深入探讨如何在分布式系统中高效、稳定地生成唯一序列号。

1. 序列号生成的挑战

在分布式系统中，由于不同节点可能同时生成序列号，因此存在以下挑战：

  • 唯一性：确保序列号在全局范围内唯一。
  • 高效性：序列号生成过程需要快速，以避免成为系统的瓶颈。
  • 稳定性：序列号生成服务需要稳定可靠，不受网络延迟或服务故障的影响。

2. 常见的序列号生成方法

以下是一些常见的序列号生成方法：

2.1 基于时间戳

基于时间戳的生成方法是最简单也是最直接的方式。每个序列号包含一个时间戳和一个自增的序号。

public class TimestampSequenceGenerator {
    private long lastTimestamp = -1L;
    private long sequence = 0L;

    public synchronized long nextId() {
        long timestamp = timeGen();
        if (timestamp < lastTimestamp) {
            throw new RuntimeException(String.format("Clock moved backwards. Refusing to generate id for %d milliseconds", lastTimestamp - timestamp));
        }
        if (lastTimestamp == timestamp) {
            sequence = (sequence + 1) & 0x3FFFFFFFL;
            if (sequence == 0) {
                timestamp = tilNextMillis(lastTimestamp);
            }
        } else {
            sequence = 0L;
        }
        lastTimestamp = timestamp;
        return ((timestamp - TIMESTAMP_OFFSET) << SEQUENCE_BITS) | sequence;
    }

    private long tilNextMillis(long lastTimestamp) {
        long timestamp = timeGen();
        while (timestamp <= lastTimestamp) {
            timestamp = timeGen();
        }
        return timestamp;
    }

    private long timeGen() {
        return System.currentTimeMillis();
    }
}

2.2 基于数据库

利用数据库的唯一约束特性，可以在数据库中生成唯一序列号。

CREATE TABLE sequence (
    name VARCHAR(50) NOT NULL,
    current_value BIGINT NOT NULL,
    increment BY INT NOT NULL
);

INSERT INTO sequence (name, current_value, increment) VALUES ('seq_id', 0, 1);

2.3 基于雪花算法（Snowflake）

雪花算法是Twitter开源的一种分布式ID生成算法。它能够生成64位的长整型ID，包含时间戳、数据中心ID、机器ID和序列号。

public class SnowflakeIdWorker {
    private long workerId;
    private long datacenterId;
    private long sequence = 0L;
    private long twepoch = 1288834974657L;
    private long workerIdBits = 5L;
    private long datacenterIdBits = 5L;
    private long maxWorkerId = -1L ^ (-1L << workerIdBits);
    private long maxDatacenterId = -1L ^ (-1L << datacenterIdBits);
    private long sequenceBits = 12L;

    private long workerIdShift = sequenceBits;
    private long datacenterIdShift = sequenceBits + workerIdBits;
    private long timestampLeftShift = sequenceBits + workerIdBits + datacenterIdBits;
    private long sequenceMask = -1L ^ (-1L << sequenceBits);

    private long lastTimestamp = -1L;

    public SnowflakeIdWorker(long workerId, long datacenterId) {
        if (workerId > maxWorkerId || workerId < 0) {
            throw new IllegalArgumentException(String.format("worker Id can't be greater than %d or less than 0", maxWorkerId));
        }
        if (datacenterId > maxDatacenterId || datacenterId < 0) {
            throw new IllegalArgumentException(String.format("datacenter Id can't be greater than %d or less than 0", maxDatacenterId));
        }
        this.workerId = workerId;
        this.datacenterId = datacenterId;
    }

    public synchronized long nextId() {
        long timestamp = timeGen();
        if (timestamp < lastTimestamp) {
            throw new RuntimeException(String.format("Clock moved backwards. Refusing to generate id for %d milliseconds", lastTimestamp - timestamp));
        }
        if (lastTimestamp == timestamp) {
            sequence = (sequence + 1) & sequenceMask;
            if (sequence == 0) {
                timestamp = tilNextMillis(lastTimestamp);
            }
        } else {
            sequence = 0L;
        }
        lastTimestamp = timestamp;
        return ((timestamp - twepoch) << timestampLeftShift) | (datacenterId << datacenterIdShift) | (workerId << workerIdShift) | sequence;
    }

    private long tilNextMillis(long lastTimestamp) {
        long timestamp = timeGen();
        while (timestamp <= lastTimestamp) {
            timestamp = timeGen();
        }
        return timestamp;
    }

    private long timeGen() {
        return System.currentTimeMillis();
    }
}

3. 选择合适的序列号生成方法

选择合适的序列号生成方法需要考虑以下因素：

  • 系统规模：对于大规模系统，雪花算法等复杂算法可能更适合。
  • 性能要求：基于时间戳的生成方法简单高效，但可能存在性能瓶颈。
  • 稳定性要求：基于数据库的生成方法可能受到数据库性能影响。

4. 总结

在分布式系统中，生成唯一序列号是一个关键需求。通过了解不同的生成方法及其优缺点，可以更好地选择适合自己系统的序列号生成方案。本文介绍了基于时间戳、数据库和雪花算法的序列号生成方法，并提供了相应的代码示例。希望这些信息能够帮助您在分布式系统中高效、稳定地生成唯一序列号。

-- 展开阅读全文 --