官方网站-首页

日常生活中，网络购物、在线支付、地图导航等便捷的应用，人们已经习以为常，以至于我们几乎不会关注其背后的技术。这自然离不开通信网络的飞跃发展，而那些功能的实(shí)现(xiàn)则(zé)要(yào)归(guī)功(gōng)于(yú)分(fēn)布(bù)式(shì)系(xì)统(tǒng)的(de)进(jìn)步(bù)。本(běn)文通(tōng)过(guò)网(wǎng)络(luò)购(gòu)票(piào)的(de)实(shí)例(lì)，简(jiǎn)要(yào)介(jiè)绍(shào)分(fēn)布(bù)式系统的概念，包括其核心的Paxos算法，以及它如何应对网络断开的挑战。

撰文 | 陈清扬

一年一度的春运又到了，据估计，今年铁路客运量或超5.1亿人次，日均1275万人次，人们在比拼手速抢票的背后，12306的计算机系统是如何快速响应海量的请求的呢？单台服务器由于有限的计算能力无法快速响应成(chéng)千(qiān)上(shàng)万(wàn)的请求，想象一下线下的购票大厅只有一个售票窗口却有一万人排队的场景，人们恐怕都要带上睡袋来排队了。

那如何加速售(shòu)票(piào)的(de)过(guò)程来减少人们的等待时间呢？首先窗口的工作人员可以加快手速，以极快的(de)速度进行操作，但是单个工作人员的手速再快也有一个上限；另一个办法就是(shì)在(zài)大(dà)厅(tīng)开(kāi)设(shè)多(duō)个(gè)窗口，同时进行售票。网络售票系统也是一样的，单台服务器处理不过来，就使用多台服务器来进行协同处理，这就需要“分布式系统”登场了！

什么是分布式系统？

通俗地说，分布式系统是指，一群计算机共同完成一个任务。这些计算机也可称为节点，它们(men)通(tōng)过(guò)网(wǎng)络连接在一起，分工合作，但对用户表现得像一个整体。不仅仅是12306售票系统，你刷视频时看到的推荐、搜索引擎给出的搜索结果、外卖平台的订单分配，背后都是分布式系统在默默运行。相比单个服务器，使用分布式系统既能提高系统的性能、响应请求的速度，又能提供更好的可靠性，部分节点宕机(jī)或者断网了，整个系统依然能继续提供服务。

分布式系统虽有这些好处，但是它带来的复杂性也给计算机系统设计提出了挑战。这里就涉及并发（concurrency）以及数据一致（consistency）的问题。以售票为例，试想以下场景，人在北京的张三和人在广州的李四在抢同一张票，张三的抢票请求被分发到了华北地区的某台服务器，而李四的请求被分给了华南地区的某服务器，这俩服务器现在可以同时并行地处理两个人的抢票请求，系统整体的响应速度很快，但是系统如何恰当地协作使得票不会被卖重呢？

此外，分布式系统的另一大特点是存在部分失效（partial failure）的可能性，顾名思义，就是系统部分出现故障，但系统其他部分仍可运行。分布式(shì)系(xì)统(tǒng)由(yóu)众(zhòng)多(duō)计(jì)算(suàn)机(jī)构(gòu)成(chéng)，而且通过网(wǎng)络(luò)连(lián)接(jiē)。显(xiǎn)然(rán)，不(bù)管(guǎn)是(shì)计(jì)算(suàn)机(jī)还(hái)是(shì)网(wǎng)络(luò)本(běn)身(shēn)都(dōu)(dōu)有(yǒu)(yǒu)可(kě)(kě)能(néng)(néng)出(chū)(chū)现(xiàn)故(gù)障(zhàng)，譬(pì)如(rú)某(mǒu)处(chù)停(tíng)电(diàn)了(le)、网(wǎng)线(xiàn)断(duàn)了(le)，又(yòu)或(huò)是(shì)某(mǒu)台(tái)计(jì)算(suàn)机(jī)操(cāo)作(zuò)系(xì)统(tǒng)故(gù)障(zhàng)，等(děng)等(děng)。即(jí)使(shǐ)一(yī)台(tái)机(jī)器(qì)发(fā)生(shēng)故(gù)障(zhàng)的(de)概(gài)率(lǜ)很(hěn)低(dī)，然(rán)而(ér)当(dāng)计(jì)算(suàn)机(jī)的(de)数(shù)量(liàng)多(duō)了(le)，对(duì)于(yú)整(zhěng)个(gè)系(xì)统来说，故障会非常频繁。

我们可以做一个简单的计算，假设系统中有1000台计算机，每台平均一年只出一次故障（故障可能由任何原因导致），即每天出现故障的概率是1/365；反之，每天不出现故障概率是1-1/365，约等于0.99726。这看起来是一个很大的概率，但是对整个系统而言，每天所有机器都不出故障的概率则是0.99726的1000次方 ，约为0.064。这里还未考虑网络问题，所以对于系统来说，不出故障几乎是不可能的。

因此，在分布式系统的设计中，如何在部分节点故障或者网络断开的情况下，依然提供正常的服务是必须考虑的问题。

分布式系统的基石——共识算法（consensus algorithm）

共识算法在分布式系统中扮演着核心角色，它使得系统在没有共享的内存，只能通过发送消息通信，并且部分节点可能失效的情况下，整个系统依然能够就某个问题达成共识。譬如某一个特定的(de)座位到底是卖了还是没卖，是卖给了张三还是李四等等，需要系统达成共识才能继续执行。

分布式系统先驱、著名图灵奖得主Leslie Lamport于1990年提出了现代共识算法的基础——Paxos算法。Lamport用Paxos这个名字的缘由很有意思。Paxos本是希腊伊奥尼亚海有着悠久历史的小岛，Lamport想象，考古学家发现在远古时代小岛上有一个“业余议会”（part-time parliament），议员们通过信使传递消息对议案进行表决，但是信使不可靠，消息可能传递不到或者被延迟，而且议员本身也有不来开会的可能性，在这种情况下，议员们如何对某议案达成一致？在论文中，Lamport使用这个虚构在Paxos小岛的议会为框架，提出了一个在不可靠通信的情况下实现共识的算法，并给出了严格的数学证明。1990年Lamport将论文提交给ACM Transactions on Computer Systems，审稿人表示论文还算是有趣，但看起来并不很重要，而且(qiě)关于(yú)Paxos故(gù)事(shì)的(de)部(bù)分建议去掉。Lamport表示，审稿人怎么这么一点幽默感都没有，并拒绝对论文做任何修改(gǎi)。后来，分布式系统的另一位先驱Butler Lampson读懂了论文，并和Nancy Lynch等领域大佬一起发表了他们自己的证明，此时Lamport再次考虑将论文发表，最终在一众同行的推动下，论文于1998年发表，现在已经成为分布式系统的基石。

分(fēn)布(bù)式(shì)系(xì)统先驱Leslie Lamport 丨图片来源：wiki

下面我们以卖票系统为例，简述一下Paxos算法的思想，以及它如何在节点失效的情况依然达成共识。为了简化，假设系统中只有3台服务器（节点；3个节点是演(yǎn)示(shì)Paxos算(suàn)法(fǎ)所(suǒ)需(xū)的(de)最(zuì)小(xiǎo)数(shù)量(liàng)），并(bìng)且(qiě)只(zhǐ)卖(mài)一(yī)张(zhāng)票(piào)（卖(mài)多(duō)张(zhāng)票(piào)也(yě)可(kě)以(yǐ)理(lǐ)解(jiě)成(chéng)反(fǎn)复(fù)卖(mài)一(yī)张(zhāng)票(piào)的(de)过(guò)程(chéng)）。此(cǐ)外(wài)，我(wǒ)们(men)还(hái)需(xū)要(yào)先(xiān)简述一下算法的假定。

首先，Paxos算法假定一个节点如果故障则完全停止响应，而不会继续在网络发送错误的消息以干扰系统，它被修复之后会回到系统(tǒng)中(zhōng)继(jì)续(xù)响(xiǎng)应(yīng)，这(zhè)种(zhǒng)类(lèi)型(xíng)的(de)失(shī)效(xiào)被(bèi)称(chēng)为(wèi)fail-stop（失(shī)败(bài)终(zhōng)止(zhǐ)），即(jí)fail后(hòu)就(jiù)stop了(le)。其(qí)次(cì)，Paxos是(shì)一(yī)个(gè)基(jī)于(yú)多(duō)数(shù)派(pài)投(tóu)票(piào)的(de)算(suàn)法(fǎ)，即(jí)需(xū)要(yào)多(duō)数节点投票通过才被认为是共识；Paxos需要2m+1个(gè)节(jié)点(diǎn)才(cái)能(néng)容(róng)纳(nà)m个(gè)节(jié)点(diǎn)失(shī)效(xiào)。也(yě)就(jiù)是(shì)说，要能够容纳1个(gè)节(jié)点(diǎn)失(shī)效(xiào)，至(zhì)少(shǎo)系(xì)统(tǒng)需(xū)要(yào)有(yǒu)3个(gè)节(jié)点(diǎn)（另(lìng)外(wài)两(liǎng)个(gè)正(zhèng)常(cháng)运(yùn)行(xíng)）。如(rú)果(guǒ)超(chāo)出(chū)半(bàn)数(shù)的(de)节(jié)点(diǎn)都(dōu)失(shī)效(xiào)，那(nà)Paxos算(suàn)法(fǎ)将(jiāng)无(wú)法(fǎ)正(zhèng)常(cháng)运(yùn)转(zhuǎn)。

现(xiàn)在(zài)我(wǒ)(wǒ)们(men)(men)给(gěi)(gěi)这(zhè)(zhè)三(sān)(sān)台(tái)(tái)服(fú)(fú)务(wu)(wu)器(qì)(qì)分(fēn)配(pèi)一(yī)个(gè)全局(jú)的(de)序(xù)号(hào)以(yǐ)示(shì)区(qū)分(fēn)：1号(hào)节(jié)点(diǎn)、2号(hào)节(jié)点(diǎn)和(hé)3号(hào)节(jié)点(diǎn)。Paxos算(suàn)法(fǎ)会(huì)为(wèi)每(měi)个(gè)节(jié)点(diǎn)分(fēn)配(pèi)一(yī)个(gè)角(jiǎo)色(sè)，这(zhè)里(lǐ)假(jiǎ)设(shè)1号(hào)节(jié)点(diǎn)是(shì)提(tí)议(yì)者(zhě)（proposer）也(yě)是(shì)接(jiē)受(shòu)者(zhě)（acceptor）；2号(hào)和3号节点是接受者，只接受，不提议。现在1号节点收到了来自张三的购票请求，它开始了算法的第一步：PREPARE-PROMISE。

提议者1号节点首先会为它的提议proposal（即卖票给张三）分配一个唯一的序号（proposal number）。系统中所有的提议都会有一个自己独特的序号，一种简单的实现方式是这样：每个节点自己维护一个计数器（counter），初始值为0，每次自己提出新的提议时，计数器加1；新提议的序号设定为由计数器的数值和该节点的全局ID所拼接构成的小数，两者中间用小数点做间隔，即{counter}.{ID}。比如1号节点的第一个提议的序号为1.1，第二个提议的序号则是2.1。类似(shì)的(de)，2号(hào)节(jié)点(diǎn)的(de)第(dì)一(yī)个(gè)提(tí)议(yì)序(xù)号(hào)为(wèi)1.2，它(tā)的(de)第(dì)二(èr)个(gè)提(tí)议(yì)的(de)序(xù)号(hào)则(zé)是2.2，以此类推。按照这(zhè)种(zhǒng)序(xù)号(hào)的(de)设(shè)计(jì)方(fāng)式(shì)，当(dāng)提(tí)议(yì)者(zhě)1号(hào)节(jié)点(diǎn)收(shōu)到(dào)张(zhāng)三(sān)(sān)的(de)(de)请(qǐng)求(qiú)以后，它首先会发送一条PREAPRE消息给其他所有节点，并且附上提议的序号1.1，这里写作PREPARE(1.1)。

收到提议的接受者们按照以下逻辑进行响应：

1. 查看收到的PREPARE消息所附带的提议序号。

2. 将收到的提议号与自己本地的max_id进行对比。如果更大，则将本地的max_id更新为这个收到的提议号，并返回一条PROMISE消息，相当于告诉提议者：我收到你的消息了，目前你的提议号是最大的哦，准备提议吧，我承诺将不再接受比你的序号小的提议。

3. 如果收到的提议序号小于它本地的max_id，该接受者就不做回复，或者回复一条fail消息，即告诉提议者：你的提议失败。

如果提议者（1号节点）收到了来自大多数接受者（自己也算(suàn)一(yī)个(gè)）返(fǎn)回(huí)的(de)PROMISE消(xiāo)息，这时候它就知道，大(dà)家(jiā)已(yǐ)经(jīng)做(zuò)好(hǎo)准(zhǔn)备(bèi)接(jiē)受(shòu)它(tā)的(de)提(tí)议(yì)了(le)。如(rú)果(guǒ)没(méi)有(yǒu)得(de)到(dào)多(duō)数(shù)人(rén)的(de)答(dá)复(fù)，或(huò)者(zhě)收(shōu)到了一个fail消息，提议者就只能放弃本轮的提议，它可以将自己本地counter加1，然后再次提出新一轮的提议（由于counter加了1，提议号也会加1），重新尝试。当1号节点(diǎn)收(shōu)到(dào)了(le)来(lái)自(zì)多(duō)数(shù)节点的PROMISE消息后，它就进入第二步：PROPOSE-ACCEPT。

在第二步中，1号节点会发送一条PROPOSE消息，并且附带上刚才的提议号，以及具体的值（value），这里的值value就是大家希望达成共识的东西，在本文买票的例子中(zhōng)，它(tā)的(de)内(nèi)容(róng)就(jiù)是(shì)“张(zhāng)三(sān)”，代(dài)表(biǎo)票(piào)卖(mài)给(gěi)张(zhāng)三(sān)。所(suǒ)以(yǐ)1号(hào)节(jié)点(diǎn)发(fā)送(sòng)的(de)消(xiāo)息(xi)是(shì)这(zhè)样(yàng)：

PROPOSE(1.1, “张(zhāng)三(sān)”)

收(shōu)到消息的接受者们现在要做一个判断，是否接受这个提议，它们的逻辑是这样的：

1. 如果PROPOSE消息里附带的提议号依然是我目前收到的最大的（即和自己的max_id进行对比），那就接受这个提议，并且返回一条ACCEPTED消息；

2. 否则就不返回消息，或者返回fail消息，告诉提议者：提议失败。

如果提议者收到来自大多数节点的ACCEPTED消息，那它就知道共识已经达成了。假设现在2号和3号都正常收到了PROPOSE消(xiāo)息(xi)，并(bìng)正(zhèng)常(cháng)返回了ACCEPTED消息，则所有节点就“票卖给张三”这一状态(tài)达成了一致。

总结一下，这里达成共识一共用了两步。第一步的目标在于获得多数人的同意，相(xiāng)当(dāng)于(yú)提(tí)议(yì)者(zhě)对(duì)每(měi)个(gè)人(rén)喊(hǎn)话(huà)：我(wǒ)要(yào)进(jìn)行(xíng)修(xiū)改(gǎi)数(shù)据(jù)了(le)啊(a)，你(nǐ)们(men)同(tóng)意(yì)不(bù)同(tóng)意(yì)？只(zhǐ)有(yǒu)当(dāng)获(huò)得(de)了(le)多(duō)数(shù)人(rén)的同意之后，才会进行第二步——提议者真正发出要propose的值。

试想，如果算法跳过(guò)第(dì)一步，直接发送要propose的值，不同(tóng)的(de)接(jiē)受(shòu)者(zhě)就(jiù)可(kě)能(néng)会(huì)收(shōu)到(dào)来(lái)自(zì)不(bù)同(tóng)提(tí)议(yì)者(zhě)的(de)值(zhí)。而(ér)这(zhè)个(gè)时(shí)候(hou)又(yòu)因(yīn)为(wèi)没(méi)有(yǒu)事(shì)先(xiān)征(zhēng)求(qiú)多(duō)数(shù)的(de)同(tóng)意，最后接收者也不知道自己收到的值是否就代表了大多数的意见，系统中可能会有多个子群体大家各自有自己的值，这样全局的共识就没有(yǒu)了(le)。

完(wán)整(zhěng)的(de)Paxos算(suàn)法(fǎ)逻(luó)辑(ji)

到(dào)此(cǐ)为(wèi)止(zhǐ)，算(suàn)法(fǎ)的(de)运(yùn)行(xíng)一(yī)切正常，现在我们再来看看一些更加复杂的情况。

假设不光1号节点是提议者，2号节点因收到了李四的请求，也成为了一个提议者（注意所有节点都是接受者），现在系统里就有了两个不同的提议者，它们发送的消息可能以任何的方式交织在一起。

假设3号节点可能先收到了来自1号节点的PREPARE消息（张三购票），即PREPARE(1.1)，并且返回了PROMISE。就在这时，它又收到了2号节点的PREPARE消息（李四购票），即PREPARE(1.2)，因为提议号1.2大于1.1，于是它又会给2号节点返回PROMISE，并(bìng)且(qiě)将(jiāng)自(zì)己(jǐ)的(de)max_id更(gèng)新(xīn)为(wèi)1.2。注(zhù)意(yì)，1号(hào)节(jié)点(diǎn)会(huì)进(jìn)行(xíng)第(dì)二(èr)步(bù)继(jì)续(xù)发(fā)送(sòng)PROPOSE消(xiāo)息(xi)，PROPOSE(1.1, “张(zhāng)三(sān)”) ，但(dàn)此(cǐ)时(shí)3号(hào)节(jié)点(diǎn)已(yǐ)经(jīng)不(bù)会(huì)(huì)再(zài)(zài)接(jiē)(jiē)受(shòu)(shòu)它(tā)的(de)提(tí)议(yì)了(le)，因(yīn)为(wèi)现(xiàn)在(zài)对它而言，1.2是更新的提议。只有当2号节点的PROPOSE消息发过来时它才会接受。

再考虑另一种情况，假设李四的操作比张三慢了那么(me)一(yī)点(diǎn)点(diǎn)，当(dāng)2号(hào)节(jié)点(diǎn)成(chéng)为(wèi)提(tí)议(yì)者(zhě)，并(bìng)且(qiě)发(fā)送(sòng)PREPARE(1.2)的(de)时(shí)候(hou)，3号(hào)节(jié)点(diǎn)已(yǐ)经(jīng)接(jiē)受(shòu)1号(hào)节(jié)点(diǎn)的(de)提(tí)议(yì)了(le)（提(tí)议(yì)号(hào)为(wèi)1.1），即(jí)ACCEPTED消(xiāo)息(xi)已(yǐ)经发送。而这时2号节点因为(wèi)各(gè)种(zhǒng)原(yuán)因(yīn)还(hái)没(méi)有(yǒu)收(shōu)到(dào)1号(hào)节(jié)点(diǎn)的(de)PREPARE消(xiāo)息(xi)，浑(hún)然(rán)不(bù)知(zhī)1号(hào)和(hé)3号(hào)已(yǐ)达(dá)成(chéng)共(gòng)识(shi)（票(piào)卖(mài)给(gěi)张(zhāng)三(sān)）。那(nà)么(me)根(gēn)据(jù)Paxos算(suàn)法(fǎ)，当3号节点收到来自2号的PREPARE(1.2) 消息时，由于1.2是3号见过的最大的提议号，所以它的确会向2号返回一个PROMISE消息，但是因为3号又已经接受此前的提议1.1了，所以在它返回的PROMISE消息中，会附上之前所接受提议的序号以及值，即PROMISE(1.1, “张三”)，即告诉2号：我收到你的提议号了，它的确是最新的提议，但是我此前已经接受过序号为1.1的提议了，它的内容是“张三”。2号收到该消息，了解到票已经卖出，此时根据Paxos算法，2号必须将自己要propose的值更改为“张三”，然后继续发送PROPOSE消息，于是所有的节点依然是达成了共识。

最终客户端的李四看到的结果便是：票已售罄。事实上，提议者可能会收到多个带此前接受值的PROMISE消息，它将会选取这些所有PROMISE里面提议序号最大的那个对应的值，作为自己要propose的值，如果没有任何PROMISE消息里带有此前接受的提议信息，提议者则继续用自己原本想propose的值。更新后的接受者和提议者的完整逻辑分别如下图所示。

PREPARE-PROMISE 过程。

这便是完整的Paxos算法。最后我们再来简单考虑下断网或者节(jié)点(diǎn)宕机的情况，看看Paxos如何在故障情况下依然能正确运行。

网络或节点失效下的Paxos

不管是提议者还是接受者都有宕机的可能性。当接收者宕机时，实际上对系统运行影响不大，这正是分布式系统的优势：哪怕有一些节点不对PREPARE消息或者PROPOSE消息做任何反应，只要有多数的节点依然在线，系统依然能做出反应，提议者依然能得到多数人的回复，于是算法运行。而当宕机的节(jié)点(diǎn)死(sǐ)而(ér)复生后，他们终(zhōng)究(jiū)也(yě)会(huì)通(tōng)过(guò)其(qí)他(tā)节(jié)点(diǎn)发(fā)来(lái)的(de)带(dài)有(yǒu)此(cǐ)前(qián)已(yǐ)接(jiē)受(shòu)提(tí)议(yì)信(xìn)息(xi)的(de)PROMISE消(xiāo)(xiāo)息(xi)来(lái)了(le)解(jiě)到(dào)自(zì)己(jǐ)错(cuò)过(guò)的共识，在自己本地也进行更新。

那如果提议者（譬如1号节点）宕机呢？分为三种情况：

1. 假(jiǎ)如(rú)它(tā)在(zài)发(fā)送(sòng)PREPARE消(xiāo)息(xi)之(zhī)前(qián)宕(dàng)机(jī)，那(nà)相(xiāng)当(dāng)于(yú)系(xì)统(tǒng)里(lǐ)面(miàn)什(shén)么(me)也(yě)没(méi)有(yǒu)发生。其他节点接收用户的需求时会变为新的提议者；

2. 如(rú)果(guǒ)提(tí)议(yì)者(zhě)在(zài)发(fā)(fā)送(sòng)(sòng)PREPARE消(xiāo)(xiāo)息(xi)(xi)之(zhī)(zhī)后(hòu)(hòu)宕(dàng)(dàng)机(jī)(jī)，还(hái)(hái)没(méi)(méi)来(lái)(lái)得(de)及(jí)发(fā)送(sòng)PROPOSE，如(rú)我(wǒ)们(men)刚(gāng)所(suǒ)说(shuō)，它(tā)的(de)提议会被之后更新的PREPARE所取代（由新的提议者所发出）；

3. 如果提议者已经完成了第一步PREPARE-PROMISE，进入了第二步，但是在给部分节点发送(sòng)PROPOSE消(xiāo)息(xi)后(hòu)宕(dàng)机(jī)，譬(pì)如(rú)1号(hào)在(zài)给(gěi)3号(hào)发(fā)送(sòng)完(wán)PROPOSE之(zhī)后(hòu)宕(dàng)机(jī)，没(méi)来(lái)得(de)及(jí)发(fā)给(gěi)2号(hào)；那(nà)它(tā)的(de)提(tí)议(yì)将(jiāng)会(huì)被(bèi)3号(hào)接(jiē)受(shòu)，而(ér)2号(hào)最(zuì)终还是会了解到(dào)1号(hào)和(hé)3号达成的共识。因为2号在某时会成为提议者，它终究会收到3号返回的带有此前已接受提议(yì)信(xìn)息(xi)的PROMISE消息，并据此来更新自己本地的信息，于是与1号、3号保持了一致。

所(suǒ)以(yǐ)最(zuì)后(hòu)回(huí)到(dào)抢(qiǎng)票(piào)上(shàng)，当(dāng)我(wǒ)们(men)从(cóng)客(kè)户(hù)端(duān)发(fā)出(chū)买(mǎi)票(piào)请(qǐng)求(qiú)以后，它会和背后复杂的分布式系统进(jìn)行(xíng)交(jiāo)互(hù)，大(dà)家如果抢不到票并不一定因为自己手速不够快，还有可能是网络延迟、连接的服务器宕机，或者和系(xì)统(tǒng)算(suàn)法本身的运作有关。

结语

分布式系统作为现代计算机系统的基石，能够支持12306购票这样的高负载、高并发场景。本文讨论了分布式系统中关于一致性与容错性的一些基本概念与技术实现。事实上，分布式系统的应用不只是线上网购，在加密领域，分布式系统为区块链技术提供(gōng)了(le)基(jī)础(chǔ)支持，确保数据的安全性和一致性；在科学计算领域，分布式系统(tǒng)也(yě)被(bèi)用(yòng)来(lái)解(jiě)决(jué)更(gèng)大(dà)规(guī)模(mó)的(de)问(wèn)题(tí)。这(zhè)些(xiē)领(lǐng)域都(dōu)展(zhǎn)示(shì)了(le)分(fēn)布(bù)式系统在我们日常生活和技术发展中发挥着不可或缺的作用。最后，春节马上到了，祝大家：春节快乐，阖家幸福！

注：本文封面(miàn)图(tú)片(piàn)来(lái)自(zì)版(bǎn)权(quán)图(tú)库(kù)，转(zhuǎn)载(zài)使(shǐ)用(yòng)可(kě)能(néng)引(yǐn)发(fā)版(bǎn)权(quán)纠(jiū)纷(fēn)。

特(tè) 别(bié) 提(tí) 示(shì)

1. 进(jìn)入(rù)『返(fǎn)朴(pǔ)』微(wēi)信(xìn)公(gōng)众(zhòng)号(hào)底(dǐ)部(bù)菜(cài)单(dān)“精(jīng)品(pǐn)专(zhuān)栏(lán)“，可(kě)查(chá)阅(yuè)(yuè)不(bù)(bù)同(tóng)(tóng)主题(tí)(tí)系(xì)列科普文章。

2. 『返朴』提供按月检索文章功能。关注公众号，回复四位数组成的年份+月份，如“1903”，可获取2019年3月的文章索引，以此类推。

版权说明：欢迎个人转发，任何形式的媒体或机构未经授权，不得转载和摘编。转载授权请在「返朴」微信公众号内联系后台。