|
|
|
|
移动端

如何用Python创建眼下火爆的区块链?这篇干货请收藏

对数字货币的崛起感到新奇的我们,并且想知道其背后的技术——区块链是怎样实现的。作者认为最快的学习区块链的方式是自己创建一个,本文就跟随作者用Python来创建一个区块链。在实践中学习,通过构建一个区块链可以加深对区块链的理解。

作者:learnblockchain来源:机器学习算法与Python学习|2018-03-16 09:29

【新品产上线啦】51CTO播客,随时随地,碎片化学习

如何用Python创建眼下火爆的区块链?这篇干货请收藏

对数字货币的崛起感到新奇的我们,并且想知道其背后的技术——区块链是怎样实现的。作者认为最快的学习区块链的方式是自己创建一个,本文就跟随作者用Python来创建一个区块链。在实践中学习,通过构建一个区块链可以加深对区块链的理解。

准备工作

本文要求读者对Python有基本的理解,能读写基本的Python,并且需要对HTTP请求有基本的了解。

我们知道区块链是由区块的记录构成的不可变、有序的链结构,记录可以是交易、文件或任何你想要的数据,重要的是它们是通过哈希值(hashes)链接起来的。

环境准备

确保已经安装Python3.6+, pip , Flask, requests,安装方法:

  1. pip install Flask==0.12.2 requests==2.18.4 

同时还需要一个HTTP客户端,比如Postman,cURL或其它客户端。参考

https://github.com/xilibi2003/blockchain

开始创建Blockchain

新建一个文件 blockchain.py,本文所有的代码都写在这一个文件中,可以随时参考

https://github.com/xilibi2003/blockchain

Blockchain类

首先创建一个Blockchain类,在构造函数中创建了两个列表,一个用于储存区块链,一个用于储存交易。以下是Blockchain类的框架:

  1. class Blockchain(object):  
  2.    def __init__(self):  
  3.        self.chain = []  
  4.        self.current_transactions = []         
  5.  
  6.    def new_block(self):  
  7.        # Creates a new Block and adds it to the chain  
  8.        pass     
  9.  
  10.    def new_transaction(self):  
  11.        # Adds a new transaction to the list of transactions  
  12.        pass     
  13.  
  14.    @staticmethod  
  15.    def hash(block):  
  16.        # Hashes a Block  
  17.        pass  
  18.  
  19.    @property  
  20.    def last_block(self):  
  21.        # Returns the last Block in the chain  
  22.        pass 

Blockchain类用来管理链条,它能存储交易,加入新块等,下面我们来进一步完善这些方法。

块结构

每个区块包含属性:索引(index),Unix时间戳(timestamp),交易列表(transactions),工作量证明(稍后解释)以及前一个区块的Hash值。以下是一个区块的结构:

  1. block = {  
  2.    'index': 1,  
  3.    'timestamp': 1506057125.900785,  
  4.    'transactions': [  
  5.        {  
  6.            'sender'"8527147fe1f5426f9dd545de4b27ee00"
  7.            'recipient'"a77f5cdfa2934df3954a5c7c7da5df1f" 
  8.            'amount': 5,  
  9.        }  
  10.    ],  
  11.    'proof': 324984774000,  
  12.    'previous_hash'"2cf24dba5fb0a30e26e83b2ac5b9e29e1b161e5c1fa7425e73043362938b9824"  

到这里,区块链的概念就清楚了,每个新的区块都包含上一个区块的Hash,这是关键的一点,它保障了区块链不可变性。如果攻击者破坏了前面的某个区块,那么后面所有区块的Hash都会变得不正确。不理解的话,慢慢消化。

加入交易

接下来我们需要添加一个交易,来完善下new_transaction方法:

  1. class Blockchain(object):  
  2.    ...     
  3.  
  4.    def new_transaction(self, sender, recipient, amount):  
  5.        "" 
  6.        生成新交易信息,信息将加入到下一个待挖的区块中  
  7.        :param sender: <str> Address of the Sender  
  8.        :param recipient: <str> Address of the Recipient  
  9.        :param amount: <int> Amount  
  10.        :return: <int> The index of the Block that will hold this transaction  
  11.        "" 
  12.  
  13.        self.current_transactions.append({  
  14.            'sender': sender,  
  15.            'recipient': recipient,  
  16.            'amount': amount,  
  17.        })  
  18.  
  19.        return self.last_block['index'] + 1 

方法向列表中添加一个交易记录,并返回该记录将被添加到的区块(下一个待挖掘的区块)的索引,等下在用户提交交易时会有用。

创建新块

当Blockchain实例化后,我们需要构造一个创世块(没有前区块的第一个区块),并且给它加上一个工作量证明。每个区块都需要经过工作量证明,俗称挖矿,稍后会继续讲解。为了构造创世块,我们还需要完善new_block(), new_transaction() 和hash() 方法:

  1. import hashlib  
  2. import json  
  3. from time import time  
  4.  
  5. class Blockchain(object):  
  6.    def __init__(self):  
  7.        self.current_transactions = []  
  8.        self.chain = []  
  9.  
  10.        # Create the genesis block  
  11.        self.new_block(previous_hash=1, proof=100)  
  12.  
  13.    def new_block(self, proof, previous_hash=None):  
  14.        "" 
  15.        生成新块  
  16.        :param proof: <int> The proof given by the Proof of Work algorithm  
  17.        :param previous_hash: (Optional) <str> Hash of previous Block  
  18.        :return: <dict> New Block  
  19.        "" 
  20.        block = {  
  21.            'index': len(self.chain) + 1,  
  22.            'timestamp'time(),  
  23.            'transactions': self.current_transactions,  
  24.            'proof': proof,  
  25.            'previous_hash': previous_hash or self.hash(self.chain[-1]),  
  26.        }  
  27.  
  28.        # Reset the current list of transactions  
  29.        self.current_transactions = []  
  30.  
  31.        self.chain.append(block)  
  32.        return block  
  33.  
  34.    def new_transaction(self, sender, recipient, amount):  
  35.        "" 
  36.        生成新交易信息,信息将加入到下一个待挖的区块中  
  37.        :param sender: <str> Address of the Sender  
  38.        :param recipient: <str> Address of the Recipient  
  39.        :param amount: <int> Amount  
  40.        :return: <int> The index of the Block that will hold this transaction  
  41.        "" 
  42.        self.current_transactions.append({  
  43.            'sender': sender,  
  44.            'recipient': recipient,  
  45.            'amount': amount,  
  46.        })  
  47.  
  48.        return self.last_block['index'] + 1   
  49.    @property  
  50.    def last_block(self):  
  51.        return self.chain[-1]  
  52.  
  53.    @staticmethod  
  54.    def hash(block): 
  55.        "" 
  56.        生成块的 SHA-256 hash值  
  57.        :param block: <dict> Block  
  58.        :return: <str>  
  59.        "" 
  60.  
  61.        # We must make sure that the Dictionary is Ordered, or we'll have inconsistent hashes  
  62.        block_string = json.dumps(block, sort_keys=True).encode()  
  63.        return hashlib.sha256(block_string).hexdigest() 

通过上面的代码和注释可以对区块链有直观的了解,接下来我们看看区块是怎么挖出来的。

理解工作量证明

新的区块依赖工作量证明算法(PoW)来构造,PoW的目标是找出一个符合特定条件的数字,这个数字很难计算出来,但容易验证。这就是工作量证明的核心思想。

为了方便理解,举个例子:假设一个整数 x 乘以另一个整数 y 的积的 Hash 值必须以 0 结尾,即hash(x * y) = ac23dc…0,设变量 x = 5,求 y 的值?用Python实现如下:

  1. from hashlib import sha256  
  2. x = 5  
  3. y = 0  # y未知  
  4. while sha256(f'{x*y}'.encode()).hexdigest()[-1] != "0" 
  5.    y += 1  
  6. print(f'The solution is y = {y}'

结果是y=21. 因为:

  1. hash(5 * 21) = 1253e9373e...5e3600155e860 

在比特币中,使用称为Hashcash的工作量证明算法,它和上面的问题很类似。矿工们为了争夺创建区块的权利而争相计算结果。通常,计算难度与目标字符串需要满足的特定字符的数量成正比,矿工算出结果后,会获得比特币奖励。

当然,在网络上非常容易验证这个结果。

实现工作量证明

让我们来实现一个相似PoW算法,规则是:寻找一个数 p,使得它与前一个区块的 proof 拼接成的字符串的 Hash 值以 4 个零开头。

  1. import hashlib  
  2. import json  
  3. from time import time  
  4. from uuid import uuid4  
  5.  
  6. class Blockchain(object):  
  7.    ...         
  8.  
  9.    def proof_of_work(self, last_proof):  
  10.        "" 
  11.        简单的工作量证明:  
  12.         - 查找一个 p' 使得 hash(pp') 以4个0开头  
  13.         - p 是上一个块的证明,  p' 是当前的证明  
  14.        :param last_proof: <int 
  15.        :return: <int 
  16.        "" 
  17.  
  18.        proof = 0  
  19.        while self.valid_proof(last_proof, proof) is False 
  20.            proof += 1   
  21.        return proof  
  22.  
  23.    @staticmethod  
  24.    def valid_proof(last_proof, proof):  
  25.        "" 
  26.        验证证明: 是否hash(last_proof, proof)以4个0开头?  
  27.        :param last_proof: <int> Previous Proof  
  28.        :param proof: <intCurrent Proof  
  29.        :return: <bool> True if correct, False if not 
  30.        ""  
  31.  
  32.        guess = f'{last_proof}{proof}'.encode()  
  33.        guess_hash = hashlib.sha256(guess).hexdigest()  
  34.        return guess_hash[:4] == "0000" 

衡量算法复杂度的办法是修改零开头的个数。使用4个来用于演示,你会发现多一个零都会大大增加计算出结果所需的时间。现在Blockchain类基本已经完成了,接下来使用HTTP requests来进行交互。

Blockchain作为API接口

我们将使用Python Flask框架,这是一个轻量Web应用框架,它方便将网络请求映射到 Python函数,现在我们来让Blockchain运行在基于Flask web上。

我们将创建三个接口:

  • /transactions/new 创建一个交易并添加到区块
  • /mine 告诉服务器去挖掘新的区块
  • /chain 返回整个区块链

创建节点

我们的Flask服务器将扮演区块链网络中的一个节点。我们先添加一些框架代码:

  1. import hashlib  
  2. import json  
  3. from textwrap import dedent  
  4. from time import time  
  5. from uuid import uuid4  
  6. from flask import Flask  
  7.  
  8. class Blockchain(object):  
  9.    ...  
  10.  
  11. # Instantiate our Node  
  12. app = Flask(__name__)  
  13.  
  14. # Generate a globally unique address for this node  
  15. node_identifier = str(uuid4()).replace('-''' 
  16.  
  17. # Instantiate the Blockchain  
  18. blockchain = Blockchain()  
  19.  
  20. @app.route('/mine', methods=['GET'])  
  21. def mine():  
  22.    return "We'll mine a new Block"   
  23.  
  24. @app.route('/transactions/new', methods=['POST'])  
  25. def new_transaction():  
  26.    return "We'll add a new transaction"  
  27. @app.route('/chain', methods=['GET'])  
  28. def full_chain():  
  29.    response = {  
  30.        'chain': blockchain.chain,  
  31.        'length': len(blockchain.chain),  
  32.    }  
  33.    return jsonify(response), 200  
  34.  
  35. if __name__ == '__main__' 
  36.    app.run(host='0.0.0.0', port=5000) 

简单的说明一下以上代码:

第15行: 创建一个节点.

第18行: 为节点创建一个随机的名字.

第21行: 实例Blockchain类.

第24–26行: 创建/mine GET接口。

第28–30行: 创建/transactions/new POST接口,可以给接口发送交易数据.

第32–38行: 创建 /chain 接口, 返回整个区块链.

第40–41行: 服务运行在端口5000上.

发送交易

发送到节点的交易数据结构如下:

  1.  
  2. "sender""my address" 
  3. "recipient""someone else's address" 
  4. "amount": 5  

之前已经有添加交易的方法,基于接口来添加交易就很简单了

  1. import hashlib  
  2. import json  
  3. from textwrap import dedent  
  4. from time import time  
  5. from uuid import uuid4  
  6.  
  7. from flask import Flask, jsonify, request   
  8. ...  
  9.  
  10. @app.route('/transactions/new', methods=['POST'])  
  11. def new_transaction():  
  12.    values = request.get_json()  
  13.  
  14.    # Check that the required fields are in the POST'ed data  
  15.    required = ['sender''recipient''amount' 
  16.    if not all(k in values for k in required):  
  17.        return 'Missing values', 400  
  18.  
  19.    # Create a new Transaction  
  20.    index = blockchain.new_transaction(values['sender'], values['recipient'], values['amount'])  
  21.  
  22.    response = {'message': f'Transaction will be added to Block {index}' 
  23.    return jsonify(response), 201 

挖矿

挖矿正是神奇所在,它很简单,做了一下三件事:

  1. 计算工作量证明PoW
  2. 通过新增一个交易授予矿工(自己)一个币
  3. 构造新区块并将其添加到链中
  1. import hashlib  
  2. import json  
  3. from time import time  
  4. from uuid import uuid4  
  5.  
  6. from flask import Flask, jsonify, request  
  7. ...  
  8.  
  9. @app.route('/mine', methods=['GET'])  
  10. def mine():  
  11.    # We run the proof of work algorithm to get the next proof...  
  12.    last_block = blockchain.last_block  
  13.    last_proof = last_block['proof' 
  14.    proof = blockchain.proof_of_work(last_proof)  
  15.  
  16.    # 给工作量证明的节点提供奖励.  
  17.    # 发送者为 "0" 表明是新挖出的币  
  18.    blockchain.new_transaction(  
  19.        sender="0" 
  20.        recipient=node_identifier,  
  21.        amount=1,  
  22.    ) 
  23.  
  24.    # Forge the new Block by adding it to the chain  
  25.    block = blockchain.new_block(proof)  
  26.    response = {  
  27.        'message'"New Block Forged" 
  28.        'index': block['index'],  
  29.        'transactions': block['transactions'],  
  30.        'proof': block['proof'],  
  31.        'previous_hash': block['previous_hash'],  
  32.    }  
  33.    return jsonify(response), 200 

注意交易的接收者是我们自己的服务器节点,我们做的大部分工作都只是围绕Blockchain类方法进行交互。到此,我们的区块链就算完成了,我们来实际运行下。

运行区块链

你可以使用cURL 或Postman 去和API进行交互,启动server:

  1. $ python blockchain.py  
  2. * Runing on http://127.0.0.1:5000/ (Press CTRL+C to quit) 

让我们通过请求 http://localhost:5000/mine 来进行挖矿

通过post请求,添加一个新交易

如果不是使用Postman,则用一下的cURL语句也是一样的:

  1. $ curl -X POST -H "Content-Type: application/json" -d '{  
  2. "sender""d4ee26eee15148ee92c6cd394edd974e" 
  3. "recipient""someone-other-address" 
  4. "amount": 5  
  5. }' "http://localhost:5000/transactions/new" 

在挖了两次矿之后,就有3个块了,通过请求 http://localhost:5000/chain 可以得到所有的块信息。

  1.  
  2.  "chain": [  
  3.    {  
  4.      "index": 1,  
  5.      "previous_hash": 1,  
  6.      "proof": 100,  
  7.      "timestamp": 1506280650.770839,  
  8.      "transactions": []  
  9.    },  
  10.    {  
  11.      "index": 2,  
  12.      "previous_hash""c099bc...bfb7" 
  13.      "proof": 35293,  
  14.      "timestamp": 1506280664.717925,  
  15.      "transactions": [  
  16.        {  
  17.          "amount": 1,  
  18.          "recipient""8bbcb347e0634905b0cac7955bae152b" 
  19.          "sender""0"  
  20.        }  
  21.      ]  
  22.    },  
  23.    {  
  24.      "index": 3,  
  25.      "previous_hash""eff91a...10f2" 
  26.      "proof": 35089,  
  27.      "timestamp": 1506280666.1086972,  
  28.      "transactions": [  
  29.        {  
  30.          "amount": 1,  
  31.          "recipient""8bbcb347e0634905b0cac7955bae152b" 
  32.          "sender""0"  
  33.        }  
  34.      ]  
  35.    }  
  36.  ],  
  37.  "length": 3  

一致性(共识)

我们已经有了一个基本的区块链可以接受交易和挖矿。但是区块链系统应该是分布式的。既然是分布式的,那么我们究竟拿什么保证所有节点有同样的链呢?这就是一致性问题,我们要想在网络上有多个节点,就必须实现一个一致性的算法。

注册节点

在实现一致性算法之前,我们需要找到一种方式让一个节点知道它相邻的节点。每个节点都需要保存一份包含网络中其它节点的记录。因此让我们新增几个接口:

  • /nodes/register 接收URL形式的新节点列表
  • /nodes/resolve 执行一致性算法,解决任何冲突,确保节点拥有正确的链

我们修改下Blockchain的init函数并提供一个注册节点方法:

  1. ...  
  2. from urllib.parse import urlparse  
  3. ...  
  4.  
  5. class Blockchain(object):  
  6.    def __init__(self):  
  7.        ...  
  8.        self.nodes = set()  
  9.        ...  
  10.  
  11.    def register_node(self, address):  
  12.        "" 
  13.        Add a new node to the list of nodes  
  14.        :param address: <str> Address of node. Eg. 'http://192.168.0.5:5000'  
  15.        :return: None  
  16.        "" 
  17.  
  18.        parsed_url = urlparse(address)  
  19.        self.nodes.add(parsed_url.netloc) 

我们用 set 来储存节点,这是一种避免重复添加节点的简单方法。

实现共识算法

前面提到,冲突是指不同的节点拥有不同的链,为了解决这个问题,规定最长的、有效的链才是最终的链,换句话说,网络中有效最长链才是实际的链。我们使用一下的算法,来达到网络中的共识。

  1. ...  
  2. import requests  
  3.  
  4. class Blockchain(object)  
  5.    ...     
  6.  
  7.    def valid_chain(self, chain):  
  8.        "" 
  9.        Determine if a given blockchain is valid  
  10.        :param chain: <list> A blockchain  
  11.        :return: <bool> True if valid, False if not  
  12.        ""  
  13.  
  14.        last_block = chain[0]  
  15.        current_index = 1  
  16.  
  17.        while current_index < len(chain):  
  18.            block = chain[current_index]  
  19.            print(f'{last_block}' 
  20.            print(f'{block}' 
  21.            print("\n-----------\n" 
  22.            # Check that the hash of the block is correct  
  23.            if block['previous_hash'] != self.hash(last_block):  
  24.                return False  
  25.  
  26.            # Check that the Proof of Work is correct  
  27.            if not self.valid_proof(last_block['proof'], block['proof']):  
  28.                return False  
  29.  
  30.            last_block = block  
  31.            current_index += 1  
  32.  
  33.        return True  
  34.  
  35.    def resolve_conflicts(self):  
  36.        "" 
  37.        共识算法解决冲突  
  38.        使用网络中最长的链.  
  39.        :return: <bool> True 如果链被取代, 否则为False  
  40.        "" 
  41.  
  42.        neighbours = self.nodes  
  43.        new_chain = None  
  44.  
  45.        # We're only looking for chains longer than ours  
  46.        max_length = len(self.chain)   
  47.  
  48.        # Grab and verify the chains from all the nodes in our network  
  49.        for node in neighbours:  
  50.            response = requests.get(f'http://{node}/chain' 
  51.             if response.status_code == 200:  
  52.                length = response.json()['length' 
  53.                chain = response.json()['chain' 
  54.  
  55.                # Check if the length is longer and the chain is valid  
  56.                if length > max_length and self.valid_chain(chain):  
  57.                    max_length = length  
  58.                    new_chain = chain  
  59.  
  60.        # Replace our chain if we discovered a new, valid chain longer than ours  
  61.        if new_chain:  
  62.            self.chain = new_chain  
  63.            return True  
  64.  
  65.        return False 

第一个方法 valid_chain() 用来检查是否是有效链,遍历每个块验证hash和proof;第二个方法 resolve_conflicts() 用来解决冲突,遍历所有的邻居节点,并用上一个方法检查链的有效性,如果发现有效更长链,就替换掉自己的链。

让我们添加两个路由,一个用来注册节点,一个用来解决冲突。

  1. @app.route('/nodes/register', methods=['POST'])  
  2. def register_nodes():  
  3.    values = request.get_json()  
  4.  
  5.    nodes = values.get('nodes' 
  6.    if nodes is None:  
  7.        return "Error: Please supply a valid list of nodes", 400  
  8.  
  9.    for node in nodes:  
  10.        blockchain.register_node(node)  
  11.  
  12.    response = {  
  13.        'message''New nodes have been added' 
  14.        'total_nodes': list(blockchain.nodes),  
  15.    }  
  16.    return jsonify(response), 201  
  17.  
  18. @app.route('/nodes/resolve', methods=['GET'])  
  19. def consensus():  
  20.    replaced = blockchain.resolve_conflicts()  
  21.  
  22.    if replaced:  
  23.        response = {  
  24.            'message''Our chain was replaced' 
  25.            'new_chain': blockchain.chain  
  26.        }  
  27.    else 
  28.        response = {  
  29.            'message''Our chain is authoritative' 
  30.            'chain': blockchain.chain  
  31.        }    
  32.    return jsonify(response), 200 

你可以在不同的机器运行节点,或在一台机机开启不同的网络端口来模拟多节点的网络,这里在同一台机器开启不同的端口演示,在不同的终端运行一下命令,就启动了两个节点:http://localhost:5000 和 http://localhost:5001

  1. pipenv run python blockchain.py  
  2. pipenv run python blockchain.py -p 5001 

然后在节点2上挖两个块,确保是更长的链,然后在节点1上访问接口/nodes/resolve ,这时节点1的链会通过共识算法被节点2的链取代。

好啦,你可以邀请朋友们一起来测试你的区块链!

【编辑推荐】

  1. 新兴技术岗位薪资涨幅惊人,Python需求增速达174%!
  2. Python数据预处理:使用Dask和Numba并行化加速
  3. 使用Java语言从零开始创建区块链
  4. 如何在使用Vim时访问/查看Python帮助
  5. Python之父公布最新消息,Python2在2020年元旦正式停止官方支持
【责任编辑:庞桂玉 TEL:(010)68476606】

点赞 0
分享:
大家都在看
猜你喜欢

读 书 +更多

JAVA并发编程实践

本书既能够成为读者的理论支持,又可以作为构建可靠的、可伸缩的、可维护的并发程序的技术支持。本书并不仅仅提供并发API的清单及其机制,...

订阅51CTO邮刊

点击这里查看样刊

订阅51CTO邮刊