基于区块链的算力并网交易平台研究报告2023.pdf
《基于区块链的算力并网交易平台研究报告2023.pdf》由会员分享,可在线阅读,更多相关《基于区块链的算力并网交易平台研究报告2023.pdf(40页珍藏版)》请在咨信网上搜索。
1、 基于区块链的算力并网交易平台研究基于区块链的算力并网交易平台研究 先进计算产业发展联盟先进计算产业发展联盟 2023 年年 12 月月 I 研研 究究 报报 告告 要要 点点 本课题分析了当前算力交易平台的发展现状,总结了算力用户的需求,包括交易效率、交易模式、激励机制、资源调度机制、可监管、数据隐私安全以及行业标准等。针对以上需求,本课题需要研究的关键技术包括区块链、跨链技术、异构联盟链监管技术、数据访问控制、可信交易技术、隐私保护、智能合约、激励机制、资源调度、前沿密码学方法等。本课题的研究内容主要包括(1)基于区块链的算力交易技术;(2)算力交易激励与资源调度机制;(3)面向监管友好的
2、算力交易数据隐私安全。研究目标是构建面向算力并网的高性能区块链算力交易平台,实现高效的算力交易方法、安全灵活的交易模式、多维度激励机制、合理的资源调度、可监管以及符合行业标准的技术方案。研究单位:浪潮电子信息产业股份有限公司、中国移动研究院、天翼研究单位:浪潮电子信息产业股份有限公司、中国移动研究院、天翼云科技有限公司、中国信息通信研究院云科技有限公司、中国信息通信研究院 课题参加人:赵雅倩、张课题参加人:赵雅倩、张 闯、陈燕军、安雨顺、林群阳、刘陆阳、闯、陈燕军、安雨顺、林群阳、刘陆阳、孙丽明、王翰华、黄孙丽明、王翰华、黄 璜璜 完成日期:完成日期:2023 年年 12 月月 II 目目 录
3、录 一、研究背景.1(一)算力交易平台国内发展现状.1(二)算力交易平台海外发展现状.2 二、问题与挑战.5 三、关键技术.7(一)分布式数字身份与可信凭证技术.7(二)链上链下结合的交易处理技术.9(三)多维度激励机制.9(四)数据访问控制.10(五)算力资源调度.11(六)区块链监管.11 四、解决方案.13(一)数字身份链.13(二)交易链.14 1、交易模式.14 2、数据访问授权机制.18 3、激励机制.18 4、资源调度机制.20 5、交易监管.26(三)算力交易平台 DAPP.28(四)交易服务通道控制器.28 五、总结与展望.34 术语与缩略词表.35 参考文献.36 1 一、
4、研究背景一、研究背景 2020 年以来,国家发布了以“新基建”为导向的一系列加快数字化基础设施建设的政策,旨在提升“联结+计算”能力,重塑产业升级模式。2021 年 5 月,国家四部委发布全国一体化大数据中心协同创新体系算力枢纽实施方案,提出“东数西算”架构,打通网络传输,提升跨区域算力调度水平。随着网络通信设备、云计算、边缘计算等基础设施算力能力持续提升,算力泛在化已成为趋势,呈现云网边端多级计算服务架构。算力并网可以整合各种算力资源,形成一个统一的算力网络,对各类应用提供普适多样的算力服务。区块链的防篡改、可追溯、分布式等特性可以为算力并网提供交易技术支撑,激发算力服务提供商的积极性,同时
5、为用户提供安全、可靠且便捷的统一算力服务交易接口,有助于构建基于算力的价值网络,推动基于算力的共享经济和数字经济的发展。(一)算力交易平台国内发展现状(一)算力交易平台国内发展现状 国内目前算力并网技术主要以政府机构为主导,联合上游硬件厂和下游云计算、科学计算和网络服务提供商,构建算力交易平台。比较有代表性的有宁夏的“东数西算”一体化算力交易平台、国家新兴互联网交换中心主导的上海算力交易平台(SHIXP)以及中国信通院牵头的全国一体化算力算网调度平台。“东数西算东数西算”一体化算力服务平台一体化算力服务平台 东数西算一体化算力服务平台 2023 年 2 月 24 日在宁夏银川正式上线运营。作为
6、国内首个算力交易平台,该平台通过资源整合,已将曙光、华为、中兴、阿里云、天翼云等国内大算力领先的企业,国家信息中心、北京大数据研究院等国内主要的大数据机构,以及商汤、百度等大模型头部企业共计 27 家纳入平台。该平台作为国内首个可以支持算力交易调度的应用系统,为智算、超算、通用算力等各类算力产品提供算力发现、供需撮合、交易购买、调度使用等综合服务,将有效结合东西部算力发展需求,助力形成自由流通、按需配置、有效共享的数据要素市场,赋能东西部数字化发展。上海算力交易平台上海算力交易平台 2 在 2023 年 4 月 26 日举办的“算力浦江”(首届)数字经济发展论坛上,上海算力(试运行)交易平台正
7、式启动,这是依托国家(上海)新型互联网交换中心(简称“SHIXP”)平台交换架构的独特性,先行先试探索打造的全国首个算力交易集中平台。依托 SHIXP,上海算力(试运行)交易平台的近景目标是:到2023 年底,初步建成算力调度平台,探索算力交易运营机制;进一步扩大交换流量规模,实现上海市内算力资源调度。据悉,上海电信、上海移动、上海联通、上海铁塔、东方有线、腾讯云、有孚云等已入驻上海算力(试运行)交易平台。本次论坛上,14 家首批入驻算力交易平台的企业与 SHIXP 分别签约,将展开深度合作,资源共享、协同合作,共同推进数字产业的发展。目前上海算力指数排名位列全国第一,综合算力指数排名位列全国
8、第二。截至 2022 年底,上海在用标准机架数 41.5 万,同比增长 15%,算力总规模近 9E flops。全国全国一体化一体化算力算网调度平台算力算网调度平台 2023 年 6 月 5 日,由国家工业和信息化部主办,中国信息通信研究院等承办的“算力创新发展高峰论坛”在京召开。会上,中国信通院联合中国电信共同发布我国首个实现多元异构算力调度的全国性平台“全国一体化算力算网调度平台(1.0 版)”。该平台统一整合通用算力、并行算力、边缘算力等多源异构算力资源,实现不同厂家、不同硬件结构资源池的算力只能管理分发调度。尤其在对算力要求较高的 AI 训练应用中,该平台通过整合跨资源池、跨平台、跨厂
9、商的异构算力实现分配调度。目前,已有天翼云、华为云、阿里云等云服务厂家接入该平台。“全国一体化算力算网调度平台”的发布,不仅有利于贯彻落实国家“东数西算”工程要求,促进东部数字经济产业链向西部延伸拓展,同时还将推动算力资源的精准配置和按需获取,有效降低算力能源消耗,助力区域协调发展和信息通信行业碳达峰、碳中和目标达成。(二)算力交易平台海外发展现状(二)算力交易平台海外发展现状 海外算力并网项目大多基于现有的分布式计算(Distributed computing)和云计算(Cloud computing)项目进行开发和扩展。本节主要介绍两个规模和知名度最高的项目:美国的 BOINC6和欧盟的
10、EGI7。3 伯克利开放计算网络(Berkerley Open Infrastructure for Network Computing,BOINC)BOINC 是由伯克利提出的网络计算开放基础设施项目。其主要面向志愿计算(Volunteer computing,是一种分布式计算构架)的开源中间件分布式计算系统。BOINC 最早设计是用于支持 SETIHome 项目,该项目旨在通过计算分析外太空无线电信号来探索地外生命和文明的研究计划。目前 BOINC 已经在医药学、分子生物学、数学、语言学、气候变化研究、环境科学以及星体物理学等领域展开了广泛的应用。截止 2021 年 11 月,BOINC
11、项目包含了 34236 名志愿者、136341 台活跃计算节点共计 20.164PetaFLOPS 算力。BOINC 的软件系统可以将并入计算网络中结点的空闲 CPU 和 GPU 用于共享计算网络中的科学计算任务。2008 年 BOINC 与英伟达合作开发了 BOINC 系统的 CUDA 支持。2009 年与ATi/AMD 合作新增了 ATi/AMD GPU 的计算支持。BOINC 系统中有一套可信计算系统(Credit system),通过该系统来防止故障硬件和欺诈。同时对返回的计算结果进行校验,保证计算结果的可靠性。目前 BOINC 正在与区块链技术进行整合,通过 BOINC 完成的计算任
12、务会反馈积分,用户可以将积分兑换 COP 代币。目前 BOINC 和区块链结合方式还比较简单,主要就是积分,未来 BOINC 计划基于智能合约让其产生真的代币,同时也会和一些知名的公链进行合作,在区块链上进行深耕。欧洲网格计算基础设施(European Grid Infrastructure,EGI)2008 年 5 月,为了利用网格计算技术促进科学计算和科技进步,欧盟提出建立 EGI,欧洲网格计算基础设施。EGI 旨在通过利用网格计算技术将欧盟成员国的计算基础设施进行连接,共同服务于欧盟在生物医药、星体科学、高能物理、生物信息学等领域的科学计算项目。截止 2021 年,EGI 项目已经累计为
13、 78,100位用户提供了 508 万云 CPU 时、支撑了 27 项欧盟科研计划和 450 万次作业提交,参与贡献的有超过 800 个终端和多达 150 个数据中心。根据不同的应用实例,EGI 向科研人员和社区提供包括批量计算(Batch computing)、交互计算(Interactive computing)、联邦数据访问(Federated access and data federation)、数据空间(Data space)以及服务部署(Service hosting)等服务。批量计算服务为用户提供批量计算访问的 API 接口,其通过 EGI 计算集 4 群提供的高吞吐量计算、在
14、线云存储和负载管理模块根据计算任务需要提供量化、可扩展和成本资源优化的计算服务。交互计算服务基于 Jupyter Notebooks 提供交互式数据分析和可视化的接口,同时通过 EGI 社区提供的云存储、云计算以及相关技术服务支持为用户提供一站式、易用的交互式科学计算体验。联邦数据访问和数据空间服务基于联邦学习技术,提供安全、透明的数据访问与计算服务,为EGI 社区提供安全、高效、多样化的数据访问与使用技术解决方案。服务部署模块基于 EGI 联邦计算集群和 EGI 网络,提供安全、高效、高可用的专用服务器节点供用户部署计算服务。5 二、问题与挑战二、问题与挑战 基于区块链的算力并网交易平台面临
15、的挑战主要包括以下几方面:交易效率、交易安全、交易多样性、交易激励因素复杂性、交易可监管性以及资源调度。交易效率 交易数据上链过程的开销大且比较耗时,简单概括上链过程包括交易数据入记账队列、打包新区块、交易共识(如 DPOS、PBFT 共识)、以及广播到所有节点进行存储。由此可见,数据上链的开销包括共识开销、计算开销、网络开销及存储开销,而且上链过程受队列调度、共识算法处理、网络广播等因素影响,会产生时间延迟。因此并不是所有数据都应该上链,而要充分考虑开销和效率,让无需上链的数据(如:非全局性的、无需多方共识的、数据量大的、计算繁杂的)放到链下处理。以下棋为例进行说明,棋手的每一步棋并不需要实
16、时上链,而在棋局结束时,比如总共下了几百手,那么将这几百手的记录汇总起来,连同输赢结果上链,以便记录战绩。对弈双方的每步棋的数据可以通过链外系统进行通信,可以达到实时、高效的数据传输。算力交易具有小额、高频交易特征,给系统处理性能带来很大挑战。交易安全 交易安全问题,主要涉及两方面,包括数字身份安全和数据(包含交易数据和用户数据)隐私安全。(1)数字身份安全 针对分布式系统,用户身份被假冒会造成很大损失,比如在 NFT 平台艺术家劳夫曼的作品在他不知情的情况下被拍卖。因此用户数字身份安全认证及数字身份管理对交易平台来说至关重要。(2)数据隐私安全 对于分布式交易系统,交易数据是否公开,不公开的
17、话应该允许哪些用户查看,另外也要解决用户隐私数据保护问题。交易多样性 算力供应商和用户对计费的策略需求不尽相同,因此,如何支持丰富多样的算力交易模式,提出一种可以满足用户和供应商多样性需求的算力交易模型也是本项目的一个难点。另外还需要解决信息孤岛问题,支持交易数据在不同平台之 6 间可信流转。交易激励因素复杂性 常见的竞价机制是按价格优先与时间优先的原则排序,将买卖指令配对竞价成交,但算力交易平台需要结合激励条件(如低碳、绿色能源优先、电力利用率、公益、慈善等社会效益)对算力竞价机制做一些调整,构建一套结合竞价与激励机制的参数模型,把多维度的数据综合考量,达到更好的社会效益。交易可监管性 监管
18、对于保障交易系统的用户权益至关重要,因此需要对区块链交易进行监管,设计出可追溯可屏蔽的面向监管友好的区块链交易平台。目前公有链在国内不被法律允许,因此普遍使用联盟链技术,联盟链监管存在以下挑战:一方面,不同平台间未建立有效的信息共享机制,不互通不协同,存在封闭性、敏感性、异构性的难题;另一方面,传统的监管技术往往难以涵盖持续变化的监管需求,也难以适应各种异构底层区块链技术。资源调度 算力资源调度机制主要根据用户提供的需求与现有算力资源实例之间按照预定的评分函数和规则进行匹配,然后选择得分较高的算力解决方案为用户进行分配和调度。现有资源调度方案中预设的评分函数和规则往往是根据经验调整好的固定参数
19、,难以根据市场和用户需求的变化来动态地进行调整。因此,构建一套基于数据驱动的算力调度方案有助于平台适应市场需求变化并提高用户满意度。7 三、关键技术三、关键技术 本平台涉及的关键技术包括:分布式数字身份与可信凭证技术、链上链下结合的交易处理技术、多维度激励机制、数据访问控制、算力资源调度及区块链监管。(一)分布式数字身份与可信凭证技术(一)分布式数字身份与可信凭证技术 随着数字经济的发展,越来越多的事务处理依赖数字身份及数字凭证。物理身份无法满足在线使用的要求,因为物理文档的数字副本很容易伪造,而且合法性难以进行远程验证。传统的物理凭证及其电子化凭证无法有效应对高频请求、海量数据、隐私安全和不
20、断出现的新型数字化场景的挑战。为了解决这些挑战,分布式数字身份技术被提出并得到快速发展,自2019年W3C分布式身份标识符工作组(DIWC:Decentralized Identifier Working Group)发布分布式身份标识符的首个工作草案以来,分布式身份标识相关的标准与规范持续扩展完善,目前主要有5个技术规范,如下表所示。表 1 分布式身份标识相关的技术规范 序号序号 规范名称规范名称 描述描述 1 分布式身份标识符(DID:Decentralized Identifier 1)DID 是一种全局唯一的数字身份标识符,具有分布式、可解析性及可验证性。与传统标识符的区别是数据自主存
21、储而不是集中托管,标识自生成、自分配、自管理而不是统一分配,数据真实性由加密算法背书而不是由权威机构背书。2 DID 文档(DID Document)DID 文档并不包含用户身份数据相关的内容(如姓名、年龄、住址、手机号等),而只是包含描述 DID 相关的一些信息(包含 DID 标识符、公钥列表、公钥详细信息诸如持有者、加密算法等),它通常储存在一个与 DID 关联 8 的分布式系统中,可以通过 DID 检索到。3 DID 解析器(DID Resolver)DID 解析器的作用是通过 DID 来获取 DID 文档,其接口 API 用于接收 DID 查找请求、执行相应的 DID 方法以检索对应的
22、 DID 文档、并返回文档。4 可验证凭证(VC:Verifiable Credential 2)可验证凭证 VC 通常是权威实体为另一个实体的某些属性做背书而发出的描述性声明,并附加自己的数字签名;VC 规范定义了可验证凭证的数据格式,形成数据跨域跨机构交互的一种标准。5 身份存储库(Identity Hub)身份存储库允许用户以安全而隐私的方式存储其敏感数据,未经用户授权不允许访问;即数据由用户控制,用户可以选择以任何方式存储数据,且只有通过用户授权后,才可以允许第三方访问。以上5个技术规范被广泛应用到分布式数字身份与可信数字凭证系统的构建中,确保数字身份和数字凭证可以在不同网络和平台上的
23、互操作。分布式数字身份与可信数字凭证系统通常包含以下4种用户:凭证持有者、VC签发者(Issuer)、VC验证者及权威机构。权威机构是一种特殊实体,具有认证用户身份的能力,例如认证某一个用户为VC签发者。VC签发者通常是授权机构(如学校、医院、政府部门等),可注册凭证模板、签发可验证凭证。一个VC凭证的主要操作过程包括:(1)VC签发者根据业务特征设计并定义凭证模板,在模板中可以要求凭证声明内容包括哪些属性或数据字段,并规定哪些属性是必需的或可选的。(2)VC签发者公布凭证模板,并提供相应凭证的签发服务;(3)凭证申请者(即持有者)选择一个凭证模板,填写凭证声明内容,并提交凭证创建申请;(4)
24、VC签发者获取凭证创建申请后,审核对应的凭证声明内容,当审核通过,签发该VC凭证,为凭证签名等。(5)凭证持有者拿到VC凭证后,可根据需要把该凭证出示给VC验证者。(6)VC验证者检验凭证是否真实,具体包括校验凭证是否是由 9 VC签发者签发的、校验持有者和VC签发者的身份、验证披露的数据是否真实。(二)链上链下结合(二)链上链下结合的交易处理技术的交易处理技术 区块链的去中心化、分布式存储、数据防篡改、可追溯、依靠密码学提供信任背书、按智能合约自动执行等特点为分布式交易平台提供了有力的技术支撑。在比特币、以太坊等公有链上的交易往往通过加密货币(如比特币、以太币)实现。在比特币网络中,每一笔交
25、易都需要全网广播,通知矿工,并产生一些费用打赏矿工(作为记账激励),而且网络的记账规则大大限制了交易速度,对于小额高频交易的场景非常不适用。针对以上问题,业界提出了链上链下结合的交易处理技术,闪电网络就是属于此类技术方法,其目的是为了实现高效且低成本的交易。原先所有交易都在比特币网络上进行,交易记录都被记载在比特币网络这个大账本上,也就是说数据都是上链的。而闪电网络是比特币网络在链下的扩充,在闪电网络上进行的交易并不会记录到比特币的大账本上,这些交易是在链下完成的,它允许交易双方建立交易通道,并成为两个闪电网络节点,后续双方的交易都通过该通道完成,中间的交易数据不上链,因此也不用付手续费,交易
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 区块 并网 交易平台 研究 报告 2023
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【Stan****Shan】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【Stan****Shan】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。