基于雾计算的云网数据存储方法、装置、设备及介质与流程

1.本技术涉及云服务器
技术领域：
：，尤其涉及一种基于雾计算的云网数据存储方法、装置、设备及介质。
背景技术：
：：2.云网业务架构主要是两个最根本的基石，一是运营商原来的数据中心或业务中心，使其成为一个新的业务和数据中心；二是已经建设起来的下一代网络。二者都在网际互连协议(internetprotocol，ip)网上运行，现在已经很好的整合在一起，从而构成了一个强大而灵活的统一业务实现(usd)系统。为各类客户提供方便快捷的云计算服务和网络服务，并统称为“云网一体”服务。3.当前的云存储方式，根据不同的区域分别将数据存储至不同的资源池中，比如a地区的数据存储至a地区对应的资源池，b地区的数据存储至b地区对应的资源池，用户只能够使用自己购买过的资源池的存储服务，若用户购买过a地的服务，漫游至b地，先从b地接入互联网，再通过互联网的链路路由到a地，再由a地互联网链路路由到a地的云存储资源池的存储服务。4.然而，现有技术的云网数据方式有较长的数据传输时延，用户体验性差。技术实现要素：5.本技术提供一种基于雾计算的云网数据存储方法、装置、设备及介质，以解决现有技术的云网数据方式有较长的数据传输时延，用户体验性差的技术问题。6.第一方面，本技术提供基于雾计算的云网数据存储方法，包括：7.根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表，其中，任意两个云资源池之间通过高速链路实现连接，所述高速链路的带宽大于预设带宽阈值；8.根据用户终端的稠密程度，建立多个雾计算节点；9.响应于用户终端的注册请求，生成资源定位符，将所述资源定位符发送至所述用户终端；10.响应于用户终端发送的文件上传请求包，根据所述网际互连协议地址云资源池关联表为所述用户终端确定目标云存储池，将所述目标云存储池地址标识发送至所述用户终端，以使所述用户终端在接收到所述目标云存储池地址标识后，发起上传数据请求，其中，所述文件上传请求包包括所述用户终端的资源定位符；11.响应于所述上传数据请求，根据预设雾计算节点筛选算法，确定为所述用户终端上传数据的目标雾计算节点列表，其中，所述目标雾计算节点列表中包括至少一个目标雾计算节点；12.将所述目标雾计算节点列表发送至所述用户终端，以使所述用户终端与所述目标雾计算节点建立连接，通过所述目标雾计算节点将数据上传至所述目标云资源池。13.这里，本技术建立了在云资源池之间建立的高速链路，数据传输时延低、速度快，并针对用户终端与云资源池，生成网际互连协议地址云资源池关联表，基于用户终端的稠密程度建立多个雾计算节点，该雾计算节点可以为用户提供数据上传服务，在网络边缘，数据可以在更接近源头的地方进行处理和分析，将用户要存储的数据快速上传至网际互连协议地址云资源池关联表中距离用户最近的云资源池，为用户终端建立更多的接入点，从而更加提升用户与云之间传输数据的效率，以能更大的提高业务数据吞吐率，降低传输时延，减少抖动、方便用户从最近端访问存储系统，减少数据传输的时延，提升用户体验，提升云存储使用的便捷性。14.可选地，所述注册请求包括用户标识；相应地，所述响应于用户终端的注册请求，生成资源定位符，包括：响应于用户终端的注册请求，对所述用户标识和注册日期进行哈希计算，得到资源定位符。15.其中，本技术为每一个用户生成的唯一链接，通过哈希计算得到资源定位符，防止中间人获取用户信息，提高了用户数据的安全性以及云网数据存储的安全性。16.可选地，所述文件上传请求包中还包括所述用户终端的网际互连协议地址；相应地，所述响应于用户终端发送的文件上传请求包，根据所述网际互连协议地址云资源池关联表为所述用户终端确定目标云存储池，包括：根据所述用户终端的网际互连协议地址和所述网际互连协议地址云资源池关联表，确定与所述用户终端距离最近的云资源池为目标云资源池。17.其中，本技术根据用户终端与云资源池的距离为用户确定目标云资源池，且云资源池之间建立了高速链路，可实现数据的快速传输，提升用户与云之间传输数据的效率，以能更大的提高业务数据吞吐率，降低传输时延，减少抖动、方便用户从最近端访问存储系统，提高了用户体验。18.可选地，所述上传数据请求包括数据的分块数和分块大小；相应地，所述根据预设雾计算节点筛选算法，确定为所述用户终端上传数据的目标雾计算节点列表，包括：根据所述用户终端的网际互连协议地址，确定与所述用户终端距离小于预设距离阈值的雾计算节点；根据预设雾计算节点筛选算法，结合所述分块大小和所述与所述用户终端距离小于预设距离阈值的雾计算节点的符合状态，确定为所述用户终端上传数据的目标雾计算节点列表。19.其中，本技术根据用户终端的地址，查找用户周围的雾计算节点，根据分块大小和雾计算节点的负荷状态，筛选出符合要求的雾计算节点列表，能够确定出传输时延最低、传输速度最高的目标雾计算节点，进一步地提高了云网数据存储的效率，提高了用户体验。20.可选地，在所述将所述目标雾计算节点列表发送至所述用户终端之后，还包括：在所述用户终端与所述目标雾计算节点建立连接后，通过所述目标雾计算节点接收所述用户终端上传的块数据；通过所述目标雾计算节点将所述块数据上传至目标云资源池。21.其中，本技术通过雾计算节点将用户终端的数据上传至云资源池，通过处理更靠近网络边缘的数据，雾计算可以显著降低数据传输的延迟，从而缩短响应时间，雾计算可以通过使数据在更接近源的地方进行处理和分析来提高安全性，减少敏感数据通过网络传输到远程数据中心或云的风险，进一步地提高了云网数据存储的安全性和传输效率，提高了用户体验。22.可选地，在所述通过所述目标雾计算节点接收所述用户终端上传的块数据之后，还包括：根据所述块数据的摘要数据和块序号，进行摘要计算；若摘要计算有误，则向所述用户终端发送错误信息。23.其中，本技术可以及时发现数据传输的错误并及时告知用户终端，以提醒用户终端重新传输数据，提高了云网数据存储的准确性及可靠性，进一步地提高了用户体验。24.可选地，在所述通过所述目标雾计算节点将所述块数据上传至目标云资源池之后，还包括：根据预设格式，更新存储记录。25.这里，本技术在用户数据上传成功之后，及时更新存储记录，便于用户了解存储情况，并根据存储记录实现存储数据的下载，进一步地提高了用户体验。26.可选地，在所述根据预设格式，更新存储记录之后，还包括：27.响应于用户终端的数据下载请求，通过所述网际互连协议地址云资源池关联表，确定所述用户终端待下载数据的存储位置。28.其中，本技术不止提供了降低时延的数据上传方法，用户还可以快速下载云服务器存储的数据，提高了数据处理的效率，进一步地提高了用户体验。29.第二方面，本技术提供了一种云网数据存储装置，包括：30.关联表生成模块，用于根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表，其中，任意两个云资源池之间通过高速链路实现连接，所述高速链路的带宽大于预设带宽阈值；31.雾计算节点建立模块，用于根据用户终端的稠密程度，建立多个雾计算节点；32.资源定位符生成模块，用于响应于用户终端的注册请求，生成资源定位符，将所述资源定位符发送至所述用户终端；33.云资源池确定模块，用于响应于用户终端发送的文件上传请求包，根据所述网际互连协议地址云资源池关联表为所述用户终端确定目标云存储池，将所述目标云存储池地址标识发送至所述用户终端，以使所述用户终端在接收到所述目标云存储池地址标识后，发起上传数据请求，其中，所述文件上传请求包包括所述用户终端的资源定位符；34.雾计算节点确定模块，用于响应于所述上传数据请求，根据预设雾计算节点筛选算法，确定为所述用户终端上传数据的目标雾计算节点列表，其中，所述目标雾计算节点列表中包括至少一个目标雾计算节点；35.发送模块，用于将所述目标雾计算节点列表发送至所述用户终端，以使所述用户终端与所述目标雾计算节点建立连接，通过所述目标雾计算节点将数据上传至所述目标云资源池。36.可选地，所述注册请求包括用户标识；37.相应地，所述资源定位符生成模块具体用于：38.响应于用户终端的注册请求，对所述用户标识和注册日期进行哈希计算，得到资源定位符。39.可选地，所述文件上传请求包中还包括所述用户终端的网际互连协议地址；40.相应地，所述云资源池确定模块具体用于：41.根据所述用户终端的网际互连协议地址和所述网际互连协议地址云资源池关联表，确定与所述用户终端距离最近的云资源池为目标云资源池。42.可选地，所述上传数据请求包括数据的分块数和分块大小；43.相应地，所述雾计算节点确定模块具体用于：44.根据所述用户终端的网际互连协议地址，确定与所述用户终端距离小于预设距离阈值的雾计算节点；45.根据预设雾计算节点筛选算法，结合所述分块大小和所述与所述用户终端距离小于预设距离阈值的雾计算节点的符合状态，确定为所述用户终端上传数据的目标雾计算节点列表。46.可选地，在所述发送模块用于将所述目标雾计算节点列表发送至所述用户终端之后，上述装置还包括上传模块，用于：47.在所述用户终端与所述目标雾计算节点建立连接后，通过所述目标雾计算节点接收所述用户终端上传的块数据；48.通过所述目标雾计算节点将所述块数据上传至目标云资源池。49.可选地，在所述上传模块用于通过所述目标雾计算节点接收所述用户终端上传的块数据之后，上述装置还包括：50.根据所述块数据的摘要数据和块序号，进行摘要计算；51.若摘要计算有误，则向所述用户终端发送错误信息。52.可选地，在所述上传模块用于通过所述目标雾计算节点将所述块数据上传至目标云资源池之后，上述装置还包括更新模块，用于：53.根据预设格式，更新存储记录。54.可选地，在所述更新模块根据预设格式，更新存储记录之后，上述装置还包括下载模块，用于：55.响应于用户终端的数据下载请求，通过所述网际互连协议地址云资源池关联表，确定所述用户终端待下载数据的存储位置。56.第三方面，本技术提供一种基于雾计算的云网数据存储设备，包括：至少一个处理器和存储器；57.所述存储器存储计算机执行指令；58.所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如上第一方面以及第一方面各种可能的设计所述的基于雾计算的云网数据存储方法。59.第四方面，本技术提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一方面以及第一方面各种可能的设计所述的基于雾计算的云网数据存储方法。60.第五方面，本技术提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时，实现如上第一方面以及第一方面各种可能的设计所述的基于雾计算的云网数据存储方法。61.本技术提供的基于雾计算的云网数据存储方法、装置、设备及介质，其中该方法建立了在云资源池之间建立的高速链路，数据传输时延低、速度快，并针对用户终端与云资源池，生成网际互连协议地址云资源池关联表，基于用户终端的稠密程度建立多个雾计算节点，该雾计算节点可以为用户提供数据上传服务，在网络边缘，数据可以在更接近源头的地方进行处理和分析，将用户要存储的数据快速上传至网际互连协议地址云资源池关联表中距离用户最近的云资源池，为用户终端建立更多的接入点，从而更加提升用户与云之间传输数据的效率，以能更大的提高业务数据吞吐率，降低传输时延，减少抖动、方便用户从最近端访问存储系统，减少数据传输的时延，提升用户体验，提升云存储使用的便捷性。附图说明62.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。63.图1为本技术实施例提供的一种基于雾计算的云网数据存储系统架构示意图；64.图2为本技术实施例提供的一种基于雾计算的云网数据存储方法的流程示意图；65.图3为本技术实施例提供的一种基于雾计算的云网数据存储装置的结构示意图；66.图4为本技术实施例提供的一种基于雾计算的云网数据存储设备的结构示意图。67.通过上述附图，已示出本公开明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本公开的概念。具体实施方式68.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。69.本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”及“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。70.需要说明的是，本技术所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。71.云服务商虽然已经运营了几年，但是针对于云存储，还是分开各个资源池建设，各个云资源池是分开的提供服务的，也就是说用户买的是哪个资源池的存储服务，就使用的哪个存储资源池的存储，一经购买后，就只能使用一个存储池的存储服务。对于经常有移动性要求的用户很不友好，比如用户购买过a地的服务，漫游至b地，先从b地接入互联网，再通过互联网的链路路由到a地，再由a地互联网链路路由到a地的云存储资源池的存储服务。需要经过从b地到a地的漫长数据传输的时延、丢包、抖动，用户性差。现有技术的云网数据方式有较长的数据传输时延，用户体验性差。72.为了解决上述技术问题，本技术实施例提供一种基于雾计算的云网数据存储方法、装置、设备及介质，该方法通过高速云间网络存储调度，将文件块调度到距离用户最近的云资源池，用户上传时，也是上传到最近的云资源池，以此减少用户使用存储时的时延、抖动、丢包概率，进一步地通过对于雾计算节点的引入，从而增加用户终端的连接点，为用户终端建立更多的接入点，从而提升传输效率，减少传输时延，提升业务数据吞吐率。73.可选地，图1为本技术实施例提供的一种基于雾计算的云网数据存储系统架构示意图。如图1所示，上述架构包括：存储管理系统101、用户终端102、第一雾计算节点103、第二雾计算节点104、第三雾计算节点105、第一云资源池106、第二云资源池107和第三云资源池108。74.存储管理系统101包括云运营商存储管理系统1011和云资源池存储管理系统1012。75.用户终端102和存储管理系统101连接。76.其中，云资源池存储管理系统1012分别与第一云资源池106、第二云资源池107和第三云资源池108连接，可以与第一云资源池106、第二云资源池107和第三云资源池108实现通信，并管理第一云资源池106、第二云资源池107和第三云资源池108。77.其中，用户终端102分别与第一雾计算节点103、第二雾计算节点104和第三雾计算节点105连接，存储管理系统101分别与第一雾计算节点103、第二雾计算节点104和第三雾计算节点105连接，用户终端102和存储管理系统101均能够与任意雾计算节点实现通信。78.其中，任意两个云资源池之间通过高速链路实现通信。79.可选地，云运营商存储管理系统1011和云资源池存储管理系统1012可以为云服务器。80.可以理解的是，上述存储管理系统101、用户终端102、第一雾计算节点103、第二雾计算节点104、第三雾计算节点105、第一云资源池106、第二云资源池107和第三云资源池108的数量及具体结构可以根据实际情况确定，图1仅是示意性的，本技术实施例对于上述节点的数目不作具体限制。81.可以理解的是，本技术实施例示意的结构并不构成对基于雾计算的云网数据存储系统架构的具体限定。在本技术另一些可行的实施方式中，上述架构可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置，具体可根据实际应用场景确定，在此不做限制。图1所示的部件可以以硬件，软件，或软件与硬件的组合实现。82.另外，本技术实施例描述的网络架构以及业务场景是为了更加清楚的说明本技术实施例的技术方案，并不构成对于本技术实施例提供的技术方案的限定，本领域普通技术人员可知，随着网络架构的演变和新业务场景的出现，本技术实施例提供的技术方案对于类似的技术问题，同样适用。83.下面以几个实施例为例对本技术的技术方案进行描述，对于相同或相似的概念或过程可能在某些实施例不再赘述。84.图2为本技术实施例提供的一种基于雾计算的云网数据存储方法的流程示意图，本技术实施例可以应用于图1中的存储管理系统101，具体执行主体可以根据实际应用场景确定。如图2所示，该方法包括如下步骤：85.s201：根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表。86.其中，任意两个云资源池之间通过高速链路实现连接，高速链路的带宽大于预设带宽阈值。87.可以理解的是，预设带宽阈值可以根据实际情况确定，本技术实施例对此不作具体限制。88.在一种可能的实现方式中，云计算建设各地的云资源池后，对于各个云资源池，通过专线建设云间高速，即高速链路，此专线可以达到100g带宽或者超过1000g带宽，对于云运营商的各个资源池，尽量能达到网状链接，即每两个云资源池间都有直达的高速链路，或者最多经过一跳就能到另外一个资源池。通过此链路完成云池间的存储调度。对于各个云资源池的存储资源池，确定云资源池标识，例如编号身份标识号(identitydocument，id)。同时对于所有的用户终端网际互连协议(internetprotocol，ip)地址，或者ip地址池，也就是用户所有可能的ip地址，划分到指定的云资源池形成ip地址云资源池关联表。这个ip地址划分指定关系会因云资源池的数量的增多，而不断的细化划分更新ip地址云资源池关联表。89.s202：根据用户终端的稠密程度，建立多个雾计算节点。90.可选地，可以根据预设区域大小划分多个区域，若某一区域的用户终端个数大于预设数量阈值，则在该用户终端建立雾计算节点，并根据不同区域的用户终端的数量建立不同数量的雾计算节点。91.可选地，可以根据预设区域大小划分多个区域，根据区域内用户终端的数量从大到小进行排序，根据顺序确定不同区域中雾计算节点的数量。92.可选地，在用户终端比较稠密的地方，建设大量的雾计算节点，比如在一些公共办公室，部署大量的雾计算节点，100平米部署有30个以上雾计算节点等93.s203：响应于用户终端的注册请求，生成资源定位符，将资源定位符发送至用户终端。94.可选地，本技术实施例中，与用户终端通信的方式可以为通过用户终端的应用程序或者通过门户系统、网站等。95.可选地，注册请求可以为用户终端的登录请求或者购买请求。96.可选地，用户登录云运营商门户后，购买云存储服务。97.可选地，注册请求包括用户标识；相应地，响应于用户终端的注册请求，生成资源定位符，包括：响应于用户终端的注册请求，对用户标识和注册日期进行哈希计算，得到资源定位符。98.其中，本技术实施例为每一个用户生成的唯一链接，通过哈希计算得到资源定位符，防止中间人获取用户信息，提高了用户数据的安全性以及云网数据存储的安全性。99.在一种可能的实现方式中，云运营商通过门户提供资源定位符(uniformresourcelocator，url)给用户，用户可以通过该url上传数据到云存储上。该url是云运营商为每一个用户生成的唯一链接，由用户id+注册日期进行sha256运算后获得。比如：若某个用户对应的用户id&注册时间&手机号码为：zhang***&2022***&185****1234，则在上述数据通过哈希运算后的链接地址则为md5(zhang***&2022***&185****1234)或者其他的sha256、sm3等摘要算法，此处该算法的目的仅是防止中间人从链接中获取用户信息。该链接信息存储在云运营商存储管理系统里。100.可选地，用户通过云运营商门户，或者云运营商提供的应用程序，完成用户id验证后，云运营商存储管理系统返回url、文件块大小要求blocksize到用户应用程序或者门户系统，用户应用程序记录url，方便后续流程使用。101.s204：响应于用户终端发送的文件上传请求包，根据网际互连协议地址云资源池关联表为用户终端确定目标云存储池，将目标云存储池地址标识发送至用户终端，以使用户终端在接收到目标云存储池地址标识后，发起上传数据请求。102.其中，文件上传请求包包括用户终端的资源定位符。103.可选地，文件上传请求包中还包括用户终端的网际互连协议地址；相应地，响应于用户终端发送的文件上传请求包，根据网际互连协议地址云资源池关联表为用户终端确定目标云存储池，包括：根据用户终端的网际互连协议地址和网际互连协议地址云资源池关联表，确定与用户终端距离最近的云资源池为目标云资源池。104.其中，本技术实施例根据用户终端与云资源池的距离为用户确定目标云资源池，且云资源池之间建立了高速链路，可实现数据的快速传输，提升用户与云之间传输数据的效率，以能更大的提高业务数据吞吐率，降低传输时延，减少抖动、方便用户从最近端访问存储系统，提高了用户体验。105.在一种可能的实现方式中，用户终端发出文件上传请求包到云运营商存储管理系统，该请求包中包含：url，文件大小(由应用程序或者门户系统计算)、文件名和用户终端ip地址。云运营商存储管理系统收到用户请求后，给用户返回上传计算中信息，并根据中的用户终端ip地址，选择距离该ip地址最近的云资源池为用户分配存储空间。并将该目标云存储池id返回到云运营商存储管理系统，云运营商存储管理系统给用户终端返回目标云存储池id和目标云存储池的云资源池存储管理系统地址。106.s205：响应于上传数据请求，根据预设雾计算节点筛选算法，确定为用户终端上传数据的目标雾计算节点列表。107.其中，目标雾计算节点列表中包括至少一个目标雾计算节点。108.可选地，上传数据请求包括数据的分块数和分块大小；相应地，根据预设雾计算节点筛选算法，确定为用户终端上传数据的目标雾计算节点列表，包括：根据用户终端的网际互连协议地址，确定与用户终端距离小于预设距离阈值的雾计算节点；根据预设雾计算节点筛选算法，结合分块大小和与用户终端距离小于预设距离阈值的雾计算节点的符合状态，确定为用户终端上传数据的目标雾计算节点列表。109.其中，本技术实施例根据用户终端的地址，查找用户周围的雾计算节点，根据分块大小和雾计算节点的负荷状态，筛选出符合要求的雾计算节点列表，能够确定出传输时延最低、传输速度最高的目标雾计算节点，进一步地提高了云网数据存储的效率，提高了用户体验。110.可选地，用户终端收到云资源池存储管理系统地址后，对文件按系统要求blocksize进行分块，并向云资源池存储管理系统接口发送上传数据请求。该请求中包含文件系统的分块数和分块大小。111.云资源池存储管理系统收到该请求后，根据用户终端所发信息携带的源端ip地址，判定用户所处的位置，并在雾计算运营商系统中，根据用户位置，查找用户周围的雾计算节点。根据分块大小和雾计算节点的负荷状态，筛选出符合要求的雾计算节点列表发送给用户终端。112.可选地，雾计算节点的筛选算法可以选择以下方法：113.设雾计算节点的综合占用负荷为：[0114][0115][0116]其中为雾计算节点的综合占用负荷，ci为cpu利用率，mi为内存利用率，bi为这个雾节点的带宽利用率。qi为每个指标的权重系数。这个指标根据雾计算运营商的cpu、内存、带宽配比视根据具体情况确定，本技术实施例对比不作具体限制。且q1+q2+q3＝1，n为任意正整数。[0117][0118]其中为雾计算节点的空闲负载、可用资源比例。[0119]雾计算节点si的权值为[0120][0121]各雾计算节点的初始权值为10。各雾计算节点的综合占用负载随着终端用户的请求而动态变化，权值随雾计算节点占用负载变化而动态调整。[0122]各雾计算节点总负载f(sum)定义为：[0123][0124]各雾计算节点权值h(sum)定义为：[0125][0126]各雾计算节点连接数之和b(sum)定义为：[0127][0128]下面我们通过计算负载与权值之比和连接数与权值之比，找出可以使用的雾计算节点序列发给用户终端。[0129]筛选算法如下：[0130]对于每个雾计算节点计算两个值p1、p2，形成向量psi(p1、p2)。[0131][0132][0133]对于每个雾计算节点，计算出向量psi，再根据结果筛选出来psi向量全部小于1的雾节点，形成雾节点列表array(pi、……pm……pr)。[0134]根据用户终端发送的块大小和块数量，筛选出来合适的雾计算节点数组发给用户终端。需要找内存空间大于块大小的。具体这个数组的数量，根据雾计算节点运营商的运营策略而定。比如可以为高优先级用户的数组多发雾计算节点数量，低优先级的用户少发雾计算节点数量。[0135]s206：将目标雾计算节点列表发送至用户终端，以使用户终端与目标雾计算节点建立连接，通过目标雾计算节点将数据上传至目标云资源池。[0136]在一种可能的实现方式中，用户终端收到目标雾计算节点的信息后，与每个雾计算节点建立连接，并将各个文件块分别通过这些连接，分别发到雾计算节点。同时在发送块数据时，发送数据块的摘要数据、块序号。摘要数据可以采用sha256或者md5或者是sm3等算法。雾计算节点收到数据后，先进行摘要计算，若摘要计算有误，则给用户终端回复错误，用户终端重新发送数据块。若摘要计算无误，则雾计算节点将数据块发到云资源池存储管理系统。云资源池存储管理系统收到数据块后，对数据块进行排序，检查是否有未收到的数据。若有未收到的，则向用户终端发送缺失的块序号，用户终端继续选择已经收到回复信息的雾计算节点重新发送缺失块。云资源池存储管理系统检查没有问题的话，直接到下一步。云资源池存储管理系统完成一个文件块上传，就在云资源池存储管理系统里面更新一个文件块的记录。云资源池存储管理系统收到一个记录，就向云运营商存储管理系统发送一个文件块存储信息，云运营商存储管理系统收到后，更新云运营商存储管理系统中的数据。该数据可以以表格的形式显示。表格1的表格表头可以包括filename、datablock。其中filename为文件名称，datablock为文件的数据块摘要名，摘要算法(可以为md5\sha256、sm3等)后计算的结果。表格2的表格表头可以包括block、avaliblezone。其中block为数据块摘要数据。avaliblezone为这个数据块的目标云资源池id。[0137]这里，本技术实施例建立了在云资源池之间建立的高速链路，数据传输时延低、速度快，并针对用户终端与云资源池，生成网际互连协议地址云资源池关联表，基于用户终端的稠密程度建立多个雾计算节点，该雾计算节点可以为用户提供数据上传服务，在网络边缘，数据可以在更接近源头的地方进行处理和分析，将用户要存储的数据快速上传至网际互连协议地址云资源池关联表中距离用户最近的云资源池，为用户终端建立更多的接入点，从而更加提升用户与云之间传输数据的效率，以能更大的提高业务数据吞吐率，降低传输时延，减少抖动、方便用户从最近端访问存储系统，减少数据传输的时延，提升用户体验，提升云存储使用的便捷性。[0138]可选地，在将目标雾计算节点列表发送至用户终端之后，还包括：在用户终端与目标雾计算节点建立连接后，通过目标雾计算节点接收用户终端上传的块数据；通过目标雾计算节点将块数据上传至目标云资源池。[0139]其中，本技术实施例通过雾计算节点将用户终端的数据上传至云资源池，通过处理更靠近网络边缘的数据，雾计算可以显著降低数据传输的延迟，从而缩短响应时间，雾计算可以通过使数据在更接近源的地方进行处理和分析来提高安全性，减少敏感数据通过网络传输到远程数据中心或云的风险，进一步地提高了云网数据存储的安全性和传输效率，提高了用户体验。[0140]可选地，在通过目标雾计算节点接收用户终端上传的块数据之后，还包括：根据块数据的摘要数据和块序号，进行摘要计算；若摘要计算有误，则向用户终端发送错误信息。[0141]其中，本技术实施例可以及时发现数据传输的错误并及时告知用户终端，以提醒用户终端重新传输数据，提高了云网数据存储的准确性及可靠性，进一步地提高了用户体验。[0142]可选地，在通过目标雾计算节点将块数据上传至目标云资源池之后，还包括：根据预设格式，更新存储记录。[0143]这里，本技术实施例在用户数据上传成功之后，及时更新存储记录，便于用户了解存储情况，并根据存储记录实现存储数据的下载，进一步地提高了用户体验。[0144]可选地，在根据预设格式，更新存储记录之后，还包括：[0145]响应于用户终端的数据下载请求，通过网际互连协议地址云资源池关联表，确定用户终端待下载数据的存储位置。[0146]其中，本技术实施例不止提供了降低时延的数据上传方法，用户还可以快速下载云服务器存储的数据，提高了数据处理的效率，进一步地提高了用户体验。[0147]可选地，本技术实施例还提供了一种数据下载方式，具体步骤如下：[0148]下载过程1.1：用户通过云运营商门户，或者云运营商提供的应用程序登录云运营商存储管理系统。并发出浏览文件列表的请求，浏览文件列表的请求中包含云运营商存储管理系统在用户终端注册时发送的资源定位符url1和用户终端的内存可用空间信息。云运营商存储管理系统向用户返回用户文件列表，条目的多少根据用户终端的内存可用空间大小而定，比如2g内存，可能会返回400条条目记录；8g内存，可能会返回2000条条目记录。[0149]下载过程1.2：用户浏览条目记录，并选择文件名称，发起文件下载请求到云运营商存储管理系统。该请求中包括用户源端ip，请求的文件名称，例如：我的电影。云运营商存储管理系统回应至用户终端下载链接生成中的消息。[0150]下载过程1.3：云运营商存储管理系统根据请求中的源端ip，在ip地址云资源池关联表寻找这个ip被划分的云资源池。找到目标云资源池id。[0151]下载过程1.4：云运营商存储管理系统通过查找表格1和表格2，确定文件在目标云资源池中没有。云运营商存储管理系统发起存储调度流程，将云资源池存储管理系统中的文件块第一块先传，随后传第二块，通过云间高速、高优先级传输级别调度传输到目标云资源池，并更新表格2。[0152]下载过程1.5：云运营商存储管理系统生成指向到目标云资源池的下载链接url3，返回给用户终端。[0153]下载过程1.6：用户终端通过url3下载文件块。云运营商存储管理系统调度第三个文件块到目标云资源池。同时云运营商存储管理系统生成块2的目标云资源池的下载链接。用户继续下载，以此类推，直到下载完所有的数据块。同时云运营商存储管理系统更新表格2，在第三块、第四块的avaliblezone中增加目标云资源池。并生成下载链接。此处也可以支持多线程下载。用户在应用程序中设置线程上限。用户设置的上限不能大于云运营商存储管理系统中设置的上限，以此防止系统被用户系统拖死。在上限内，用户终端收到一个链接，即发起下载请求，以此来实现多线程。目标云资源池每完成一个文件块的下载，更新位于目标云资源池的表格3中每个块的最后访问时间。[0154]可选地，本技术实施例还提供了另一种数据下载方式，具体步骤如下：[0155]下载过程2.1：用户通过云运营商门户，或者云运营商提供的应用程序登录云运营商存储管理系统。并发出浏览文件列表的请求，浏览文件列表的请求中包含url1和用户终端的内存可用空间信息。云运营商存储管理系统向用户返回用户文件列表，条目的多少根据用户终端的内存可用空间大小而定，比如2g内存，会返回400条条目记录。8g内存，会返回2000条条目记录。[0156]下载过程2.2：用户浏览条目记录，并选择文件名称，发起文件下载请求到云运营商存储管理系统。该请求中包括用户源端ip，请求的文件名称-我的电影。云运营商存储管理系统回应至用户终端下载链接生成中的信息。[0157]下载过程2.3：云运营商存储管理系统根据请求中的源端ip，在ip地址云资源池关联表寻找这个ip被划分的目标云资源池。找到目标云资源池id。[0158]下载过程2.4：云运营商存储管理系统通过查找表格1和表格2，确定文件在目标云资源池中有。[0159]下载过程2.5：云运营商存储管理系统生成指向到目标云资源池的下载链接url3，返回给用户终端。并不断生成下载链接给用户终端，直到下载完所有的块。此处也可以使用上传过程中的雾计算节点方法，提高下载效率。[0160]下载过程2.6：目标云资源池每完成一个文件块的下载，更新位于目标云资源池的表格3中每个块的最后访问时间。[0161]可选地，本技术实施例还可以实现存储系统数据调整优化：[0162]经过一段时间的运行，也许各个云池的重复数据太多，需要删除，以来增加存储空间，利于后面的调度。云运营商存储管理系统根据运营者的参数配置，完成数据的删除优化。比如运营者配置为最多数据10份，那么针对表格2中存储的数据进行遍历，若表格2中包括5份数据，则确定是不需要删除数据的，若运营者配置为最多数据3份，表格2中包括5份数据，确定需要删除数据，在检索到大于3份的数据块后，再去在各相关云存储池中的表格3中检索，根据对表格2的更新，更新表格3中的数据，删除表格3中的相关数据块信息。例如，删除最久的访问时间对应的资源池的数据块。[0163]图3为本技术实施例提供的一种基于雾计算的云网数据存储装置的结构示意图，如图3所示，本技术实施例的装置包括：关联表生成模块301、雾计算节点建立模块302、资源定位符生成模块303、云资源池确定模块304、雾计算节点确定模块305和发送模块306。这里的基于雾计算的云网数据存储装置可以是服务器或者终端设备，或者是实现服务器或者终端设备的功能的芯片或者集成电路。这里需要说明的是，关联表生成模块301、雾计算节点建立模块302、资源定位符生成模块303、云资源池确定模块304、雾计算节点确定模块305和发送模块306的划分只是一种逻辑功能的划分，物理上两者可以是集成的，也可以是独立的。[0164]其中，关联表生成模块，用于根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表，其中，任意两个云资源池之间通过高速链路实现连接，高速链路的带宽大于预设带宽阈值；[0165]雾计算节点建立模块，用于根据用户终端的稠密程度，建立多个雾计算节点；[0166]资源定位符生成模块，用于响应于用户终端的注册请求，生成资源定位符，将资源定位符发送至用户终端；[0167]云资源池确定模块，用于响应于用户终端发送的文件上传请求包，根据网际互连协议地址云资源池关联表为用户终端确定目标云存储池，将目标云存储池地址标识发送至用户终端，以使用户终端在接收到目标云存储池地址标识后，发起上传数据请求，其中，文件上传请求包包括用户终端的资源定位符；[0168]雾计算节点确定模块，用于响应于上传数据请求，根据预设雾计算节点筛选算法，确定为用户终端上传数据的目标雾计算节点列表，其中，目标雾计算节点列表中包括至少一个目标雾计算节点；[0169]发送模块，用于将目标雾计算节点列表发送至用户终端，以使用户终端与目标雾计算节点建立连接，通过目标雾计算节点将数据上传至目标云资源池。[0170]可选地，注册请求包括用户标识；[0171]相应地，资源定位符生成模块具体用于：[0172]响应于用户终端的注册请求，对用户标识和注册日期进行哈希计算，得到资源定位符。[0173]可选地，文件上传请求包中还包括用户终端的网际互连协议地址；[0174]相应地，云资源池确定模块具体用于：[0175]根据用户终端的网际互连协议地址和网际互连协议地址云资源池关联表，确定与用户终端距离最近的云资源池为目标云资源池。[0176]可选地，上传数据请求包括数据的分块数和分块大小；[0177]相应地，雾计算节点确定模块具体用于：[0178]根据用户终端的网际互连协议地址，确定与用户终端距离小于预设距离阈值的雾计算节点；[0179]根据预设雾计算节点筛选算法，结合分块大小和与用户终端距离小于预设距离阈值的雾计算节点的符合状态，确定为用户终端上传数据的目标雾计算节点列表。[0180]可选地，在发送模块用于将目标雾计算节点列表发送至用户终端之后，上述装置还包括上传模块，用于：[0181]在用户终端与目标雾计算节点建立连接后，通过目标雾计算节点接收用户终端上传的块数据；[0182]通过目标雾计算节点将块数据上传至目标云资源池。[0183]可选地，在上传模块用于通过目标雾计算节点接收用户终端上传的块数据之后，上述装置还包括：[0184]根据块数据的摘要数据和块序号，进行摘要计算；[0185]若摘要计算有误，则向用户终端发送错误信息。[0186]可选地，在上传模块用于通过目标雾计算节点将块数据上传至目标云资源池之后，上述装置还包括更新模块，用于：[0187]根据预设格式，更新存储记录。[0188]可选地，在更新模块根据预设格式，更新存储记录之后，上述装置还包括下载模块，用于：[0189]响应于用户终端的数据下载请求，通过网际互连协议地址云资源池关联表，确定用户终端待下载数据的存储位置。[0190]参考图4，其示出了适于用来实现本公开实施例的基于雾计算的云网数据存储设备400的结构示意图，该基于雾计算的云网数据存储设备400可以为终端设备或服务器。其中，终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、个人数字助理(personaldigitalassistant，简称pda)、平板电脑(portableandroiddevice，简称pad)、便携式多媒体播放器(portablemediaplayer，简称pmp)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字tv、台式计算机等等的固定终端。图4示出的基于雾计算的云网数据存储设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。[0191]如图4所示，基于雾计算的云网数据存储设备400可以包括处理装置(例如中央处理器、图形处理器等)401，其可以根据存储在只读存储器(readonlymemory，简称rom)402中的程序或者从存储装置408加载到随机访问存储器(randomaccessmemory，简称ram)403中的程序而执行各种适当的动作和处理。在ram403中，还存储有基于雾计算的云网数据存储设备400操作所需的各种程序和数据。处理装置401、rom402以及ram403通过总线404彼此相连。输入/输出(i/o)接口405也连接至总线404。[0192]通常，以下装置可以连接至i/o接口405：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置406；包括例如液晶显示器(liquidcrystaldisplay，简称lcd)、扬声器、振动器等的输出装置407；包括例如磁带、硬盘等的存储装置408；以及通信装置409。通信装置409可以允许基于雾计算的云网数据存储设备400与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的基于雾计算的云网数据存储设备400，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。[0193]特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置409从网络上被下载和安装，或者从存储装置408被安装，或者从rom402被安装。在该计算机程序被处理装置401执行时，执行本公开实施例的方法中限定的上述功能。[0194]需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、rf(射频)等等，或者上述的任意合适的组合。[0195]上述计算机可读介质可以是上述基于雾计算的云网数据存储设备中所包含的；也可以是单独存在，而未装配入该基于雾计算的云网数据存储设备中。[0196]上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该基于雾计算的云网数据存储设备执行时，使得该基于雾计算的云网数据存储设备执行上述实施例所示的方法。[0197]可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(localareanetwork，简称lan)或广域网(wideareanetwork，简称wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。[0198]在本技术所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。[0199]另外，在本技术各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。[0200]本领域技术人员在考虑说明书及实践这里公开的申请后，将容易想到本公开的其它实施方案。本技术旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本
技术领域：
：中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求书指出。[0201]应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。当前第1页12当前第1页12
技术特征：
1.一种基于雾计算的云网数据存储方法，其特征在于，包括：根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表，其中，任意两个云资源池之间通过高速链路实现连接，所述高速链路的带宽大于预设带宽阈值；根据用户终端的稠密程度，建立多个雾计算节点；响应于用户终端的注册请求，生成资源定位符，将所述资源定位符发送至所述用户终端；响应于用户终端发送的文件上传请求包，根据所述网际互连协议地址云资源池关联表为所述用户终端确定目标云存储池，将所述目标云存储池地址标识发送至所述用户终端，以使所述用户终端在接收到所述目标云存储池地址标识后，发起上传数据请求，其中，所述文件上传请求包包括所述用户终端的资源定位符；响应于所述上传数据请求，根据预设雾计算节点筛选算法，确定为所述用户终端上传数据的目标雾计算节点列表，其中，所述目标雾计算节点列表中包括至少一个目标雾计算节点；将所述目标雾计算节点列表发送至所述用户终端，以使所述用户终端与所述目标雾计算节点建立连接，通过所述目标雾计算节点将数据上传至所述目标云资源池。2.根据权利要求1所述的方法，其特征在于，所述注册请求包括用户标识；相应地，所述响应于用户终端的注册请求，生成资源定位符，包括：响应于用户终端的注册请求，对所述用户标识和注册日期进行哈希计算，得到资源定位符。3.根据权利要求1所述的方法，其特征在于，所述文件上传请求包中还包括所述用户终端的网际互连协议地址；相应地，所述响应于用户终端发送的文件上传请求包，根据所述网际互连协议地址云资源池关联表为所述用户终端确定目标云存储池，包括：根据所述用户终端的网际互连协议地址和所述网际互连协议地址云资源池关联表，确定与所述用户终端距离最近的云资源池为目标云资源池。4.根据权利要求1所述的方法，其特征在于，所述上传数据请求包括数据的分块数和分块大小；相应地，所述根据预设雾计算节点筛选算法，确定为所述用户终端上传数据的目标雾计算节点列表，包括：根据所述用户终端的网际互连协议地址，确定与所述用户终端距离小于预设距离阈值的雾计算节点；根据预设雾计算节点筛选算法，结合所述分块大小和所述与所述用户终端距离小于预设距离阈值的雾计算节点的符合状态，确定为所述用户终端上传数据的目标雾计算节点列表。5.根据权利要求1至4任一项所述的方法，其特征在于，在所述将所述目标雾计算节点列表发送至所述用户终端之后，还包括：在所述用户终端与所述目标雾计算节点建立连接后，通过所述目标雾计算节点接收所述用户终端上传的块数据；
通过所述目标雾计算节点将所述块数据上传至目标云资源池。6.根据权利要求5所述的方法，其特征在于，在所述通过所述目标雾计算节点接收所述用户终端上传的块数据之后，还包括：根据所述块数据的摘要数据和块序号，进行摘要计算；若摘要计算有误，则向所述用户终端发送错误信息。7.根据权利要求6所述的方法，其特征在于，在所述通过所述目标雾计算节点将所述块数据上传至目标云资源池之后，还包括：根据预设格式，更新存储记录。8.根据权利要求7所述的方法，其特征在于，在所述根据预设格式，更新存储记录之后，还包括：响应于用户终端的数据下载请求，通过所述网际互连协议地址云资源池关联表，确定所述用户终端待下载数据的存储位置。9.一种基于雾计算的云网数据存储设备，其特征在于，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1至8任一项所述的基于雾计算的云网数据存储方法。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1至8任一项所述的基于雾计算的云网数据存储方法。

技术总结
本申请提供一种基于雾计算的云网数据存储方法、装置、设备及介质，涉及云服务器技术领域，该方法根据云资源池标识和用户终端网际互连协议地址，生成网际互连协议地址云资源池关联表；根据用户终端的稠密程度，建立多个雾计算节点；响应于用户终端的注册请求，生成资源定位符，将资源定位符发送至用户终端；响应于用户终端发送的文件上传请求包，根据网际互连协议地址云资源池关联表为用户终端确定目标云存储池，将目标云存储池地址标识发送至用户终端；响应于上传数据请求，根据预设雾计算节点筛选算法，确定为用户终端上传数据的目标雾计算节点列表；将目标雾计算节点列表发送至用户终端。户终端。户终端。


技术研发人员：陈海锋 李朝霞 赵鑫
受保护的技术使用者：联通数字科技有限公司 联通云数据有限公司
技术研发日：2023.06.19
技术公布日：2023/9/12