本发明专利技术公开了一种可进行日志管理的虚拟化CDN加速系统，包括虚拟服务器、虚拟化控制器、CDN服务器、中央控制模块、日志管理模块和客户端，其中，虚拟服务器内设置有真实物理设备RD，真实物理设备RD用于将上下行富余的带宽集合起来；日志管理模块用于获取真实物理设备RD和CDN服务器的带宽使用情况的日志；中央控制模块根据日志管理模块中的日志对系统进行管理。本发明专利技术在CDN服务器及客户端之间增加了虚拟服务器，该虚拟服务器汇集上下行富余带宽资源，并通过这些虚拟服务器上安装的应用程序将汇集的带宽资源发送至客户端。本发明专利技术通过将RD和CDN的包含带宽使用情况的日志上报给中央控制模块，进而管理控制整个网络系统，进一步提升系统的健壮性和稳定性。
【技术实现步骤摘要】
本专利技术涉及计算机网络⑶N加速系统及方法，尤其涉及一种可进行日志管理的虚拟化⑶N加速系统及方法。
技术介绍
互联网的音视频直播业务并不是一个新的技术，但是随着互联网的用户不断增多，用户对音视频直播画质/音质的要求不断提升，直播内容的码流不断提升，同时在线人数也不断增加，带宽和并发在线人数的要求渐渐成为制约这项业务的瓶颈。以1Mbps的码流计算，1G的带宽仅能支撑1000个用户并发，而要保证1百万用户的同时在线，就需要1000G的带宽，对于单一的直播节目来说，这个费用是非常高昂的。另一方面，1百万的并发流式访问，对普通的服务器的性能来说也是一个不可能完成的任务。所以当前通常采用服务器分层加客户端p2p的技术来分担并发访问的人数同时将服务器的一部访问转移到客户端，从而减轻访问压力和降低带宽的消耗。例如专利CN201510150133.1就采用了这种⑶N+P2P的架构，播放器(客户端)之间作为P2P分组，而服务器之间采用源服务器+⑶N分发服务器这样的分层组网。源服务器将直播内容复制若干份，分发到边缘的CDN服务器，每个⑶N服务器负责一部分的用户访问，同时通过部署P2P的支撑服务器(tracker，NAT穿透)，将客户端组成不同的网络，客户端之间可以互相访问，也可以直接请求⑶N服务器。基于这种架构，进一步的可以将⑶N服务器和P2P支撑服务器按照运营商网络/或者是地域划分为不同的自治域(AS)，形成若干p2p子网，如专利CN201510006008.3中所提及的组网方式。AS内部是域内连接，AS之间还有少量数据传输，属于域间连接。在云计算虚拟化领域，通过虚拟化的技术将分布式的闲散的计算资源，存储资源组织起来，通过网络路由交换，再封装成一个整体并虚拟成一个单一的虚拟机给用户使用，也是当前的一个热点，例如专利CN201410468455.6，就提供了一种虚拟化的存储解决方案。通过在服务器上安装虚拟器的控制单元，控制本地的文件系统，并接受来自网络的集中调度，若干服务器的存储被虚拟化成一个大的存储，对外提供统一的访问接口。即外部调用存储访问的接口，或者是计算的接口，通过集中调度，将存储访问或者是计算需求分配给某一个节点，完成任务后再返回结果给接口。尽管采用了⑶N+P2P的方式，有效地增大了直播服务的规模，降低了带宽的消耗，但是这种技术也面临一些问题，第一是这种架构依然需要消耗一定规模的⑶N带宽。例如在直播开始时，客户端需要先有一定量的CDN带宽消耗，才能带动P2P的访问，即客户端需要先有一定数量的内容来自CDN服务器，才能在客户端之间进行P2P的互动；客户端是不稳定的，它可以随时退出P2P网络，如果是关键的P2P节点退出P2P网络，也会导致有突发的较大的CDN访问；如果并发用户数量不足，客户端依然需要直接使用CDN的带宽。第二是这种网络结构是与应用绑定的，也就是说选定好客户端的程序，就会决定了 CDN网络服务器的程序以及组网架构。整个网络各个层次间的耦合度较大。另一方面，目前的虚拟化实践中，通常是将小单元的计算能力(CPU)，存储能力汇聚起来，通过一个控制模块发送任务给某些个小单元，然后完成后再汇聚成一个大的任务结果。对于零散带宽资源的聚合，则没有对应的实践方案。在现有解决方案中，虽然在VM管理和⑶N管理模块中可以监控各个RD和⑶N服务器的运行情况，进行基于本AS内部的负载均衡调度。但是还无法对系统运行状况进行整体监控。例如某个VM由于突发的访问量增大，导致预先分配的RD资源不足以应付，而本AS的负载均衡调度就无能为力了。此时需要一种机制能检测系统的整体突发状态，并将这一情况上报给中央控制逻辑，以便于系统的运维监控人员采取相应的操作。此外不光是为了预防突发状态，系统的运维监控以及客户还需要一种直观的监控手段能查看VM/CDN的实时运行状态以及后期的汇总报告，那么就需要有一种机制可以提供系统的整体运行数据，给上层模块进行展示。
技术实现思路
本专利技术提出了一种新型的架构方案，依托于布置在互联网最后一英里的特殊真实物理设备RD(real device)，所述真实物理设备RD为某种可以利用上下行富余带宽的网络接入路由器，或者是装有虚拟化程序并且能上网的电子设备等，所述真实物理设备RD的特征是对计算能力和存储能力要求不高，但是在运营商的带宽利用上，处于用户侧个人电脑的上一层，能够长时间稳定接入互联网，故而能够更好的利用运营商的上/下行的带宽。将这些真实物理设备RD通过虚拟化的方式集中起来，提供各种可以定制化的服务。在本专利技术中，真实物理设备RD—起组成一个虚拟服务器VM (virtual machine)。RD在本专利技术中被看成是一个提供网络服务的容器，即它可以安装任何满足要求的网络服务程序(RD APP)，另一方面它又是一个网络带宽的输出单元，就是说RD可以向互联网提供带宽资源。在这些RD上都安装有一个agent代理程序，即RD上设置有agent代理模块，agent代理模块的作用是监控RD的状态，主要是RD上下行带宽状态，获取RD的运行负载，向RD发送指令。在agent的上边，是虚拟化的API，是连接RD和虚拟化调度单元的桥梁。装有相同服务程序的RD会被组织成一个大的虚拟服务器，提供上文所述的网络服务。对于通过网络协议(rtmp/http/rtsp/hls/p2p协议)访问VM的客户端来说，他感受到的就是一个真实的服务器。对于使用上层UI界面的调用者来说，他管理的也就是一个个的真实服务器。本专利技术是这样实现的:一种可进行日志管理的虚拟化⑶N加速系统，包括虚拟服务器、CDN服务器、中央控制模块、日志管理模块和客户端，所述⑶N服务器用于将数据下发到所述虚拟服务器；所述虚拟服务器用于将接收到的数据分发至客户端；其中，所述虚拟服务器内设置有真实物理设备RD，所述真实物理设备RD用于将上下行富余的带宽集合起来，并利用这些带宽分发数据到客户端；所述日志管理模块用于获取所述真实物理设备RD和⑶N服务器的带宽使用情况的日志；所述中央控制模块根据所述日志管理模块中的日志对所述虚拟服务器、⑶N服务器和客户端进行管理。进一步地，所述日志至少包含有真实物理设备RD和⑶N服务器的负载信息及所述ig息的优先级。进一步地，还包括⑶N管理模块、虚拟化控制器模块和自治域控制模块，所述CND层管理单元用于管理所述CND服务器；所述虚拟化控制器模块用于管理所述虚拟服务器；所述自治域控制模块用于将所述中央控制模块的指令下发给所述CDN管理模块和所述虚拟层管理模块，并响应客户端的请求，为客户端提交最佳的真实物理设备RD。进一步地，所述客户端为任意普通的第三方客户端，或者是支持P2P协议的特殊客户端。进一步地，还包括云端辅助系统，所述虚拟服务器用于与云端辅助系统进行通信，获取来自源站的信息。相应地，本专利技术还提供了一种基于上述系统的可进行日志管理的虚拟化⑶N加速方法，包括:S1、⑶N服务器将数据下发到所述虚拟服务器；S2、虚拟服务器将接收到的数据分发至客户端；其中，所述虚拟服务器内设置有真实物理设备RD，所述真实物理设备RD用于将上下行富余的带宽集合起来；S3、日志管理模块获取所述真实物理设备RD和⑶N服务器的带宽使用情况的日志；S4、中央控制模块根据日志本文档来自技高网...
【技术保护点】
一种可进行日志管理的虚拟化CDN加速系统，其特征在于，包括虚拟服务器、虚拟化控制器、CDN服务器、中央控制模块、日志管理模块和客户端，所述CDN服务器用于将数据下发到所述虚拟服务器；所述虚拟服务器用于将接收到的数据分发至客户端；其中，所述虚拟服务器内设置有真实物理设备RD，所述真实物理设备RD用于将上下行富余的带宽集合起来；所述日志管理模块用于获取所述真实物理设备RD和CDN服务器的带宽使用情况的日志；所述中央控制模块根据所述日志管理模块中的日志对所述虚拟服务器、CDN服务器和客户端进行管理。
【技术特征摘要】
【专利技术属性】
技术研发人员：李铮，杨敬宇，姚键，潘柏宇，王冀，
申请(专利权)人：合一网络技术北京有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。