图片 8

腾讯云发布Supermind智能网络 以云为中心推动全球网络加速

11月22日消息,腾讯云今日发布Supermind智能网络产品。据了解,Supermind智能网络拥有高性能、全球互联、智能化三大特点,在云主机和负载均衡性能方面有较大突破。

【51CTO.com原创稿件】信息网络的应用逐渐渗透社会发展的各个领域,网络业务量的迅速膨胀给数据传输能力和大吞吐量的交叉能力提出了更高要求。11月22日,腾讯云正式发布Supermind智能网络产品。相比此前网络产品的特点,Supermind智能网络将拥有高性能、全球互联、智能化等三大特点。

网络数据中心正在不断向人工智能(AI)时代演进,在Gartner发布的《2017数据中心网络魔力象限报告》中,将分析和基于意图的网络(Analytics
and Intent-Based Networking)是八大市场趋势之一,腾讯云推出Suermind
智能网络,以大数据为基石,提供网络数据分布式采集、存储、分析中心,将网络拓扑管理、故障定位,故障自愈,网络安全等应用与深度学习、人工智能等前沿技术结合,轻松应对百万级设备的网络高效运维,释放AI强大原力。

图片 1

图片 2
腾讯云高级产品经理高航

图片 3

图:腾讯云高级产品经理高航

**
更高性能网络能力,全面满足高实时性场景

image

据介绍,目前腾讯云服务器的物理网卡配置已升级为25Gbps
bonding架构,同时利用智能网卡SDN模块的网络动作层和策略层分离,腾讯云主机的网络带宽吞吐从8Gbps提升至25Gbps,提升超过3倍;网络包转发能力从50万pps提升至450万pps,提升了9倍;网络包虚拟化时延降低50%,可全面支持金融分析、游戏业务、视频直播等高网络性能要求场景。同时,通过使用DPDK优化,腾讯云四层负载均衡网络包转发性能从220w升级至2100w,增长近10倍。

** 腾讯云一直致力于为用户提供优质的网络产品。2013年,腾讯云通过基础网络、弹性公网IP、内,外网负载均衡、安全组等技术构建了云网络的雏形;2015年,腾讯云第二代网络产品,通过overlay的模式,实现了VPC、VPN、专线接入、弹性网卡、弹性扩缩容等功能,推进了混合云的发展。

超大规模网络运维的智能化

超大规模的网络数据采集、存储和实时计算已成为网络运维的极大挑战,腾讯云上网络线路几万条,拓扑复杂,但又需要满足多租户海量应用低时延、高吞吐的要求,使用人工评估加传统的路径规划算法的方式已无法根据链路负载的给出实时流量调度、链路扩容方案。如何实现超大规模网络运维的智能化?腾讯云利用基于Hadoop体系的MapReduce、HIVE、PIG、SPARK等大数据套件对海量链路的数据抽取、转换、加载、建模、分析、报表呈现,强大数据分析与探索挖掘能力,让腾讯云可快速对PB级规模下的网络数据进行可视化的数据分析探索,实时掌控链路负载。为了满足全网资源的充分利用,进行服务分级,利用人工智能算法进行链路调度,最近链路保证时延敏感业务,带宽充足链路保证大带宽应用,剩余带宽保证海量应用的传输。最终,腾讯云supermind智能网络在路径规划、容量规划、流量调度的攻坚和创新,均反馈到了卓越的网络服务质量上。

图片 4

image

负载均衡方面,腾讯云是国内首家支持quic网络传输协议的云计算服务商,quic网络传输协议改进了TCP协议的功能,重构了TLS协议,并且还吸收HTTP2的大部分特性,在网络的传输性、稳定性、安全性、并发性、快速性上都有的巨大提升。目前,基于该协议,在进行网络文件传输时,能够将访问速度大幅提升15%以上。此前,腾讯云在QQ空间的部分页面使用了QUIC协议,首字节时间比http2平均减少326ms,性能提升约25%。可大幅提高页面的加载进度,有效降低网络延时造成的体验不佳的问题。

腾讯云supermind智能网络将在云主机和负载均衡性能有着重大突破。**

全维立体监控,秒级定位故障

在监控和故障定位方面,腾讯云提供全时全流的网络监控及告警收敛能力,可构建全维立体监控,秒级定位故障等难题,这是一项基础能力,却极具挑战。

  • 网络拓扑层次多,差异大。不同于传统数据中心,云厂商内部在物理网络上还存在一层虚拟化网络,在虚拟化网络中每个租户又存在多个私有网络,网络层级多。云厂商外部各路运营商的公网接入和不同客户多地域差异化的链路接入,使得网络结构差异极大。
  • 网络架构频繁动态变更。云上的虚拟化,热迁移,弹性伸缩,SDN给租户带来了便利同时给网络运维带来了巨大的挑战,如租户云上资源的热迁移和弹性伸缩时,其网络也需随之动态变化,网络运维系统需监控。
  • 规模和复杂程度呈指数级增长。多租户的环境让网络拓扑的复杂性随着租户及其规模呈爆炸性增长。

网络质量的生命线,虽然面对网络拓扑层次多,差异大,架构频繁动态变更,规模和复杂性成指数级增长的挑战,腾讯云必须保证监控数据是全覆盖、多维、实时的。监控的全覆盖体现在:Underlay数据采集包括多厂商不同型号的物理机、专线、交换机等设备的监控,Overlay的数据包括客户在云上的云主机、数据库、网关、负载均衡等全线产品的监控。外网监控包含运营商网络监控和混合云链路接入等。监控的多维体现在:各项关键指标、事件、网络流日志、海量用户操作日志等的采集。监控的实时性表现在:90%以上的指标是1min展示时延,部分指标呈现时延是秒级甚至毫秒级。

图片 5

image

全覆盖、多维、实时采集必然会造成数据大爆炸,大数据处理对腾讯云网络运维来说仅是基本功,腾讯云这身基本功,是依托15年的网络运营经验精打细磨出来的。但多层,大差异,超大规模的网络数据监控产生了大量告警,运维难以判断事件影响范围及其关联性,就无法决策下一步的操作。为了解决该问题,腾讯云将人工智能和网络运维结合,通过聚类算法、关联挖掘算法,多层异常告警收敛算法对监控数据多维度对比分析,实现了告警分级,聚类,影响范围预判,将告警收敛,在降低误报率的同时,提高了精准性,有效地提升了运维效率。

用人工智能的方式实现网络规划、建设以及运维的全流程,是腾讯云Supermind网络产品最大的亮点。它提供覆盖规划、资源管理、网络监控、故障定位、故障排除、安全防护等能力,形成了从网络系统设计、管理、运营、优化、安全等方面的智能闭环。

**

一般问题自动处理,重大故障专业建议

随着用云量和计算量成指数级增长,腾讯云面临的是海量的运维数据和极其复杂的云上网络运维场景,机器学习算法与云端网络运维业务整合是必然趋势。腾讯云的数据接入层通过开放的接口,可平滑接入指标、事件、流日志、流量镜像、操作日志等多维数据。利用大数据套件的强大数据分析与探索挖掘能力,让腾讯云可快速对租户PB级规模下的大数据进行可视化的数据分析探索,在纷繁复杂的运维数据中快速获取洞察力,通过人工智能对异常捕捉、故障判断、修复操作等依靠人力决策的环节进行持续学习和自动化响应,如:内网故障时,可自动化执行弹性伸缩,带宽
保障,路由切换等自愈操作,外网异常故障时,可执行流量清洗,服务降级,DNS流量调动等自愈操作。故障自愈可以辅助运维快速决策,如自动降级策略,比起通过拍脑袋设定,到不如通过实际的故障数据来进行微调。但复杂的业务场景,有些策略是机器无法决策的,人工智能模型可在图像识别中存在一定误差,但这在网络中是不允许的,决策失误,可能导致链路瘫痪,影响多家客户。因此,腾讯云将人工智能与故障自愈结合,主要是自主解决简单的问题,辅助人类专家分析解决复杂网络问题。

图片 6

image

腾讯云Supermind智能网络能够结合几万条线路特征智能规划,通过历史用量分析、网络路径分析、用户反馈分析、节点规划建议、专线扩容建议等方面,合理规划出网络建设路线,大幅缩短规划时间,节约时间成本。

图片 7

以AI和大数据为驱动,保障用户网络安全

安全对抗是一场技术赛跑,利用AI的不法分子可以使用智能系统扫描,大数据信息拉取、人物画像描绘、基于画像的诈骗对话、智能密码破解、系统性DDOS攻击、模拟人脸、指纹、声纹获取利益,应对如此严峻的安全形势,腾讯云推出AI和大数据为驱动力,以云为平台和管道构建新一代智能安全防御体系,包括利用大规模图挖掘与机器学习追踪恶意团伙;通过人群画像与DNA建模,应对羊毛党与欺诈;整合多维度数据和威胁情报信息,通过机器学习,建立更加积极主动的态势感知系统。腾讯云AI安全能力矩阵图,以大数据、机器学习、图计算、知识库等当前热门AI技术为核心,驱动社交图谱分析、图像自动识别、知识表达推理、自然语言处理
4
大能力组合,形成智能身份鉴定、威胁情报分析、异常流量检测、网络攻击溯源、人机行为识别、恶意图片识别、垃圾文本检测等
7 项技术应用。

图片 8

image

“网络大脑”的智力高低正成为制约网络规模和复杂度可持续发展的关键因素,腾讯云网络团队也将始终保持着对人工智能新能力新技术的敏锐探索,将网络系统的设计、管理、运营、优化、安全进行智能升级,让人工智能来帮助网络工程师,更好地管理日益复杂和庞大的云计算网络。

通过对CVM、负载均衡、舆情等方面监控,进行事件、操作日志、网络日志等分析,借助多层异常告警收敛聚合算法定位故障,输出相关告警聚合精简后的告警信息。通过AI提供定位建议,将全过程的时间缩短到了5分钟以内,平局处理时间降低了75%;人工识别告警到处理完成控制在20分钟以内,整体系统SLA提高了20%。

目前,腾讯云服务器的物理网卡配置已升级为25Gbpsbonding架构,同时利用智能网卡SDN模块的网络动作层(fastpath)和策略层(slowpath)分离,腾讯云主机的网络带宽吞吐从8Gbps提升至25Gbps,提升超过3倍;网络包转发能力从50万pps提升至450万pps,提升了9倍;网络包虚拟化时延降低50%,可全面支持金融分析、游戏业务、视频直播等高网络性能要求场景。同时,通过使用DPDK优化,腾讯云四层负载均衡网络包转发性能从220w升级至2100w,增长近10倍。**

相关阅读

Python3
爬虫中代理的使用方法
爬虫实战 : 爬虫之 web
自动化终极杀手(下)
爬虫实战:爬虫之 web 自动化终极杀手 (
上)

此文已由作者授权腾讯云技术社区发布,转载请注明原文出处

原文链接:https://cloud.tencent.com/community/article/991980

海量技术实践经验,尽在腾讯云社区

在故障自愈方面,通过预设定的故障评价机制,对已知的网络故障进行分级设定,对于故障预测置信区间高的且相对可控的故障,自动触发对应的故障隔离服务,比如外网会调度DNS流量、BGP流量等,内网中会隔离故障的设备或端口,对底层集群进行自动扩缩容等等。

**