|  首页  |  资讯  |  评测  |  活动  |  学院  |  访谈  |  专题  |  杂志  |  产服  |  
您现在的位置:硅谷网> 资讯> 智能>

腾讯Techo开发者大会揭云存储发展趋向:高性能、高可用、高性价

2019-11-11 14:19 作者:佚名 来源:硅谷网 HV: 编辑:GuiGu 【搜索试试

产业数字化转型过程中产生着比过去任何一个时代都多的数据。在这样的背景下,数据存储技术应该怎么发展?11月7日,在腾讯Techo开发者大会上,来自科研领域的专家和腾讯云存储业务的工程师们共同揭开了云存储的发展趋势。

据IDC预测,全球数据总量预计2020年达到44ZB(440亿TB)。随着IT信息系统的不断发展,数据在各个行业的应用越来越广的同时,云存储又该如何进化满足大数据时代的要求?华中科技大学计算机学院教授、信息存储专委会常委、SNIA中国区专家委员会副主席谢长生在活动现场对存储行业的未来发展趋势进行了展望。

谢长生指出,主流存储介质从磁介质到闪存介质转移的同时,也驱动了接口协议的变化。存储行业未来将在纵向沿着Cache技术,横向朝着分布式存储两个方向继续进化。此外,包括智能存储、支撑AI的存储、交存内计算、计算型存储、类脑存储、区块链存储等在内的一些新兴存储技术也将迎来更大的发展际遇,在存储的大数据时代发挥更大的作用。

万物上云时代,云硬盘已经成为云的基础服务。腾讯技术工程事业群云硬盘专家工程师王银虎表示,通过介质升级,腾讯云云硬盘产品历经了普通云盘、高性能云盘、SSD云盘三大阶段。基于混合存储介质的高性能云盘性能指标达到了普通云盘的10倍,延迟低于5ms,高性能SSD云盘延迟甚至低于3ms。而腾讯云的下一代云硬盘——HSSD云盘则利用客户端卸载、存储卸载以及网络卸载的技术手段,可实现更低的延时和高性能,目前在平台侧已将延时降低到100微秒以下。

近年来,随着云端数据的增长,用户对云上数据产生价值的需求越来越强烈,云端大数据处理的瓶颈正在逐渐凸显。虽然业界推出了大数据存储基于对象存储的方案,提升了整体灵活性,但云数据的延时较高,整体大数据分析场景效率较低。在此背景下,腾讯云基于对象存储研发了CHDFS。腾讯云腾讯云存储研发专家工程师严俊明表示,腾讯云CHDFS融合了独立的元数据管理能力和对象存储的存储容量的能力,拥有高效和云数据操作低延时的特性。目前腾讯云CHDFS的服务可用性已达99.9%,数据持久性可以达到99.999999999%。

另一方面,腾讯庞大的自有业务体系也为云存储产品和技术提供了绝佳的实践平台。

微信作为一款月活用户超过10亿的国民级应用,系统每天读写量超过数万亿,峰值时数据调用超过1亿次/秒的。在海量存储中做到高性能,进而降低成本,是其面临的最大挑战。微信事业群分布式存储工程师郑建军表示,通过定制式开发的手段提升微信存储系统的基本能力,使得微信的存储性能比传统模式提升了近1倍。为提升数据安全性,微信还采用了多副本存储、实时校检、人工排查等方式,并通过定期对齐数据副本、副本数据的跨地域容灾等手段确保数据的完整性。此外,微信还通过快速拒绝策略、非租约的Paxos、大系统小做以及多副本冗余等方式确保存储服务在高峰期的可用性,目前,微信核心数据存储服务的可用性已经达到99.9999%的水平。

对于非常消耗存储资源的图片和音视频文件在微信和微信小程序内应用比例越来越高的问题,腾讯云还在尝试用更多的技术创新去满足这些应用对存储的需求。腾讯技术工程事业群图片业务技术副总监孙云清表示,腾讯云通过新的图片压缩技术和GPU加速技术,几年时间已经节省了近1T的图片带宽;腾讯云通过设置大容量、低成本,且直接跳过了文件系统的缓存处理服务池,大幅减少了应用读取图片和音视频档案时缓存的拷贝消耗,再结合IO的方式提高并发速度,大幅节省了系统性能,并降低了内存的消耗。此外,腾讯云还充分结合存储空间利用率优化、路由IP均衡、磁盘内存热文件缓存等手段全力挖掘系统性能潜力,并充分利用腾讯云平台上其他闲置资源进行资源弹性调配,不仅让业务变得透明,也大幅降低了成本。

腾讯云和微信小程序团队联合打造的小程序·云开发也封装了云存储的能力,提供快速上传和下载、CDN加速、服务端的对象管理和权限管理等底层云存储服务。腾讯云对象存储高级产品经理贺永红表示,通过小程序+云存储的结合,小程序可以实现直接读写云存储资源,服务端在管理资源同时还可同步进行AI处理。例如腾讯乘车码出行小程通过将城市数据迁移上云储存,实现大业务,小体积;香格里拉智能入住小程序通过和云储存的结合实现了客户的快速便捷智能入住;作业盒子小程序通过云存储的AI识别实现在线作批改。

贺永红介绍,目前腾讯云在云存储的可用性、数据可靠性和QPS三大核心指标上分别已经达到99.95%,99.9999999999%和30000的高水准,在业界遥遥领先。

【对“腾讯Techo开发者大会揭云存储发展趋向:高性能、高可用、高性价”发布评论】

版权及免责声明:
① 本网站部分投稿来源于“网友”,涉及投资、理财、消费等内容,请亲们反复甄别,切勿轻信。本网站部分由赞助商提供的内容属于【广告】性质,仅供阅读,不构成具体实施建议,请谨慎对待。据此操作,风险自担。
② 内容来源注明“硅谷网”及其相关称谓的文字、图片和音视频,版权均属本网站所有,任何媒体、网站或个人需经本网站许可方可复制或转载,并在使用时必须注明来源【硅谷网】或对应来源,违者本网站将依法追究责任。
③ 注明来源为各大报纸、杂志、网站及其他媒体的文章,文章原作者享有著作权,本网站转载其他媒体稿件是为传播更多的信息,并不代表赞同其观点和对其真实性负责,本网站不承担此类稿件侵权行为的连带责任。
④ 本网站不对非自身发布内容的真实性、合法性、准确性作担保。若硅谷网因为自身和转载内容,涉及到侵权、违法等问题,请有关单位或个人速与本网站取得联系(联系电话:01057255600),我们将第一时间核实处理。
广告
相关
头条
有强迫症?人工智能AI用1年开发出治疗强迫症新药 有强迫症?人工智能AI用1年开发出治疗强迫症
2020年2月29日消息,英国初创公司Exscientia声称,该公司已经利用人工智能(AI)开发出……
·有强迫症?人工智能AI用1年开发出治疗强迫症
·人工智能测温:日供百套AI设备,单台报价过万
·英媒认为人工智能力量将成为抗击新疫情最大希
·AI芯片需要破解落地难题 才能加速算力的迭代
·用AI解析新型冠状病毒3CL蛋白酶靶向小分子的
图文
中建信息入选国家人工智能标准化总体组第三批防疫AI解决方案名单
中建信息入选国家人工智能标准化总体组第三
有强迫症?人工智能AI用1年开发出治疗强迫症新药
有强迫症?人工智能AI用1年开发出治疗强迫
ZAO隐私风险 你的脸已经不仅仅是你的脸了
ZAO隐私风险 你的脸已经不仅仅是你的脸了
九号机器人,这次想用AI运载机器人送快递送外卖
九号机器人,这次想用AI运载机器人送快递送
最新
·中建信息入选国家人工智能标准化总体组第三批防疫
·有强迫症?人工智能AI用1年开发出治疗强迫症新药
·微软Face X-Ray:给换脸图像、视频照X光检测
·华为Atlas 900 AI集群获GSMA GLOMO未来技术大奖
·人工智能测温:日供百套AI设备,单台报价过万元
热点
·AI又出了偏门应用:用算法“脱掉”女性衣服
·ZAO隐私风险 你的脸已经不仅仅是你的脸了
·美的AIR空间站|你用过能管理空气的空调吗?
·新橙派果汁机器人引爆中国独角兽孵化合作大会
·民宿房东的辛酸史 用安伴门锁实现了合规运营
旧闻
·吹响集结的号角:O'Reilly和Intel人工智能大
·安软慧视安博会揭秘,城市级视频监控整体智能
·办公室直饮水正成为主流,那么您的公司装了直
·智能数据影响商业,众盟数据推动实体经济转型
·U8来袭无限开启 创新打造极智双屏 交互无限
广告
硅谷影像
中建信息入选国家人工智能标准化总体组第三批防疫AI解决方案名单
中建信息入选国家人工智能标准化总体组第三批防疫
有强迫症?人工智能AI用1年开发出治疗强迫症新药
有强迫症?人工智能AI用1年开发出治疗强迫症新药
微软Face X-Ray:给换脸图像、视频照X光检测
微软Face X-Ray:给换脸图像、视频照X光检测
华为Atlas 900 AI集群获GSMA GLOMO未来技术大奖
华为Atlas 900 AI集群获GSMA GLOMO未来技术大奖
人工智能测温:日供百套AI设备,单台报价过万元
人工智能测温:日供百套AI设备,单台报价过万元
英媒认为人工智能力量将成为抗击新疫情最大希望
英媒认为人工智能力量将成为抗击新疫情最大希望
关于我们·About | 联系我们·contact | 加入我们·Join | 关注我们·Invest | Site Map | Tags | RSS Map
电脑版·PC版 移动版·MD版 网站热线:(+86)010-57255600
Copyright © 2007-2020 硅谷网. 版权所有. All Rights Reserved. <京ICP备12003855号-2>