已阅读
金牌金牌大只500彩平台总代_曹晓欢:汇量科技将
11月20日,2020年“AWS CIO论坛”在深圳举行,汇量科技(Mobvista)联合创始人兼总裁曹晓欢应邀出席论坛并发表精彩演讲。他表示,汇量科技目前自研的大型弹性集群管理平台SpotMax经实践验证可为企业节省40%-65%用云成本,面向未来,汇量科技将由技术创新者转变为技术输出者,为企业用户提供应用软件解决方案,助力低成本用云。一系列关于汇量科技如何通过自研方案大幅提升业务效率及压缩用云成本的分享,引发了现场嘉宾们的高度关注。
曹晓欢介绍,“性能”和“成本”是过去几年困扰汇量科技业务增长的两大挑战。由于汇量科技在全球市场实现端到端数据延迟低于25毫秒的同时需严格控制每次请求处理的服务器成本, 因此“稍有不慎就会导致亏损”。为了解决这两大难题,汇量科技始终坚持不断创新,并取得了亮眼的成绩。
自研大数据机器学习平台成倍提升效率
如何通过端与端之间的超低延迟实现实时预测和个性化推荐,是汇量科技身处程序化广告行业的第一个挑战。程序化广告具有实时预测和个性化推荐的特点,要求每一个广告请求背后均可实现复杂的算法预测,同时市场关注热点的快速变化也要求系统有能力实时捕捉用户的实时兴趣变化,才能满足广告收益最大化的诉求。作为第三方平台,汇量科技面临着极大的数据稀疏性和维度复杂性的考验:汇量科技的深度学习模型拥有巨大的稀疏嵌入层,包含超过百亿维度的特征;同时,在进入分析环节之前,从日志到训练样本,都需要对数据进行复杂的预处理。
因此,为了能够在算法性能的优化上具备追求极致的最大空间,汇量科技并未使用云商现成的产品,而是自行搭建了一套完善的一站式大数据机器学习平台MindAlpha。这一平台为汇量科技的算法工程师提供了端到端的自动化开发体验,能完成日均超过两万个的数据分析和模型训练作业,大大地拓宽了产品运营的能力。同时,通过进行大规模自适应的在线学习,汇量科技能够释放出50%以上的人力投入到新的更有价值的工作中。曹晓欢强调“让数据流转起来,就能让效率成倍提升。”
拥抱“云原生”,探索极致成本管理
效率成倍提升后,快速激增的“成本”成为了汇量科技面临的又一挑战。曹晓欢坦言,随着广告请求数量和可触达独立设备的增长,汇量科技的业务需要更多的服务器算力进行承载,原本按峰值需求采购服务器算力的模式,会导致峰值之外的大量算力被浪费;而在1000亿次的日均广告请求和10亿级的设备覆盖下,平台仍需在25毫秒内对单次广告请求做出精准预估和出价回应,同样需要昂贵的计算集群支撑。
如何根据应用的实际需求弹性尽可能使用便宜的算力资源,汇量科技选择以“云原生”切入。根据云原生计算基金会的最新定义,云原生的目标即为构建和运行可弹性扩展的应用,这与汇量科技的弹性成本需求不谋而合。
基于“云原生”,汇量科技进行了大量的创新,构建了云原生大型弹性集群管理平台SpotMax。SpotMax主要从四个方面对汇量科技的用云成本进行优化,其一,重构了应用程序架构,将原有的大型单体系统重构为微服务,在更细的粒度上定位瓶颈,以便将资源分配到关键位置进行扩展;其二,基于混沌工程构建了一个旨在防止错误和加快恢复速度的高可用性系统,以此确保系统中的任何中断都不会干扰整个系统的运维;其三,大量使用了无服务器架构,使得系统架构的粒度得到了进一步完善,可在更小的层面提高弹性和可扩展性,并简化整个系统,从而降低运维成本;最后,还调整了汇量科技的云端付费模式,采用竞价实例代替原本的按需实例。
通过SpotMax,汇量科技的单位广告请求成本大幅降低了65%。曹晓欢坦言“离开SpotMax,汇量科技会是一家巨额亏损的企业。”
由技术创新者成为技术输出者
事实上,与彼时汇量科技一样面临成本困扰的企业并不在少数。专业咨询机构RightScale的一份调研报告显示,当下的企业级用户在云计算支出一项的浪费高达30%。甚至有部分研究人员认为这一数据被低估,因为调查的样本聚焦于中型以上企业,如果考虑到浪费更为严重的小企业,真实的云资源浪费规模可能更高,预计可高至45%。
为帮助更多企业节省用云成本,此前SpotMax已对外实现商业化,可支持多种使用方式,并设置了免费版本、Pro版本、SaaS版本等商业化模式,已服务涉及不同领域,包含游戏发行、程序化广告、实时分析引擎、游戏数据分析平台等。据介绍,“目前SpotMax可为企业客户节省的单位成本均在40%至65%之间。”
曹晓欢强调,云原生是企业数字化转型的必经之路,特别是在数据爆炸性增长、云端规模和复杂度不断提升的今天,“低成本的数据处理已经成为了云原生的基本诉求。”因此,汇量科技下一阶段的目标是“由技术的创新者成为技术的输出者”,将从互联网“技术外溢”效应的结果角度,通过技术开放,将多年来沉淀的技术能力形成面向企业需求的技术产品与解决方案,加速各行业在数字化时代的转型,降低企业客户转型的复杂度。而SpotMax将是汇量科技 “技术外溢”的重要品牌,将帮助更多企业用户更放心地使用Spot实例降低用云成本,而不用担心稳定性受影响。
来源:北国网
免责声明:本文来源于网络,仅代表作者本人观点,与TechWeb无关。凡来源非TechWeb的新闻(作品)只代表本网传播该消息,并不代表赞同其观点。TechWeb对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任