巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46

本文目录:

导语
本文摘要
本文标题
正文内容
结束语

导语:

最近大家可能也是在找关于巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46相关内容吧?为了整理这篇内容,我特意和朋友,还有公司身边的同事,沟通了很久...也在网上查阅了很多资料,总结了一些关于巩俐个人资料的相关内容以及这类内容周边的一些相关知识点,接下来一起来了解一下吧,希望通过对“巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46”的相关介绍,对大家有所帮助!

巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46

本文摘要:

字节跳动近期开源了一项代号为OMGD的压缩技术。这是字节自研的GAN(生成对抗网络)压缩算法,在保证生成效果不变的前提下,算力消耗最低可以减少到原来的1/46,相比之前业界......

本文标题:

巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46

正文内容:

凤凰网科技讯8月27日消息,字节跳动近期开源了一项代号为OMGD的压缩技术。这是字节自研的GAN(生成对抗网络)压缩算法,在保证生成效果不变的前提下,算力消耗最低可以减少到原来的1/46,相比之前业界的最佳压缩效果提升一倍多。据悉,这项技术的论文已入选国际计算机视觉会议ICCV2021。

图:字节跳动技术团队发表的自研GAN压缩算法论文

图:字节跳动技术团队发表的自研GAN压缩算法论文

GAN是人工智能领域重要的深度学习模型,在图像生成、音乐生成和视频生成等方面应用广泛,还可以提高图像质量,实现图像风格化、图像着色等任务。漫画特效等人们常用的短视频道具,就是通过GAN实现的。

由于GAN对计算资源和存储空间的需求巨大,模型难以直接部署到手机、Pad等移动设备上,业界一直在努力改进GAN的压缩方法。2020年,麻省理工学院、Adobe和上海交通大学的研究者们提出一种GAN压缩算法,将算力消耗成功减少到1/21。此次字节跳动提出的OMGD方法则进一步提升了压缩能力。

OMGD(Online Multi-Granularity Distillation)意为“在线多粒度蒸馏”。据字节跳动技术团队的论文显示,该算法能灵活地在训练过程中优化并压缩GAN模型,从而实现更好的图像效果和更少的计算成本。

测试数据表明,OMGD压缩算法对Pix2Pix和CycleGAN这两种常用的GAN解决方案效果显著。Pix2Pix和CycleGAN主要应用于图像到图像的“翻译”,比如将照片转换为绘画,对黑白图片着色等。OMGD压缩算法可使其算力消耗分别减少到原来的1/40和1/46。

目前,OMGD压缩算法已在抖音等产品中落地,为用户提供更丰富的视频创作能力。相关技术代码也已发布在开源社区,以帮助从业者提升GAN的创新和应用效率。迄今,字节跳动已开源了机器学习平台Klever、联邦学习平台Fedlearner、高性能分布式训练框架BytePS 、LightSeq推理和训练引擎等重磅项目。

节能环保是字节跳动一个重要的技术研究方向。在不久前的自然语言处理领域国际顶会ACL2021上,字节跳动的词表学习方案获得年度唯一的“最佳论文”大奖,该论文同样极具节能价值,相比主流词表可以节约92%的算力。

结束语:

以上就是一些关于巩俐个人资料,字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46的相关内容以及字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46这类内容周边的一些相关知识点,希望通过的介绍,对大家有所帮助!后续我们还会更新更多关于字节跳动开源最新GAN压缩算法 算力消耗只需原来的1/46的相关资讯内容,关注我们,每日了解最新热点资讯,关注社会动态!


版权声明

本文仅代表作者观点,不代表本站立场。
本文系作者授权发表,未经许可,不得转载。

评论