训练极低比特网络 如何做模型量化 直播丨商汤科技 (如何训练比特犬正确方法视频)

文章编号:44134 资讯动态 2024-12-09 商汤模型量化

随着深度学习的发展,神经网络被广泛应用于各种领域,模型性能的提高同时也引入了巨大的参数量和计算量。模型量化是一种将浮点计算转成低比特定点计算的技术,可以有效的降低模型计算强度、参数大小和内存消耗,但往往带来巨大的精度损失。尤其是在极低比特(<4bit)、二值网络(1bit)、甚至将梯度进行量化时,带来的精度挑战更大。

本次直播,我们邀请了商汤研究院--链接与编译团队的两位研究员,分享团队在模型量化方面的的一系列研究工作,其中包含CVPR 2020、ICCV 2019等多篇与北航刘祥龙老师团队合作的论文成果。

一、课程信息

主题:如何做模型量化,训练极低比特网络

观看链接:↓↓↓

二、分享提纲

1、如何训练极低比特(<4bit)的网络

2、如何训练高效的二值化网络

3、如何用量化技术来加速模型训练

4、模型量化在实际场景的落地

5、模型量化与网络结构搜索结合

三、嘉宾介绍

直播丨:如何做模型量化,训练极低比特网络

商汤科技研究院高级研究员

余锋伟研究员本硕毕业于北京航空航天大学计算机学院。曾获得MOT16视频多目标跟踪冠军,ASC世界大学生超级计算机竞赛一等奖,华为奖学金,研究生国家奖学金等。现作为内部开源技术中台的架构师之一,负责训练加速、自动模型部署、模型量化、神经网络编译器等技术的研发和落地。在ECCV、ICCV、CVPR、ICLR上共发表5篇论文。

直播丨:如何做模型量化,训练极低比特网络

商汤科技研究院见习研究员

龚睿昊同学曾获得商汤科技未来之星、CCF优秀大学生、北京市三好学生、国家奖学金等。现主要研究方向为深度学习模型的量化加速技术,在ICCV、CVPR、ICLR、PR等期刊会议上发表6篇论文(其中1篇一作,4篇二作),期间负责量化框架的设计和开发,支持量化模型在多业务线项目落地。

四、直播报名

扫码添加AI研习社顶会小助手(AIyanxishe2)微信好友备注“论文解读+量化”后进入报名微信群,获取课件和直播间地址

直播丨:如何做模型量化,训练极低比特网络

原创文章,未经授权禁止转载。详情见 转载须知 。

直播丨:如何做模型量化,训练极低比特网络

全局中部横幅
首页

Chiphell-分享与交流用户体验,Chiphell-分享与交流用户体验

千年

千年盛世-神话千年:二层血魔,重返王陵,神武奇章,侠众道等最新开服信息,每日新开千年。众多好玩的千年一起来玩耍。

腾霏网络

腾霏网络是一家专注于帮助用户创业的分享平台,这里有网赚资讯、网赚教程、网赚视频、免费项目、开网店教程、创业商机以及各种创业平台的经验分享,愿助力大家创业成功!

PACK

PACKFAIR2025中国上海国际包装展览会简称上海国际包装展览会或PACKFAIR,中国上海国际包装展览会由上海禾欣展览服务有限公司主办。上海国际包装展览会展出各类包装机械、包装设备、包装制品、包装材料及各类包装解决方案和包装相关服务。2025上海国际包装展览会期待你的光临。

智慧教育

晓羊集团,作为专注的智慧教育全栈产品与服务提供商,打造数据融通的全栈产品生态,为教育行业提供高效智能产品与服务,创造性地帮助教育行政机关、学校以及教师全面提升管理和专业发展水平,以智慧教育生态全面赋能教育发展。

上海公司注册

公司注册、公司变更、代理记账、财务咨询、知识产权润锡咨询

在线工具导航网站

在线工具导航网站,免费使用无需注册,快速使用无门槛。

南山先生

成立于2015年12月8日 品牌名字“南山”源于陶渊明“采菊东篱下,悠然见南山”的南山 寓意自然和美好 而“先生”是一个活灵活现的人,他就在每个人的心里,从未离开

智能logo设计

小威logo智能设计为您在线提供logo制作服务,从logo设计,企业VI,到商标注册版权保护,满足各行业品牌设计需求。简单便捷,便宜好用!

全局底部横幅