模型权重 推理代码全开放 腾讯版Sora发布即开源！130亿参数 (模型权重推理怎么做)
梦晨 西风 发自 凹非寺
量子位 | 公众号 QbitAI
腾讯版Sora，发布即开源！
，成为目前参数量最大的开源视频生成模型。
模型权重、推理代码、模型算法
等全部上传GitHub与Hugging Face，一点没藏着。
实际效果如何呢？
不瞒你们说，我真的看见一只大熊猫，在跳广场舞、吃火锅、打麻将，请看VCR：
到底是来自四川的猫！
目前该模型已上线腾讯元宝APP，用户可在AI应用中的“AI视频”板块申请试用。
开发者可通过腾讯云接入。
腾讯混元视频生成主打四大特点：
那么实际表现能否符合描述？下面结合实例一一拆解。
实测腾讯首个文生视频模型
首先是冲浪题材，涉及到画面大幅度运动，水的物理模拟等难点。
提示词中还特别指定了摄像头的运动，腾讯混元表现出流畅运镜的能力，只是在“最后定格在…”这个要求上稍显不足。
提示词：超大海浪，冲浪者在浪花上起跳，完成空中转体。摄影机从海浪内部穿越而出，捕捉阳光透过海水的瞬间。水花在空中形成完美弧线，冲浪板划过水面留下轨迹。最后定格在冲浪者穿越水帘的完美瞬间。
镜子题材，考验模型对光影的理解，以及镜子内外主体运动是否能保持一致。
提示词中的白床单元素又加大了难度，涉及到的布料模拟，也符合物理规律。
不过人们想象中的幽灵一般没有脚，AI似乎没学到，又或者是跳舞涉及大量腿部动作，产生了冲突。
穿着白床单的幽灵面对着镜子。镜子中可以看到幽灵的倒影。幽灵位于布满灰尘的阁楼中，阁楼里有老旧的横梁和被布料遮盖的家具。阁楼的场景映照在镜子中。幽灵在镜子前跳舞。电影氛围，电影打光。
再来一个综合型的复杂提示词，对主角外貌、动作、环境都有细致描述，画面中还出现其他人物，腾讯混元表现也不错。
特写镜头拍摄的是一位60多岁、留着胡须的灰发男子，他坐在巴黎的一家咖啡馆里，沉思着宇宙的历史，他的眼睛聚焦在画外走动的人们身上，而他自己则基本一动不动地坐着，他身穿羊毛大衣西装外套，内衬系扣衬衫，戴着棕色贝雷帽和眼镜，看上去很有教授风范，片尾他露出一丝微妙的闭嘴微笑，仿佛找到了生命之谜的答案，灯光非常具有电影感，金色的灯光，背景是巴黎的街道和城市，景深，35毫米电影胶片。
最后附上来自官方的写prompt小tips：
更多腾讯混元生成的视频，以及与Sora同提示词PK，还可以看看量子位在内测阶段的尝试。
最大的开源视频生成模型。
看完效果，再看看技术层面有哪些亮点。
首先从官方评估结果看，混元视频生成模型在文本视频一致性、运动质量和画面质量多个维度效果领先。
然后从目前公开资料看，腾讯混元视频生成模型还有三个亮点。
1、文本编码器部分，已经适配多模态大模型
当下行业中多数视觉生成模型的文本编码器，适配的主要是上一代语言模型，如OpenAI的CLIP和谷歌T5及各种变种。
腾讯在开源图像生成模型Hunyuan-DiT中适配的是T5和CLIP的结合，这次更进一步，直接升级到了新一代多模态大语言模型（MulTimodal Large Language Model）。
由此能够获得更强大的语义跟随能力，体现在能够更好地应对画面中存在的多个主体，以及完成指令中更多的细节。
2、视觉编码器部分，支持混合图片/视频训练，提升压缩重建性能
视频生成模型中的视觉编码器，在压缩图片/视频数据，保留细节信息方面起着关键作用。
混元团队自研了3D视觉编码器支持混合图片/视频训练，同时优化了编码器训练算法，显著提升了编码器在快速运行、纹理细节上的压缩重建性能，使得视频生成模型在细节表现上，特别是小人脸、高速镜头等场景有明显提升。
3、从头到尾用full attention（全注意力）的机制，没有用时空模块，提升画面流畅度。
混元视频生成模型采用统一的全注意力机制，使得每帧视频的衔接更为流畅，并能实现主体一致的多视角镜头切换。
与“分离的时空注意力机制”分别关注视频中的空间特征和时间特征，相比之下，全注意力机制则更像一个纯视频模型，表现出更优越的效果。
更多细节，可以参见完整技术报告～
— 完 —
量子位 QbitAI · 头条号签约
关注我们，第一时间获知前沿科技动态
腾讯网从2003年创立至今，已经成为集新闻信息，区域垂直生活服务、社会化媒体资讯和产品为一体的互联网媒体平台。腾讯网下设新闻、科技、财经、娱乐、体育、汽车、时尚等多个频道，充分满足用户对不同类型资讯的需求。同时专注不同领域内容，打造精品栏目，并顺应技术发展趋势，推出网络直播等创新形式，改变了用户获取资讯的方式和习惯。
点镜scrm提供企业微信相关所有服务，包括员工企业微信号风控客服监管系统，企业微信朋友圈运营、聊天会话内容合规存档、业务对话记录管控的移动手机在线scrm，公司私域流量营销管理软件。
山东济容热工科技有限公司(简称“山东济容”)位于山东省济南市,依托济南市压力容器厂,致力于海外市场的业务拓展,国际标准的产品设计、制造及技术研发。
铭赞富海360网络营销系统专业从事互联网营销服务的公司,主要业务为:企业网站推广,百度关键词排名,网站SEO优化外包等网络营销解决方案,为向互联网商业转型的传统企业提供了精准的互联网营销服务与方法。
宝宝早教动画片下载，早教儿歌故事，英语资料、美术资料、中英文绘本、儿歌故事、自然拼读、国学历史等资源下载，针对幼儿早教提供最有价值的资源，早教启蒙育儿知识分享。
集盈堂门室是家集设计、生产、销售、安装及技术服务于一体，以全方位的服务理念引导消费
回想科技-为企业提供高端响应式网站建设,UI界面设计,LOGO设计,VI设计,画册设计,品牌设计,商城开发,微信小程序开发,咨询电话:18623346208
梦扬科技是一家致力于合肥网站建设的合肥网络公司,为您提供合肥网站建设,合肥网站制作,合肥网站优化等服务,合肥做网站,就选梦扬科技!电话:0551-64935250
海南先锋电气进出口有限公司
慧工商网提供专业注册公司服务,工商变更服务,公司注销服务,异章证遗失登报补办等全程免费服务无需第三方服务。
珠宝加盟网【www.zb118.com】是品牌珠宝招商代理、连锁加盟全媒体平台，提供钻石、黄金、银饰、玉石、彩宝、珍珠、饰品、奢侈品、珠宝展具及珠宝城招商加盟创业项目。
嘉兴喜洁来保洁清洗有限公司：嘉兴保洁公司，嘉兴清洗公司，嘉兴地毯清洗，嘉兴石材翻新，嘉兴石材养护，嘉兴烟道清洗，嘉兴外墙清洗，嘉兴水箱清洗，嘉兴开荒保洁公司，嘉兴广告牌清洗，嘉兴地毯清洗公司，嘉兴外墙清洗公司，嘉兴烟道清洗公司
雷锋网按，智能穿戴设备的小型化，对硬件芯片提出了体积要求，如何在更小的空间内构建功能更加丰富的芯片系统成为难题，为解决这一问题，苹果在打造AppleWatch时，其芯片使用了SiP封装技术，并增加更多的功能，SiP究竟是什么，同其他封装技术相比又强在哪里，围绕这一话题，外媒作者MarkLapedus进了深入解读，雷锋网对本文进行了不改...。
4月21日晚，第四届ATEC科技精英赛，ATEC2023，线下赛落幕，本届赛事以大模型为技术基座，围绕，科技助老，命题，是国内首个基于真实场景的大模型全链路应用竞赛，ATEC2023线下赛采用48小时极限挑战的形式，来自东南大学、哈尔滨工业大学、华中科技大学的4名选手夺冠并捧走100万元奖金，赛事赛题的全程解读及代码展示，将在国内首档...。
2014年，在WhatsApp以初创公司之姿面世刚满一年后，马克扎克伯格就和他的公司出资190亿美元将其买下，当时，WhatsApp创建者之一的JanKoum声称，收购并不会影响其客户的隐私安全，WhatsApp仍然是全球最安全的通讯工具，而这周的一个消息，可能是要打脸Koum了，就在当地时间本周四，WhatsApp宣布对隐私条款进行...。
以煎包为代表的面点小食，对于国人的餐桌来讲，属于日常必备之选，每日晨起或黄昏，几乎家家门口排着长龙，由此，很多颇具眼光的智慧之选者，格外偏爱这种小项目，而实力与口碑兼具的福州一号煎包，则为优选之一，那么，就智慧之选而言，福州一号煎包如何加盟，福州一号煎包的加盟费用和加盟条件分别是什么呢，接下来，针对该项目，小编将进行详细介绍，不要错过...。
6月27日，骁龙8Gen3，6100mAh电池的一加Ace3Pro、双芯的一加手表2、首台国产骁龙8Gen3平板一加平板Pro、绿厂系第一个100W移动电源正式发布，发布会上最让我激动的，其实是移动电源，一加SUPERVOOC100W超级闪充移动电源，12000mAh容量，有100W私有的SUPERVOOC和45WPD快充，1个A口...。
发表在明基投影仪2022，5，2422，38导读，不论是学生党还是有孩子的额家庭拥有一台投影仪已经成了现代生活提升生活品质必不可少的物件了，谁不想打开一瓶夏夜里的冰汽水躺在沙发或者床上看一场大屏电影呢，明基投影仪也是市面上买的特别好的投影仪品牌，明基e320投影仪是一款智能家用投影仪和之前的明基投影仪略有些不同，带上智能系统的明基投影...。
1、网络搜查，手机AdobeFlashPlayer插件，2、实现以上步骤后，用手机二维码扫描软件扫描这里二维码，3、扫描结果点击关上，就会智能下载插件到手机，4、点击装置下载AdobeFlashPlayer插件，5、实现以上步骤后，就装置实现了，如图所示，手机安卓版的adobeflashplayer怎样下载，以华为畅享7为例，可以经...。
自前年在其新版策略概念文件中将中国定位为，系统性应战，之后，往年北约华盛顿峰会再度恶意攻打中国，宣称中国对北约利益、安保和价值形成应战，诬称中国是乌克兰危机的，选择性支持者，为期三天的峰会，充满着热战思想和厌战言论，宣布的所谓，宣言，，渲染拱火亚太地域弛缓形势，涉华内容更是充溢成见、争光和寻衅，在美国的指挥棒下，北约这一带有热战，基...。
一个是PVE，4团体联结捍卫最后抵达逃生点，只能选用植物，第二个是PVP就是和玩家对战，可以选用僵尸或许植物正营，先拿到50人头的一方胜利，亚宁植物大战僵尸花园抗争游戏怎样下载植物战僵尸，花园抗争玩家表演植物或僵尸表演植物必定包全Garden，花园，让僵尸破坏花园表演僵尸必定射杀植物Origin，EA，载要$$$要注册Origin账户...。
火狐浏览器是一个自由的，开放源码的浏览器，适用于Windows、Linux和MacOSX平台。还有其它一些高级特征，如标签式浏览，可以禁止弹出式窗口。
蔚来全新EC6售35.8万起标配第二代女王副驾,蔚来,新车,内饰,车尾,车顶,大灯
重庆分类目录网站收录男人世界相关的优秀网站大全分类检索，为上网用户提供男人世界网站排行榜与您分享、收藏！
近年来，随着国家经济的稳定发展，人民的生活也更加富足，对于衣食住行的要求也随之更高，民以食为天，人们对于美味健康食品的需求也越来越大，越来越多的人喜欢约三五好友，去干锅店或者火锅店等美食店给自己加餐，哇哇叫干锅就是这样一个大受人们喜爱的美食连锁店，目前大家都想知道哇哇叫干锅加盟多少钱，下面来为您解答这一疑惑，哇哇叫干锅加盟多少钱哇哇叫...。
其实只要仔细观察，自己的身体，会发现肠癌，在发作的早期，也会有一些比较明显的症状，例如腹部会出现，不明缘由的疼痛感，身体会出现，全身的不适，排便的时候，还会出现便血，看见自己喜欢吃的食物，也没有进食的欲望，吃进去的食物，不能及时的消化吸收，气色也非常不好，出现肠癌以后，患者最明显的表现就是，腹部疼痛，因为体质的不同，有一部分患者，还会...。
2019年的脚步已经远去，2020年的大幕已经拉开，只是站在新一年的起点处回望，在2019年互联网科技行业，的确有不少重磅角色从他们所在的企业中抽身而去，从而形成了一次又一次的道别和开始——而一个个大佬的离职，成为这个行业动荡不安、积极求变的缩影，从这些已经离去的身影中，我们能列出一个长长的名单，张潼、张晨、向海龙、沈向洋、黎万强……...。
老邱，全名邱鸿文，恒实琥珀，三世缘琥珀品牌创始人；琥珀品类普及运动推手，仁者不忧，智者不惑，勇者不惧，，从老邱步入社会至今，这句话一直陪伴左右，虽然未达前两者的水平，但他常常庆幸自己选择成为勇者，因为，勇，，老邱得以从一个草根的IT男，先后三次创业，反复折腾，在琥珀行业有了自己的一席之地，记得2003年，神州大地兴起了一场互联网运动，...。
日前获批的辽沈银行即将开业，据6月1日沈阳市沈河区委宣传部官方公众号，幸福沈河，发布的消息称，这家新设的辽宁省级城商行，董事长为王默涵、行长为巩长霖、副行长为魏军、综合部主任为刘长军，券商中国报道称，辽沈银行的发起股东中，8家股东均为国资企业，其中辽宁金融控股集团持股52.5%，拥有绝对控制权，其余多家股东分别来自于辽宁当地市、区财政...。
