打造神奇宝贝新世界 Diffusion 大神微调 无敌了 Stable 生成式 AI (打造神奇宝贝的小说)
作为一个强大、公开且足够简单的模型，最近大火的 Stable Diffusion 在文本生成图像之外，给了大家无限的创作可能性。
最近，来自 Lambda Labs 的机器学习研究员 Justin Pinkney 对该模型进行了微调，构建了一个神奇宝贝生成器！
下图是输入名字后生成的一些神奇宝贝：戴珍珠耳环的少女、奥巴马、特朗普、鲍里斯·约翰逊、龙猫、Hello Kitty。
Lady Gaga、鲍里斯·约翰逊、普京、默克尔、特朗普、柏拉图：
除了现有的角色和公共人物，你还可以输入一个描述来生成自己想象的神奇宝贝：骷髅祭司
你也可以输入自己的姓名或网名，生成属于自己的神奇宝贝形象。这可太酷了，推特上的网友纷纷用自己的名字展开创作，看看自己如果变成神奇宝贝会是什么样子。
图注：网友 Elizabeth Holmes 的神奇宝贝形象
图注：网友 Upbeatblue 的神奇宝贝形象
图注：网友 Onion-sama 的神奇宝贝形象
输入一些漫画角色的名字也可以获得相匹配的神奇宝贝：
而那些陪伴人们童年的神奇宝贝在这个生成器中也有了新的样貌：皮卡丘、妙蛙种子、喷火龙、树才怪、路卡利欧、梦幻。
Pinkney 在推特上展示了这个神奇宝贝生成器的训练过程。
他表示，Stable Diffusion 是一个很好的通用模型，但要获得特定风格的输出不是件容易的事，这通常需要做大量枯燥的工作，制作复杂的文本提示库，或者你也可以偷懒只对图像生成模型进行微调。
Pinkney 在神奇宝贝图像的数据集上对初始的 Stable Diffusion 进行了微调。
首先是构建一个数据集。数据集包含神奇宝贝图像和对应的文本描述，比如妙蛙种子被描述成“一个红眼睛的绿色神奇宝贝图像”，绿毛虫则被描述为“一个长着红鼻子的绿黄两色玩具”。
当然，这些描述不是人工完成的，而是使用了神经网络来代劳，即图像描述模型 BLIP。虽然这些描述还不是十分完美，但也足够用了。
然后，他在 A6000 上只花费了几个小时对 AI 模型进行训练，让模型学习以神奇宝贝的风格来生成图像，但将先前的知识保留一段时间，最终对数据集产生过拟合。
开始时，样本是正常图像的样子，然后逐渐获得神奇宝贝的风格，随着训练的继续，最终呈现一个与原始提示不同的神奇宝贝图像：
这是一种很简单的微调，但它运行得非常好。有了这样一个微调后的模型，无论你给它什么提示，它都会生成神奇宝贝。所以不必再煞费苦心地想提示语了。
在创建神奇宝贝时，你可以选择输出多个：
Pinkney 表示，欢迎大家用更复杂的方式把这个模型专门地用在新领域。像这样的小工具就是 Stable Diffusion 这类 AI 模型开源好处的体现。
这个模型在网上引起创作热潮后，Pinkney 又发布了一篇博客补充了一些额外的工作细节。
他发现，令人惊讶的是，这个模型竟然设法记住了初始 Stable Diffusion 的一些通用知识，而它只是在一个有限的数据集上训练了几千步。但是，对神奇宝贝进行微调时，模型实际上很快就会开始过度拟合，如果只是以一种简单的方式从中采样，模型就会为新的提示生成胡言乱语式的神奇宝贝，也就是说，它已经灾难性地遗忘了它所训练的原始数据）。但是 Stable Diffusion 在训练期间保持模型的指数移动平均 (EMA) 版本，通常用于推理。
因此，如果使用 EMA 权重，我们实际上是在使用原始模型和微调模型的平均值。事实证明，这对于生成神奇宝贝而言是必不可少的。此外，你还可以通过直接将新模型与初始模型的权重进行平均来微调效果，以控制生成神奇宝贝的数量。微调和对模型进行平均的操作可以将原始内容与微调后的风格有效混合。
图注：左边是完全微调的模型，右边是只微调注意力层的模型。
另外，你也可以冻结模型的不同部分来进行微调，比如上图是两种微调方式的生成效果，可以看到，只微调了注意力层的模型可以生成更正常的 Yoda，但并不太擅长制作神奇宝贝。
版权文章，未经授权禁止转载。详情见 转载须知 。
腾讯先锋（原腾讯先游）是腾讯官方推出的云游戏平台，用户无需下载游戏，就能畅玩各类游戏大作。
南昌丰益肛肠医院暨南昌最好的肛肠医院，南昌丰益中医肛肠医院是一所以肛肠为特色的医保定点南昌肛肠医院排名第一。
山东荣成市荣威胶带有限公司是一家从事汽车V带、荣威胶带、同步带的企业，提供多楔带相关服务和产品，欢迎来电咨询。
作为行业知名的武汉隔音板厂家-武汉零音装饰材料有限公司专业从事吸音板,木丝吸音板,纤维吸音板,PVC吸音板等隔音材料等产品生产与销售,行业经验丰富,质量可靠,价格合理,长期足货供应,如有需求,请致电027-52368733.
csbee北京中科建环科技有限公司专业从事大空间专用空调产品的开发、生产、销售、维修和服务
好网站精选优质的网站，网站大全，聚合全网优秀站点网址，网址大全和AI网站、AI工具，让上网更加简单高效，精彩一触即达！
海威数字为微信社群、公众号、APP等不同形态流量主提供数字权益商城解决方案，服务外卖cps系统，社群团购系统，私域系统，淘客APP等，致力于为淘客、微商、卖家提供安全高效的私域电商解决方案，实现用户拉新、促活、留存、返利等目的，快速触达精准用户，升级用户忠诚度，让流量变现更高效、更稳定、更长久！
大连华洋建筑设计有限公司成立于1993年，隶属于大连市建委，原名为大连市新材料节能建筑发展咨询中心
陕西金鸿建材科技有限公司是一家集建筑装饰建材研发,设计,制造和销售为一体的综合性大型企业.拥有专业的技术研发,设计团队,生产团队,售后服务团队.产品规格齐全，铝单板种类丰富,致力于为广大群众提供良好的产品及服务项目,欢迎来电咨询,留言关注.
宁波市恒极机电有限公司
中国综合性车床制造厂和国家级数控机床开发制造基地。主要生产机床、普通车床、数控立车、专用机床、铣镗床、钻床、管螺纹机床、加工中心及机床附件等。多年来一直为用户提供优质机床，被誉为国内外的名牌产品。
以低的价格，制作出好的，特色的花束,西宁鲜花店非常值得不满意，可退款,青海鲜花连锁,较好品牌,西宁市订花市区免费送花1～3小时送达,送花到西宁专业送花,价格合理,签收满意后再付款,西宁送鲜花专注服务,西宁鲜花鲜花店上上之选。
随着社会的经济发展，人口的流动不断的增加，人们外出旅游或者是外出工作以及出差，在外的话，很多人都会选择酒店，酒店入住方便，而且拥有优越的生活条件，并且很多的孩子都会有常常去住酒店的想法，市面上的酒店品牌很多，而莹润酒店就是一家具有很高的商业价值的酒店，酒店的环境好，服务的质量高，并受到消费者的认可，一些创业者也想要加入酒店行业，以获得...。
北汽电动车，一家新时代下的国有控股高科技上市公司和绿色智慧出行一体化解决方案提供商，致力于为用户创造电动化、智能化、个性化的驾乘体验，构建汽车与能源、互联网、AI人工智能产业融合发展的新生态、新格局，打造面向未来的绿色智能科技服务平台，至于北汽电动车怎么代理，一起去了解一下，自2009年成立以来，北汽新能源以电动化为突破口，以科技为核...。
很多人在周末的时候就会出门逛超市，购买自己日常生活需要的东西，现在大多数的人群都会选择智能超市，智能超市不需要排队，而且都是扫码付款，比较方便，因此也就出现了各种系列的智能超市品牌，E21智能超市一直都是有很强的实力，会为顾客提供贴心的服务，所售卖的产品种类很齐全，性价比很高，顾客都很喜欢去这个品牌超市购买东西，所以众多创业者发展了品...。
手机已经是生活必需品，人手一台，由于手机的快速发展也促使了手游行业迎来了迅速的扩展，现在多数人手机上都安装各类的手机游戏，休闲的时间玩玩手游打发时间，随着手游的广受欢迎，很多人开始加盟其中，龙创手游就是一个比较好的加盟项目，于是，大家都在问龙创手游加盟费，谁加盟过，接下来，跟着小编一起来看看吧！龙创手游本着玩家充值，你就收效的经营理念...。
其实有关面馆在市场上的发展还是很具有前景的，如今有很多人对于面食的追求也是比较高的，所以说选择加盟一家面馆，未来的发展也会很不错，但是在面馆行业中拥有很多的竞争力，所以在挑选品牌的时候应该要认识对于一般面馆加盟费多少钱，还是要看你所加盟的品牌了，一般面馆加盟费多少钱，说到面馆的品牌，可能很多人都比较青睐于2014年所成立的巴味仙面庄面...。
人靠衣装，美靠靓妆，很多女性朋友为了永葆美丽肌肤，焕发无穷魅力，就会时常光顾美容院，正是因为有这样旺盛的需求，国内美容行业也就取得了突破性的发展，不少创业者都想开一家美容院加盟店，那么，2016容院加盟什么牌子好，小编在此为大家推荐百莲凯美容院，百莲凯美容院成立于2001年，是美容连锁经营的先驱，百莲凯拥有独立的科研、生产及人才培训基...。
水果捞是一种制作简单、原材料易得的甜品，尽管价格不菲，却因其健康美味而受到消费者的喜爱，水果捞主要由各种新鲜水果、酸奶、冰沙、冰淇淋和干果仁等组合而成，尤其在夏季备受欢迎，常见的水果有西瓜、芒果、桃子、草莓、奇异果、哈密瓜、圣女果、火龙果等，制作方法简单快捷，即切即食，既新鲜又解暑，那么，现在开一家水果捞店前景如何?水果捞店因其健康美...。
餐饮行业一直都是很不错的行业，会因为一个网红或者一个网站，带动了一个品牌的发展，美食一直都是离不开消费者生活的，经过网络时代的传播，会有很多人知道这种品牌，就像鲜贝恋贝壳粉品牌，网络时代给这个项目带来了很多的销售额，现在成为了一种网红项目，有些智慧之选商关注了这个项目，在消费者的眼中的爆品，鲜贝恋贝壳粉加盟费多少，鲜贝恋贝壳粉的由来就...。
马上就到十一国庆了，假期里想好怎么穿搭了吗，在这个秋意浓浓的日子里，姑娘们也是时候为自己准备几件内搭单品了，那么女生秋季内搭怎么穿好看呢，今天丹比奴女装为大家献上时尚的五款内搭单品，怎么穿都不会出错哦！秋季内搭单品1，针织衫寒冷的秋季入手一件针织衫是必须的，作为经典色调的白色是内搭受欢迎的色彩之一，一款修身版型的高领针织衫，简约大气的...。
孩子的教育问题始终都是社会热门话题，在双减政策的加持下，推动素质教育行业的快速发展，AI技术得到很多家长的认可，为孩子们带去更好素质教育，北四网校AI智领学习平板历经二十多年发展，创意运营模式，先进教学理念，使其成为教育领域中的实力品牌，那么北四网校AI智领学习平板好加盟吗，售后服务如何，北四网校AI智领学习平板从品牌创建到现在已经有...。
现在的人都十分重视饮食营养，吃东西讲究营养，其实每一种食物都有自身的营养价值，都有它存在的意义，但是不同的烹制方法会使食物的营养价值流失，失去了食物本身的营养价值，在众多烹制方法中，清蒸或是蒸焖是一种很好的烹制方法，因为这种烹制方法不会造成食物的营养流失，小火老师焖锅是一家生意不错的餐饮店品牌，该餐饮店所销售的食物都是以焖为主，食物健...。
创业哪个项目好，近年来儿童阅读加盟行业持续保持增长状态，主要在于以下几点，·全民阅读、文化自信是大背景，阅读是一个比较好的创业切入口；·9月份新的中小学新教材上线，整本书阅读对孩子的阅读量、阅读能力提出了更高的要求；·AI时代，培养孩子的综合能力成为大趋势，而阅读是其中的重要途径……在这种背景下，以借阅，读书会，研学活动为运营模式的书...。
在iPhone6之后，苹果和三星的运势开始出现转机，一个在市值突破7000亿美元之后意气风发，一个在业绩下滑的同时难掩颓势，智能手机行业的两大巨头开始走向不同的分岔路，舆论永远都是恃强凌弱的墙头草，在iPhone6之前，库克领导下的苹果饱受争议，灵魂丧失之说甚嚣尘上，而今三星发展受阻，唱衰之声又是此起彼伏，在这个以销量论成败，靠故事赢...。
全景模式今年5月，微鲸VR在北京召开了一场小型媒体沟通会，宣布开启中超联赛全程的VR直播，当时活动现场，微鲸VRCEO马凯谈到了VR行业变冷，但他们认为，VR的沉浸感是非常适合娱乐体验的，虽然今天还有种种不足，但这种体验一定会随着技术的发展而提升，接下来的六个月里，微鲸VR直播了20场中超赛事，直到11月4日中超联赛落幕，广州恒达夺...。
冬至阳生春又来，12月22日的北京歌华大厦，一场以，为儿童设计，为主题的跨界跨境论坛，让与会者忘记冬日的严寒，感受到设计思想与创新实践所带来的活力与动能，概念商业广场国际建筑设计竞赛，为儿童而设计，U15论坛，吸引了近百位来自科技、教育、文化、艺术、建筑、创意、出版等领域的领军人物、研究者、创业者共聚一堂，围绕儿童素质教育与成长规划，...。
作者，李溪编辑，余快5年估值暴增超200亿元12月16日，星宸科技首发过会，星宸科技成立于2017年12月，这个年轻的芯片公司，在短短5年内，4轮融资，而其估值，也在此期间暴涨，2018年，星宸科技估值仅为2.82亿元；2019年5月和12月两次融资后，估值从Pre，A轮后5.51亿元增长到A轮后的13.33亿元，此后3年，星宸科技的...。
聊天、语音、送礼物，AI侃侃功能，是在人工智能技术上全新的尝试，也是业界的独创技术，目前AI侃侃已经提供了三大核心功能，分别是陪聊、叫早和哄睡功能，以及其它的一些体验福袋，在该输入法中进行聊天、语音通话和送礼物都可提升亲密度，相关功能并不是直接提供，而是需要增加系统亲密度，才能够逐步开启，哄睡师，包月套餐价格达到28888元，，哄睡...。
