不服不行,ChatGPT加持下OpenAI的文生图模型又碾压对手了 siyushenqi.com • 2025 年 8 月 13 日 下午10:45 • 海外营销 • 阅读 16 DALL·E 3 来了。 作者|薛良Neil 多模态与大模型该如何更好结合是人工智能目前一个非常热门的研究方向,OpenAI刚刚发布的文生图模型DALL·E 3向所有人展示了一个最会做大模型的公司是如何看待和试图解决这个问题的。 DALL·E 3的升级点可以分为两部分,首先它是一个更好、更精确的文生图模型。 更好是相比DALL·E 2而言,更精确则意味着DALL·E 3对提示词有着更好的理解能力。 相同提示词下,DALL·E 2(左)和DALL·E 3生成效果对比。 换而言之,你不需要再绞尽脑汁成为一个提示词prompt大师了。OpenAI在介绍DALL·E 3的页面宣称,目前的文生图应用总是倾向于忽略用户给出的描述词,这强迫大家每个人都要去学着搞prompt,DALL·E 3克服了这一点。 比如下面这个例子。prompt中涵盖的各种要素,无论主次与否,比如行人、满月、斗篷乃至蒸汽朋克风格的电话,都被DALL·E 3精准还原了出来。 官方还给出了更多的案例,体现DALL·E 3出色的理解能力,简单放几张如下。 土豆国王俯瞰着它的王国。 灵感来自荔枝的球形椅子。 卷发像暴风一样飘扬,服装像大理石和瓷器碎片组成的旋风一样的舞者。 心脏里的微小宇宙。注意基座上镌刻的英文,这反映出DALL·E 3已经拥有了生成文字的能力。 这些天马行空的形容都被DALL·E 3很好的捕捉,但仅仅描述词理解能力的提升还不是DALL·E 3的升级重点,真正的杀手锏是OpenAI直接把DALL·E 3集成到了ChatGPT中!这种集成不是简单的在对话框或者提示词中放上工具的入口,而是用ChatGPT的语言能力帮助DALL·E 3理解和生成更准确的图片。 换而言之,DALL·E 3被大模型赋能,在这个基础上,图片和文字的模态实现自由转换。 OpenAI用一个非常生动的例子诠释了这种自由转换。用户首先让DALL·E 3生成一个“超级向日葵刺猬”(好吧,我知道没有人知道那究竟是什么)。 在ChatGPT的优化帮助下,DALL·E 3精准领会了用户的意思。生成的图片不仅画风多样,而且内容准确。要注意这是在只有很少的提示词的情况下做到的。 由于和ChatGPT集成在了一起,DALL·E 3拥有思维链能力。你可以给这只刺猬起个名字,然后ChatGPT会记住这一点,在接下来的交互中,DALL·E 3始终知道Larry是谁。 你可以继续像同人类对话一样,用自然语言来同DALL·E 3进行交互。比如你可以说,“能让我看看Larry的房子吗?”或者“为什么它这么棒(super-duper)?”,ChatGPT会通过文字和图片来给你答案。 正在生成和Larry有关的贴纸。 最终,这些内容可以被总结汇编成一个图文并茂的睡前故事。 连OpenAI的CEO都忍不住夸,这个宣传视频真的还怪可爱的。 迈出多模态自由转换的第一步 DALL·E 3和ChatGPT的结合能力让人震惊,有网友已经直接给 MidJourney点蜡烛了。 相比基于Discord的MidJourney,自然语言显然是更好的交互方式,OpenAI用ChatGPT辅助用户使用DALL·E 3的过程不仅包括了对用户意图的解读,还将具有一定智能的大模型将思维链引入其中,图片生成始终沿着用户的prompt指示进行,在多轮对话中体现出了很好的一致连贯性。 但DALL·E 3绝不仅是交互方式的革新,它背后反映的OpenAI在跨模态应用上的潜力更值得注意。 OpenAI以大模型能力闻名,但它也是最早尝试用文本作为条件引导图像生成的公司,在DALL·E 2的前身GLIDE中,OpenAI训练了一个35亿参数文本条件扩散模型,文本条件信息的嵌入正是来自transformer模型。 可以说,GLIDE的成功第一次让扩散模型“真正出圈”,因此,尽管目前我们很难知道DALL·E 3的技术细节,但有鉴于它在demo中展现出来的实力,有理由相信OpenAI在大模型中积累的经验同样也被应用在了DALL·E 3的开发中。 OpenAI的独特优势让大模型在交互方式和开发过程都与DALL·E 3实现了紧密结合,这恐怕是其它公司所不具备的企业护城河,借助大语言模型的智能来推动多模态之间的转换,我们已经在DALL·E 3看到了一个多模态大模型的雏形。 本文源自「私域神器」,发布者:siyushenqi.com,转载请注明出处:https://www.firethy.com/33227.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 7.9K 文章 0 评论 296 问题 16 粉丝 私域神器:国内海外私域营销拓客软件 狂飙284天后,一批「模仿」ChatGPT的创业公司或将倒闭 上一篇 2025 年 8 月 13 日 下午10:45 小扎发布虚拟聊天AI,竟「1:1复刻」Character.AI?用户吐槽:设定太老土了 下一篇 2025 年 8 月 13 日 下午10:45 相关推荐 海外营销 Shein的后浪!快时尚品牌Cider如何俘获Z世代的心? 在竞争激烈的快时尚领域,跑出了一些“优等生”。 siyushenqi.com 2025 年 8 月 13 日 18000 海外营销 国外年轻人都用哪些APP购物?Z世代热门电商APP排行榜 你是否听说过TikTok、Discord、Kik或Bitmoji?如果你是Z世代(1997年至2012年出生的人),那么你很可能使用过这些应用程序。 siyushenqi.com 2025 年 8 月 13 日 12000 海外营销 2023 Sensor Tower APAC Awards年度获奖名单正式公布 基于我们的数据和洞察,Sensor Tower 2023 亚太奖项,将向您展示来自亚太发行商的出色游戏和应用。 siyushenqi.com 5天前 6000 海外营销 PAGC2024展商大集结·百+展商行业图谱释出,观展有方法 PAGC2024展商大集结·百+展商行业图谱释出,观展有方法 siyushenqi.com 5天前 6000 海外营销 六小龙留不住字节大神 字节系高管正在集体被AI六小龙“退货”,如前字节皮皮虾负责人张心皓调离核心岗位,前今日头条用户产品负责人张前川变相离职,前字节剪映产品经理明超平从月之暗面离职创业等。 siyushenqi.com 2025 年 8 月 13 日 12000 海外营销 谷歌提出大规模ICL方法——强化和无监督 谷歌Deepmind的研究人员提出了强化和无监督两种ICL学习方法,可显著提升模型的数学问题解决、文本问答、摘要生成、算法推理、低资源机器翻译等场景能力,同时大幅度降低人工标注的成本。 siyushenqi.com 2025 年 8 月 13 日 14000 海外营销 鹰角今年再出手,投资成都独游团队 企查查显示,成都青栩科技有限公司近期发生了工商变更,新增股东上海鹰角网络科技有限公司,占股10%。青栩科技成立于2023年7月,旗下有游戏软著《只有姐姐的世界》,这是一款像素风模拟经营游戏,已于2023年研发完成,并在Steam上公开了主页。 siyushenqi.com 2025 年 8 月 17 日 5000 海外营销 游戏下载量超10亿次,Rollic怎样用“抖音化”思路做超休闲游戏? Rollic是一家超休闲手游发行商,到目前为止,这家公司游戏的总下载量已经突破了10亿次,其中有7款曾进入美国iOS App Store免费下载榜前两名。 siyushenqi.com 2025 年 8 月 3 日 22000 海外营销 私域神器每周合作精选No.109|自研像素弹幕游戏寻发行;休闲放置寻海外发行;AI短剧寻找分销商平台;寻埃塞俄比亚本地支付 本期精选的合作类型涵盖自研像素弹幕游戏寻发行;休闲放置寻海外发行;AI短剧寻找分销商平台;寻埃塞俄比亚本地支付等。接下来就一起看看吧~ siyushenqi.com 5天前 4000 海外营销 国货美妆出海,怎么让海外消费者get 中式美学? 寻求贴合不同市场年轻人的表达方式 siyushenqi.com 2025 年 8 月 7 日 19000 海外营销 TikTok Shop正式推出商家自运营模式,向大批卖家抛出橄榄枝 TikTok Shop紧紧咬住了美国电商市场。 siyushenqi.com 2025 年 8 月 12 日 13000 海外营销 独家:DTC品牌电商出海再添猛将 原快手海外负责人Zack创业跨境电商 离开快手,他想试试做DTC品牌出海 siyushenqi.com 2025 年 8 月 13 日 15000 海外营销 上热搜、抢赛道?TikTok的“魔力”标签撬动自然流量 小小的标签,种草能力超乎想象! siyushenqi.com 2025 年 8 月 3 日 23000 海外营销 当Z世代的孤独变成生意 Litmatch又把灵魂社交的风吹遍南美 主打虚拟社交的Litmatch是如何突破巴西及南美市场的? siyushenqi.com 4天前 4000 海外营销 4月应用TOP20丨黏土特效爆红海内外,翻译剧成功出海 我们开始4月榜单解析,纵观4月份移动应用的总体表现。 siyushenqi.com 5天前 5000 海外营销 私域神器每周精选 No.64|腾讯音乐出海产品寻求换量合作,多家团队寻海外CPI流量 私域神器小程序是集资源、资讯、活动为一体的整合媒体平台,汇聚了10万多出海精英,1万多出海企业,吸引包括华为、腾讯、网易、Funplus、Google、Meta在内的国内外大厂精英入驻,帮助众多企业达成合作需求。 siyushenqi.com 4天前 3000 海外营销 对话行者AI联合创始人陈林:最高提升3倍效率 AIGC颠覆游戏美术、音乐制作 一场关于AIGC如何改变游戏制作的对谈 siyushenqi.com 3天前 6000 海外营销 一周要闻NO.128丨《黑神话:悟空》获年度最佳动作游戏;英伟达涉嫌违反反垄断法被立案调查;TikTok杀向欧洲 一起看看这周有哪些出海圈值得关注的大事记吧! siyushenqi.com 2025 年 8 月 14 日 15000 海外营销 有效追踪率必须高于95%!亚马逊自配送卖家小心账号被关 亚马逊近期宣布了卖家自配送政策调整,有效追踪率(VTR)的指标考核要求必须高于95%,否则相关分类下的商品销售权限将会被暂停,甚至是停掉账户。 siyushenqi.com 2025 年 8 月 13 日 13000 海外营销 订单量暴增741%!时尚服装引爆北美电商市场 在通货膨胀和疫情减退的影响下,美国电商市场的增速开始放缓。 siyushenqi.com 2025 年 8 月 13 日 12000 海外营销 靠内容批量“复制”,他们在TikTok年销数百万美元 不投任何广告,16个月卖出百万销售额。 siyushenqi.com 2025 年 8 月 13 日 15000 海外营销 美国“星际之门”数据中心选址曝光 OpenAI正在评估美国各州作为“星际之门”项目数据中心的选址,该项目被视为美国在全球人工智能竞赛中保持领先的关键。OpenAI首席全球事务官Chris Lehane强调,这场竞争的利害关系重大,将塑造未来世界的模样。 siyushenqi.com 2025 年 8 月 13 日 10000 海外营销 万字长文,读懂东南亚玩具和潮玩市场(下篇) 1、潮玩日益流行,东南亚成各家争夺市场 2、玩转东南亚潮玩市场,有不同策略 3、东南亚潮玩市场还有机会吗? siyushenqi.com 2025 年 8 月 12 日 14000 海外营销 “热”了三年的短剧,依然有新增长机会可寻 2024年开年以来,短剧制作成本不断上升,行业竞争加剧,从业者们亟需新的渠道和增长点。 siyushenqi.com 5天前 8000 海外营销 6天销量800万狂赚1亿美金 10个人研发的幻兽帕鲁给我们什么启发? 裁缝界楷模。 siyushenqi.com 5天前 6000 海外营销 京东死磕低价,拼多多奉陪到底 黄峥:你可以说我low,但你无法忽视我。 siyushenqi.com 2025 年 8 月 5 日 24000 海外营销 莉莉丝“剑与远征2”出征,首日冲进美国畅销榜Top50 | 欧美出海秀 《剑与远征:启程》正式上线欧美地区,首发告捷。 siyushenqi.com 5天前 6000 海外营销 下一个PatPat?童装品牌Hibobi如何占领中东千亿市场 不同于另一只瞄准欧美市场的童装独角兽PatPat,hibobi一开始避开了竞争激烈欧美红海,而把最近大热的中东新兴市场作为主要阵地。 siyushenqi.com 2025 年 8 月 13 日 14000 海外营销 菲律宾社交电商Resellee获100万美元种子轮融资 11月17日消息,据亿恩网消息,近日,菲律宾社交电商平台Resellee获得100万美元种子轮融资 siyushenqi.com 2025 年 8 月 13 日 12000 海外营销 最严新规将实施,电商行业要变天了 释放重大信号。 siyushenqi.com 2025 年 8 月 5 日 21000 发表回复 请登录后评论...登录后才能评论 提交