全新「多模态」生图AI文字渲染暴打Midjourney+DALL·E 3!5亿融资Karpathy都投了 全新「多模态」生图AI文字渲染暴打Midjourney DALL·E 3!5亿融资Karpathy都投了
admin
2024-03-01 17:39:05
0


新智元报道

编辑:润 好困

【新智元导读】Ideogram凭借不输Midjourney的生图能力和遥遥领先的图片中文字渲染能力,获得了包括Jeff Dean和Karpathy在内一众大佬的8000万美元融资,文生图这条离钱最近的AI赛道又加入了一名重量级选手。

文生图领域作为一个跑出「10人团队年收入过亿美金初创公司」的赛道,已经成了AI创业公司掘第一桶金的最佳起点。

但是在谷歌,微软等大厂都已经花了大量资源去布局的领域,留给初创公司的机会到底在哪里?

最近一家名为Ideogram的文生图工具,凭借优秀的文字渲染能力,成功融资8000万美元!

包括Jeff Dean和Andrej Karpathy在内的一众硅谷大佬和知名机构都是它的投资人。


只要在prompt里将文字打上去,就能非常自然可控地出现在生成的图片中。


而且生成的图片不仅能简单的以平面文字的形式出现在图片之中,还能根据用户的要求,生成自然的悬浮文字,或者是立体的文字。

甚至用一句提示词,它能直接给你画出图文高度配合的梗图!


文生图也能做出「多模态」

而图片中的文字生成,一直以来是各大生图AI做不好的痛点。

如果要求图片中有某些确定的文字,需要在生成图片之后还要花费很多后期的加工。


而Ideogram对于生图文字的控制能力,不仅在对比数据上比DALL·E 3要好出不少。

实际生成的带有文字图片也是非常自然。



文字可以像很多商业广告一样自然的悬浮在图片上,也可以和图片中的物体自然地融为一体。


像这种配文字的电影海报级的图片都可以直接一步生成。


而漫画形式的配图文字也同样不在话下。


用户可以非常精准地将自己想要表达的文字内容和各种风格的图片组合在一起。



除了能严格按照作者的要求生成精准的文字,甚至像开头的梗图一样,它能按照图片的设定无中生有的配上契合图片的文字。

简直成了另一种形式的多模态模型。

普通的生图能力也是行业顶尖

而除了最优秀的文字渲染能力之外,作为生图工具,它在其他方面的表现也毫不逊色于行业顶尖水准。

Ideogram 1.0 可在理解冗长、复杂提示词的同时生成清晰、细致的图像。


宛如相片一样的海报


对于各种动物以及奇怪组合的完美呈现能力。

逼真的照片级图片生成能力,足以以假乱真。


也能准确地生成复杂的手部动作。


人物表情,光影都非常和谐。


而且它还能通过工具,配合提示词,控制主要内容在图片中生成的形状和范围。


Ideogram 1.0 除了能够生成照片级逼真的图像,对于超自然的风格的图片也有很强的表现能力。



Ideogram 1.0还提供了一个名为「Magic Prompt」的功能,可以自动增强、扩展和翻译用户的提示,大大降低用户生成精美的创意图片的门槛。

原提示:创建一个关于猫的有趣的表情包 增强提示: 以一只表情惊讶的波斯猫为主题的备忘录。猫的眼睛睁得大大的,让人觉得它很震惊或很有趣。背景是其他猫咪摆出的各种姿势的彩色拼贴画,主题为 「当你意识到猫咪已经占领互联网时」。整个画面轻松幽默,展现了网上对猫的持久热爱。


有了这个功能,表情包可以直接出图片了:

提示: 。 增强提示: 一个幽灵、万圣节灯笼和骷髅的恐怖万圣节场景。鬼魂穿着破旧的长袍,漂浮在南瓜之间,而南瓜灯则露出顽皮的笑容。背景中,一个戴着高帽的骷髅站在鬼屋附近。月亮在画面上洒下银色的光辉,气氛既阴森恐怖又充满童趣。


Ideogram 1.0本身也很擅长解释复杂的提示。每个对应的图像准确地反映了其提示的每个细节:

这是一幅迷人的全家福,一个纯色哑光红色球体圣诞礼物栖息在一个蓝色立方体包装的圣诞礼物上,一棵鲜艳的绿色圣诞树矗立在它们身后,树底缠着一块绿布。右边是一只好奇的小狗,左边是一只可爱的猫咪。


一只完全由香脆炸鸡制作而成的公鸡,如电影般逼真。它的身体覆盖着一层金黄色的外壳,淋上番茄酱,羽毛上还点缀着完美烹制的热气腾腾的炸薯条。公鸡的眼睛是由两个又小又圆的番茄酱斑点组成的,它的喙是由一块香脆的鸡皮制作而成的。场景的背景是一家灯光昏暗的复古餐厅,霓虹灯和格子桌布为餐厅增添了怀旧和奇特的氛围。


书房里的两个男人。左边的男子站着,身穿长外套和花纹衬衫,手持拐杖。他面容邋遢,留着胡子。右边的男人坐在椅子上,身着正装,手持拐杖。他们身后的墙上挂着一幅装裱好的男子肖像。房间里有华丽的窗帘和铺着地毯的地板,给人一种复古的感觉。


而根据 DALL·E 3 这样的评估标准,人类评估者在提示对齐、图像连贯性、整体偏好和文本渲染质量方面Ideogram 1.0,比 DALL·E 3 和 Midjourney V6还更收到欢迎。


免费额度大,订阅价格也不贵

有如此强大的能力,但是他的收费却非常亲民。

免费用户每天能使用25个提示词,生成100张图。

8刀一个月的用户每天可以生成100个提示词,400张图。

20刀一个月就可以无限使用,确实是价格不贵量又足。


最新实测:Ideogram VS Midjourney

显然,想要在文生图这个领域与现有的竞争者抗衡,挑战堪称天花板的Midjourney V6是避无可避的。

根据大佬Sorin Ciornei的最新测试,Ideogram 1.0和Midjourney相比,也不落下风。


Test 1:奥黛丽-赫本饰演的小丑

用一个简单的提示生成一个包含赫本和小丑的人物图片。

提示非常含糊,因为没有特别需要的图片细节。可以说双方生成的效果不相上下。


Test 2:真实摄影

在作者看来,Ideogram生成的第一张图碾压了所有其他图片。


Test 3 :想象力

这个测试考验的是AI的想象力,因为在没有任何细节的情况下,图片 AI 要决定加入什么元素以及如何让图片看起来超现实。

Midjourney确实更胜一筹。


Test 4:风格碰撞

现实和复古主题的碰撞似乎Midjourney做得更好。

必须将黑白摄影与彩色鸭子混合在一起,让Ideogram有点不知所措。


Test 5:全息投影

Midjourney的全息效果不太清晰,但是画面风格比较一致协调。Ideogram全息效果比较正常,但是整体画面割裂感比较强。

双方算是各有所长的但是整体上表现都不太好。


Test 6:官方案例实测

在官方放出的例子中,Midjourney似乎表现要更好一些,图中有更多的细节,风格也更真实一些。但是双方的差异似乎不大。


Test 7:Logo

作者又测了测需要带有文字的logo生成,虽然Ideogram的logo似乎也不能拿来就用,但是它至少符合要求,有明显的文字效果,而Midjourney似乎就完全没有体现出文字内容。


Test 8:用魔法提示完成Logo

作者还测试了官方提供的「魔法提示功能」,它把用户输入的提示变得更加详细。


他用这个Logo的提示再次对比了两个工具的生成效果,从创意的角度,似乎Ideogram更好。


Test 9 :梗图&表情包

而Ideogram强大的文字能力简直是生成梗图的利器,而它强大的文字功能在这里体现得淋漓尽致。

Midjourney完败。

某种程度上来说,他的能力似乎都接近一个多模态「图+文」的模型了


参考资料:

https://about.ideogram.ai/1.0

https://medium.com/thereach-ai/ideogram-1-0-9-tests-to-see-how-it-matches-midjourney-7dfd17ff3f57

相关内容

热门资讯

CTI华测检测与丰宾电子落地全... (全球TMT 2026年07月09日讯)6月26日,丰宾电子科技股份有限公司与华测检测认证集团股份有...
87家城商行上榜《2026年度... 7月8日,英国《银行家》杂志(The Banker)发布2026年度全球银行1000强榜单,该榜单以...
银行小程序“瘦身”潮起!流量红... 当遍地开花的银行小程序加速退场,一场以存量深耕、协同经营为核心的渠道重构正在银行业上演。7月9日,北...
微信小程序开发需要多久?从3天... 微信小程序开发需要多久?每个商家在启动项目前最关心的问题之一。时间就是成本,时间就是商机。在长沙云中...
商品老兵:现在是抄底黄金的最佳... 黄金价格较高点回调逾25%,但在大宗商品资深投资人看来,这场调整恰恰是难得的布局窗口。 近日,在Ri...
股价提前涨停!603986,上... 今日盘后,兆易创新(603986.SH)公告称,预计2026年半年度归属于上市公司股东的净利润为69...
担忧AI投资热潮!美联储,还是... 北京时间7月9日凌晨,美联储公布今年6月联邦公开市场委员会(FOMC)政策会议纪要。纪要显示,随着通...
1480亿,东莞草根女首富刚刚... “要么不做,要做就做第一。” 来源:元素elements 作者:李冰之 编辑:吾人 刚刚,鼎泰高科成...
原创 一... 路过小区街边,总能看见不少经营多年的烟酒商行贴着转让告示。 前阵子楼下开了十多年的老店清仓甩货,成箱...
珞石赴港,“机器人们”等待上岸 盘中最高涨超17%,港股再迎来自机器人赛道的优质标的。 7月9日,覆盖工业机械臂、协作机器人、具身智...
日经225指数日内涨幅达1% 日经225指数日内涨幅达1%。
安全可信,算力赋能智慧医疗!山... 近日,山一大一附院(省千佛山医院)“基于安全可信框架的分布式大模型算力服务项目”已完成招标,后续建设...
乔路铭开启申购即将登陆北交所:... 拥有已授权专利113项,构建起覆盖主流车企的供应体系。 2026年7月8日,乔路铭科技股份有限公司(...
燧原科技科创板IPO注册获证监... 证监会批复同意燧原科技科创板IPO注册。 7月9日晚间,证监会发布《关于同意上海燧原科技股份有限公司...
13年全职太太出任董事,营销总... 来源丨时代商业研究院 作者丨陆烁宜 编辑丨郑琳 IPO前连续3年大笔分红后欲募资补流,合理性遭遇北交...
年内“再卸一基”!广发明星基金... 红星资本局7月9日消息,近日,广发基金公告称,基金经理郑澄然“再卸一基”,不再管理广发兴诚混合(基金...
活力中国调研行 | 在上海,答... 【大河财立方 记者 夏晨翔 文 王子阳 摄影】“遂古之初,谁传道之?上下未形,何由考之?”2300年...
原创 2... 美联储新掌门凯文·沃什开完首场议息会,点阵图直接抹掉今年降息预期,9名票委还支持年内再加,美元指数当...
快餐、烘焙之后,商超巨头们又看... 文 | 红餐网 “15.8元自选快餐”“18元韩国拌饭”“青蟹98元一只现捞现蒸”,消费者推着购物...
从工业重镇到“场景招商” “铜... 中新网兰州7月9日电 (杨娜)第三十二届中国兰州投资贸易洽谈会9日在兰州启幕,素有“铜城”美誉之称的...