出品|开源中国 自 2021 年初以来，AI 领域推出大量基于文本到图像的模型（例如 DALL-E-2、Stable Diffusion 和 Midjourney 等）。近日，谷歌也公开了一款名为 ＂Muse＂ 的基于文本生成图像的模型，声称可以实现最先进的图像生成性能。 下图均为 Muse 的基于文本生成的图像 一群鱼在海里拼成 ＂MUSE＂ 字样 嘴里叼着 ＂MUSE＂ 牌子的威尔士柯基 带有 ＂Muse＂ 的拿铁咖啡 壁炉中的火焰呈现 ＂MUSE＂ 字样 Muse 在离散标记空间中接受掩蔽建模任务的训练：给定从预训练的大型语言模型 (LLM) 中提取的文本嵌入，训练 Muse 以预测随机掩蔽的图像标记。使用预训练的 LLM 可以实现细粒度的语言理解，转化为高保真图像生成以及对视觉概念（例如对象）的理解，比如空间关系、姿势、基数等。 总体来说，MUSE 的优势在于其 FID 和 CLIP 分数更高、生成效率比其他同类模型快得多，且支持开箱即用的蒙版编辑功能（即支持通过蒙版继续编辑已生成的图片）。 分数更高：MUSE 模型获得了出色的 FID 和 CLIP 分数，可定量衡量图像生成质量、多样性和与文本的对齐情况。数据方面，MUSE 的 900M 参数模型在 CC3M 上实现了新的 SOTA，FID 得分为 6.06。Muse 3B 参数模型在零样本 COCO 评估中实现了 7.88 的 FID，以及 0.32 的 CLIP 分数。 生成效率：由于使用压缩的、离散的潜在空间和并行解码，MUSE 模型比其他同类模型快得多。与 Imagen 和 DALL-E 2 等像素空间扩散模型相比，Muse 使用离散标记，且需要的采样迭代更少，因此生成效率显著提高；与谷歌自己的 Parti 等自回归模型相比，Muse 使用了并行解码，生成效率也更高。 编辑功能： MUSE 支持基于蒙版的编辑功能，比如下图，通过在左图创建蒙版并输入 ＂热气球＂，便可生成右边的新图片。 另外，Muse 团队指出，当今语言和图像人工智能系统的用例存在一些 ＂潜在的危害＂，例如社会偏见或传播错误信息。出于这个原因，该团队并未发布 MUSE 的源代码和任何公开的 Demo 演示。 在 MUSE 主页可以看到更多基于 MUSE 的图像作品，下图为部分 MUSE 作品预览：
访华获1200多亿订单后，德国开始变脸？德政府又对中企出手了朔尔茨访问中国获得1200多亿的大订单后，德国开始故技重施。近日，德国政府以危害国家安全为由，又再一次对中国企业出手了。早在德国总理朔尔茨还未访华之前，外界就对这次中德交流充满着期美国给印度提了个条件，还提到中国卢子美国给印度继续购买俄罗斯石油提出条件避免使用西方的保险和航运服务。综合路透社和今日俄罗斯电视台（RT）网站报道，美国财政部长耶伦11日表示，美国乐见印度继续购买俄罗斯石油，包括双11收官，今年电商为啥没秀成绩单？11月12日零点，2022年双11收官。值得注意的是，2022年双11，天猫京东均未像往年一样用一幅不断跳动的数据大屏来展现双11的成交数据。零点过后，天猫笼统表示，今年天猫双115年前许家印还是首富，如今身家缩水2600亿，还在卖房卖车救公司2022年中国富豪榜公布，很多地产富豪身家都在大幅度缩水。今年无疑是地产富豪们最惨的一年。如今只有王健林一个人身家还可以超过1000亿，很多地产富豪在过去一年内身家都缩水数百亿。地上海最大地产公司再度爆雷！下一个恒大？如果问上海最大的地产公司是谁，那肯定是绿地无疑了。2021年度，绿地集团以661亿美元的收入，排名财富世界500强的142位。恒大集团以735亿美元排名第122位。碧桂园以671亿卖房借债全民梭哈，韩国为何沦为投机天堂？揭秘世界31视频请见下面链接卖房借债全民梭哈，韩国为何沦为投机天堂？揭秘世界31从小学生到政府高官全民炒股，股票账户的数量，比人口总数多出800万。一半的人上班炒股，股民每天查看股市动态50次2023年养老金统一按工龄发，一年180元，30年发5400可以吗？2023年养老金按工龄发，工龄每一年180元，30年发5400元可行吗？还有不到两个月，2022年就要过完了，对于2023年养老金上调不少退休人员充满期待，因为许多退休人员只有养老2022年11月12日国内油价最新消息国内成品油本轮调价周期今日油价预期简报昨日为本周周五，国内成品油最高零售限价本轮调价周期第四个工作日，基于目前原油品种变化率数据，本轮最高零售限价的预期调整核算结果虽然处于重心向下卓达投资人APP登记参考我是10号晚上帮别人用卓达投资人APP做的登记，遇到了一些问题也咨询了相关人员，在这简单的跟大家分享一下，仅供大家参考。（当然，现在也有很多人因为各种原因建议不要填，所以大家就先暂专家认为，2023年成都房价均价跌破五千，金融城跌破两万最近，很多粉丝私信我，问我成都楼市的问题，有个成都楼市很有意思的现象，一提到楼市和房价就说成都的房价跌了，很多刚需朋友就会说我不是很懂房价吗，怎么不懂房价？我告诉大家我真的在分析房油价调整消息今天11月12日，全国加油站调整后9295汽油新售价今日油价最新调整消息今天11月12日，星期六，今日国际油价（欧佩克wti原油）上涨截至发稿（11月12日凌晨0时），美国WTI12月原油期货电子盘价格周六（11月12日）报价上涨3