AI生成系统CityDreamer:可创建无限的 3D 城市街景
文章概要:
1. CityDreamer 是一种生成式AI模型,可以创建无限的3D城市环境。
2. 通过将建筑实例生成与其他背景对象分离,可以更好地处理建筑多样性。
3. 使用真实城市数据集训练,可以增强生成结果的真实性。
相比生成自然场景,用AI创建城市更复杂,因为可以更容易察觉结构失真。CityDreamer是一种生成式AI系统,专门用于创建开放式的、无边界的3D城市环境。
自然场景生成的成功可归因于两个主要因素:(1)自然场景中的同类对象倾向于外观相似;(2)像SPADE这样的图像转换技术可以快速生成大量高质量训练数据。但这不适用于城市建筑生成。
它的关键创新在于将建筑实例的生成与其他背景对象如天空、地面等分离开来。这样可以更好地处理城市场景中建筑外观多样性的挑战,这也是与生成自然环境相比的一个重要区别。
CityDreamer系统使用了两个真实世界的城市数据集:开放街图(OSM)和Google Earth,这为模型提供了真实的城市布局和建筑样式。研究人员通过这些数据训练模型学习生成逼真的城市场景。CityDreamer包含四个模块:无界布局生成器、城市背景生成器、建筑实例生成器和合成器。
与此同时,建筑实例的生成使用变分自编码器获得更好的多样性。这样就可以创造出具有极高细节和逼真度的3D城市,并可以无限扩展生成范围。
可见,CityDreamer系统应用了多个生成模型的优点,解决了生成开放式城市场景的关键难题,为未来数字城市和元宇宙相关任务提供了有力支撑。这项研究工作展示了生成模型在复杂三维场景生成方面的巨大潜力。
项目网址:https://infinitescript.com/project/city-dreamer/
https://github.com/hzxie/city-dreamer
ImageReward奖励模型:让文本到图像合成更符合人类偏好
StableDiffusion等生成式AI模型在文本到图像合成方面越来越受欢迎。像CLIP或BLIP这样的文本图像评分方法可以评估模型生成的图像是否与文本提示匹配,但它们并不总是符合人类的偏好和感知。站长网2023-05-08 11:19:080006傻瓜式操作!开源贴纸制作工具StickerBaker 输入关键词就能生成卡通贴纸
StickerBaker是一个开源的贴纸制作工具,利用人工智能技术来制作各种有趣的贴纸。无论是想要一个简单的猫咪贴纸还是想要制作一系列多样化的贴纸,StickerBaker都能满足你的需求。站长网2024-02-27 14:19:180000100元住进群租房杂物间,爆火的“假期住我家”有多坑?
与假期动辄三倍涨价的酒店、民宿相比,今年“十一”长假,“假期住我家”在各大社交平台上火了。网友将自己的房子通过整租/租次卧方式,给假期出游的年轻人居住。一间次卧出租价格一般为100元左右,如果距离景区比较近,定价在300元左右。其中,大多数为有房一族将闲置的房源,在假期短租出去共享给陌生人,减轻一定经济负担,也满足了年轻人追求性价比住宿的需求,因此被网友称为“野生版Airbnb(爱彼迎)”。0000外媒抢先实测Sora,视频大翻车惨不忍睹?不懂物理/动物变形/速度巨慢,但初创公司已经创死一片
【新智元导读】Sora颠覆影视业,现在来看还远。Bloomberg记者亲自试用后发现,Sora生成的视频还是翻车严重。而且,它的速度太太太太慢了!不过尽管如此,OpenAI已经创死了一片初创公司。虽然功能还未正式开放,但已经有外媒抢先上手体验了!结果就是——Sora翻车了!最近,就在外界对Sora一片赞誉声之时,一些冷静的外媒,也开始发出了质疑的声音。站长网2024-02-28 18:14:110000苹果或推出AI应用商店 预计在6月的WWDC上发布
根据最新的消息,苹果计划在即将到来的WWDC2024上,向全球展示其融入AI元素的全新系统和软件。MeliusResearch的主管BenReitzes在接受CNBC的采访时透露,苹果有可能在6月的WWDC上推出一个全新的AI应用商店。这个应用商店预计会包含来自各大供应商的AI应用,为开发者和用户提供一个丰富的选择。站长网2024-03-26 10:51:060000