芝加哥大学研究人员推出3D画笔:使用文本生成局部风格化纹理的AI方法
**划重点:**
1. 🌐3D画笔通过文本描述自动为网格上的局部语义区域着色,实现了直接在网格上进行纹理编辑的目的。
2. 🤖 研究团队采用级联分数蒸馏(CSD)和神经场来提高局部纹理区域的细节和分辨率。
3. 🚀 该方法使用在3D表面上定义的多层感知器,创建产生在3D中平滑变化的神经纹理,减少了纹理的噪点,并具有超分辨率能力。
芝加哥大学的研究人员与Snap Research合作,推出了一种名为3D画笔(3D Paintbrush)的人工智能方法,通过文本描述自动生成网格上的局部语义区域的纹理。这一创新使得用户可以通过直观的、自由形式的文本输入控制纹理编辑,为各种网格描述其编辑。
为了提高局部纹理区域的细节和分辨率,研究团队引入了级联分数蒸馏(CSD)和神经场的概念。通过这些方法,他们能够修改定位区域并在局部区域内变形几何形状。采用多层感知器对神经场进行编码,以表示定位和纹理映射,确保了纹理的一致局部风格。
与现有模型相比,研究人员表示,3D画笔的定位更加清晰,并使用级联分数蒸馏控制监督的粒度和全局理解,实现了比其他SDS更高分辨率的纹理和定位。
该方法通过在3D表面上定义的多层感知器(MLPs)创建神经纹理,产生在3D中平滑变化的输出。这在2D纹理图在纹理接缝处存在不连续性时尤为重要。MLPs提供的平滑性减少了纹理的伪影,减少了噪点,并具有超分辨率能力。
研究团队同时优化了定位和纹理区域,他们发现同时优化可以产生高度详细的纹理,有效地符合预测的定位区域。未来,他们计划将局部编辑能力扩展到文本化以外,并学习使用相同的局部纹理图在多个形状之间提供对应关系。
这一研究为3D建模和纹理编辑领域带来了新的可能性,为游戏、动画、电影等各个行业提供了更加高效和直观的纹理编辑工具。
项目网址:https://threedle.github.io/3d-paintbrush/
论文地址:https://arxiv.org/abs/2311.09571
Vincent AI大幅升级,成全球最全面AI法律研究平台
划重点:-全球法律情报公司vLex发布了一套重大升级的AI工具,将其助手VincentAI打造成全球最全面的AI法律研究平台。-VincentAI基于全球最大的在线法律图书馆,包括110多个国家的法律,超过10亿个案例、法规、文书等。-VincentAI的能力包括回答问题、构建论点、比较不同司法辖区的法律、发现法律问题、创建文档摘要等,为法律专业人士提供前所未有的便利。站长网2023-10-18 21:24:260001英伟达和 Amgen 支持 AI 制药公司 Generate 筹集 2.73 亿美元
利用人工智能(AI)探索新治疗方法的药物开发公司Generate:Biomedicines周四表示,该公司已从包括英伟达风险投资部门和Amgen在内的投资者那里筹集了2.73亿美元的资金。图源备注:图片由AI生成,图片授权服务商Midjourney站长网2023-09-15 10:19:260000Wonder Studio:将实拍真人转换为 CG 角色的革命性 AI 工具
WonderStudio是由WonderDynamics公司推出的一款革命性的AI工具,可将影片中的真人转换为CG角色的外观,包括动画、灯光等细节,以搭配实拍场景。用户只需一台相机和浏览器,就能轻松创建动画,无需深入了解3D软件知识。官网地址:https://wonderdynamics.com/站长网2023-07-24 17:15:250002云从科技发布国内首款AI原生数据分析产品DataGPT
今日,云从科技发布了国内首款AI原生数据分析产品——DataGPT。该产品基于云从自主研发的从容多模态大模型,采用新颖的“对话即分析”交互模式,改变了企业对复杂数据的认知和应用方式,使数据解析变得简单自然。DataGPT具备以下六大亮点:1.领先的大模型驱动:运用从容大模型的领先技术,确保数据分析的高效与准确性,能够及时准确地回答任何复杂的统计需求。站长网2024-02-01 17:30:080000Google发布PaLI-3视觉语言模型,性能相当于体积大10倍的模型
📌划重点:GoogleResearch和GoogleDeepMind发布了PaLI-3,这是一款仅有50亿参数的视觉语言模型(VLM)。尽管相对较小,PaLI-3在多模态测试中超越了体积大10倍的模型,可以回答关于图像的问题、描述视频、识别对象和读取图像上的文本。站长网2023-10-25 18:22:020000