腾讯混元3D

1年前发布 2K 00

工具介绍:腾讯混元3D,全称为 Hunyuan3D-1.0,是腾讯推出的首个同时支持文生和图生的3D开源模型,专门解决现有3D生成模型在生成速度和泛化能力方面的不足。该模型采用了基于Diffusion 技术的架构,能够同时支持文本生成和图像生成3D资产。

收录时间:
2024-11-16

腾讯混元3D简介

腾讯混元3D,全称为Hunyuan3D-1.0,是腾讯推出的首个同时支持文生和图生的3D开源模型,专门解决现有3D生成模型在生成速度和泛化能力方面的不足。该模型采用了基于Diffusion 技术的架构,能够同时支持文本生成和图像生成3D资产。

腾讯混元3D

腾讯混元3D:首个同时支持文生和图生的3D开源模型

技术特点与创新

  • 快速生成:轻量版模型能够在 10 秒内生成高质量的 3D 资产,支持快速单图生成 3D,包括 mesh 和 texture 提取。
  • 两阶段生成方法:采用多视图生成和多视图重建的两步流程。首先通过多视角扩散模型合成多个不同视角的新图像,然后使用基于 Transformer 的稀疏视角大规模重建模型生成 3D 资产。
  • 自适应 CFG 技术:在多视图生成阶段,通过调整不同视角和时间步的 classifier-free guidance(CFG)尺度值,确保生成的图像既接近输入又具有多样性。
  • 开源全面性:模型权重、推理代码、算法等全部开放,提供轻量版和标准版,极大降低了 3D 内容创作的门槛。
  • 强大的泛化能力:能够重建各类尺度的物体,大到建筑,小到工具花草,适应多种创作需求。

性能与应用

  • 超越 SOTA:在定性和定量评估中,Hunyuan3D-1.0 的表现超越了其他开源模型,尤其在生成速度和泛化能力方面。
  • 应用广泛:已应用于腾讯的多个业务场景,如腾讯地图的 3D 车标重建和自定义 3D 导航车标功能等,显著提升了效率和创作自由。
  • 行业影响:为游戏开发、影视制作、虚拟现实(VR)等领域提供了强大的工具,促进了 AI 生成 3D 内容的创新和应用。

应用场景

  • 游戏开发:生成高质量的游戏角色、道具和建筑等 3D 资产,大幅提升游戏开发效率。
  • 影视动画:为创作者自动生成 3D 影视角色及动作效果,辅助完成动画创作。
  • 电商广告:根据广告创意主题生成 3D 商品,实现互动特效,提升广告内容创意。
  • 虚拟现实(VR)/增强现实(AR):生成逼真的 3D 虚拟环境元素及互动内容,增强沉浸式体验。
腾讯混元3D

开源信息

腾讯混元3D 生成大模型 Hunyuan3D-1.0 已于 11 月 5 日正式开源。该模型是业界首个同时支持文字、图像生成 3D 的开源大模型,提供轻量版和标准版两种选择,为开发者提供更多的创作机会。

关于腾讯混元3D特别声明

本站新媒派提供的腾讯混元3D内容都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由新媒派实际控制,在2024年11月16日 上午9:00收录时,该网页上的内容,都属于合规合法,后期网页的内容如有出现违规,可以直接联系网站管理员进行删除,新媒派不承担任何责任。

与腾讯混元3D相关工具

Mini-Gemini

Mini-Gemini

Mini-Gemini是一个简单而有效的框架,用于增强多模态视觉语言模型(VLMs),由中国香港中文大学和 SmartMore 的研究人员共同推出。Mini-Gemini支持一系列密集和MoE大型语言模型(LLMs),从2B到34B。为了增强视觉token,该框架建议在不增加视觉token数量的情况下,利用额外的视觉编码器进行高分辨率细化。同时,Mini-Gemini还构建了一个高质量的数据集,以促进精确的图像理解和基于推理的生成,从而扩大当前VLM的操作范围。
知海图AI

知海图AI

知海图AI是知乎与面壁智能合作开发的中文大模型,于2023年4月13日开始内测。它的主要功能是对知乎热榜上的问题回答进行要素抽取、观点梳理和内容聚合,以便用户能够更快、更全面地了解知友们讨论的热点与焦点。知海图AI在特定场景中的表现与GPT-4相当,显示出强大的语言理解和内容总结能力。此外,知海图AI的发布也标志着知乎在大语言模型领域的进一步布局,旨在赋能创作者、讨论场、信息获取等多个业务场景。
Waver 1.0

Waver 1.0

Waver 1.0是 FoundationVision 推出的下一代通用视频生成基础模型,基于 Rectified Flow Transformer 架构,统一支持文本生成视频(T2V)、图像生成视频(I2V)与文本生成图像(T2I)。最高可生成 1080p 高分辨率视频,分辨率、宽高比与时长(2–10 秒)灵活可调;在 T2V 与 I2V 榜单均跻身前三,画质、运动幅度与时间一致性媲美商用方案。支持可控风格与质量、APG 伪影优化及 Cascade Refiner 高效升采样,适用于影视创意、游戏动画、教育科研等多场景。

暂无评论

您必须登录才能参与评论!
立即登录
none
暂无评论...