今日精选的前沿 AI 信息,欢迎阅读 👇
💻 英伟达推出 Edify 3D 模型,可通过文本或图像直接生成高质量 3D 场景,将为游戏、影视等领域带来重大突破。
🤖 SAMURAI 基于 SAM 2 开发无需训练的高精度视频目标追踪模型,即使在遮挡和快速移动场景下也能保持准确。
🎬 一款可免费体验的 AI 工具 ai-video-composer,支持多媒体素材输入并用提示词自动生成视频。
前沿技术
1、英伟达发布可直接生成 3D 场景的模型:Edify 3D。
通过文本提示或参考图像,快速生成可扩展的高质量 3D 资产,具有细致的 UV 贴图、4K 纹理和 PBR 材质。
详细介绍:https://research.nvidia.com/labs/dir/edify-3d/
对于游戏设计、虚拟与现实、电影制作等行业来说,这无疑是带来一个巨大的好消息。
2、一个基于 SAM 2 增强的视频对象分割模型:SAMURAI。
无需训练或微调即可实现高精确的视频目标对象追踪,包括快速移动、复杂场景,即使是出现遮挡也可以追踪。
详细介绍:https://yangchris11.github.io/samurai/
GitHub:https://github.com/yangchris11/samurai
从给出来演示视频来看确实很牛,目前代码及模型已经开源,有需求的值得一试。
AI 工具
1、分享一个免费的 AI 自动剪辑视频工具:ai-video-composer。
支持一次上传多段视频、图片或音频,通过提示词控制剪辑完成一整段完整的视频。
在线体验:https://huggingface.co/spaces/huggingface-projects/ai-video-composer
不过目前实现有点粗糙,体验不是很好,感兴趣的可以看看。