每天花 1 分钟时间,获取精选的前沿 AI 信息。
内容涵盖但不限于前沿 AI 资讯、AI 工具、AI 绘画、开源项目和学习教程等等。
关注 AI 日报,紧跟 AI 潮流,希望对你有所帮助。对于重要信息,会独立发帖进行详细介绍。
以下是 8 月 12 日的最新 AI 信息。
前沿技术
1、一份医学多模态数据集 MedTrinity-25M。
包含 2500 万张医学影像及详细注释,可用于训练医疗多模态大模型。
GitHub:https://github.com/UCSC-VLAA/MedTrinity-25M
下载地址:https://huggingface.co/datasets/UCSC-VLAA/MedTrinity-25M
比较可惜,目前只有英文数据,暂时没有中文。
2、来自 Adobe 发布的一项视频融合手工绘制涂鸦技术: Video Doodles。
该项技术能够将视频内容与手工绘制的动画相结合,并且能跟踪场景中的静态或动态对象,使手绘动画与视频内容更加自然融合。
GitHub:https://github.com/adobe-research/VideoDoodles
详细介绍:https://em-yu.github.io/research/videodoodles/
用它来制作一些有趣的视频就简单多了,如下图,给一个鸭子加上手拿着一杯咖啡一路跌跌撞撞。
AI 绘画
1、Flux 官方放出了一份 LoRA 合集。
包括了写实、动漫、艺术、风景、迪士尼等风格的 LoRA。
地址:https://huggingface.co/XLabs-AI/flux-lora-collection
如果你想训练 Flux LoRA,可以看下这份教程,要求至少 24GB 的显存。
教程:https://github.com/ostris/ai-toolkit
开源项目
1、又一款视频剪辑 AI 开源神器 Clapper。
与传统视频剪辑工具不同,它集成了 StabilityAI、ElevenLabs、Real-ESRGAN、ChatGPT 等等各种类型的 AI。
一键生成图像、视频、语音、音乐等各种视频剪辑需要的素材,然后再进行二次剪辑。
GitHub:https://github.com/jbilcke-hf/clapper
让你能够通过互动、迭代且直观的方式用 AI 制作视频,无需其他外部工具和视频剪辑技能。