三花AI 2024年10月29日
X Grok 推出视觉理解功能;Framer 交互式轨迹控制视频插帧;Flux 风格迁移升级;Dream Lab 排版设计新体验
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

本文介绍了Framer的交互式轨迹控制视频插帧技术、X Grok的视觉理解功能、Canvas的Dream Lab AI排版设计新体验以及Flux风格迁移的升级。这些技术各有特点,部分处于特定阶段或有一定限制。

🎬Framer是一种视频插帧技术,用户通过交互式点进行轨迹控制,输入起始帧和结束帧并绘制运动轨迹,AI自动补帧,目前处于期货开源阶段,类似需求可看ToonCrafter。

👀X Grok推出视觉理解功能,用户可上传图片进行对话,但该功能仅限X的Premium订阅用户,且官方发布信息少,未看到相关基准测试,似乎不如ChatGPT。

🖼Canvas发布Dream Lab功能,利用AI技术生成图片并融入排版创作,该功能仅对部分用户开放,免费用户最多使用20次,还一并发布了其他功能。

🎨Flux风格迁移升级,XLabs-AI推出的flux-ip-adapter-v2支持512和1024分辨率的风格迁移,可在ComfyUI中使用,v1版本效果一般,期待v2更好。

原创 小茸茸 2024-10-29 09:17 重庆

Framer:交互式轨迹控制视频插帧技术;X Grok 推出视觉理解功能;Canvas 推出 Dream Lab:AI 排版设计新体验; Flux 风格迁移升级:XLabs-AI 发布 iadapter-v2

今天内容不多,也可以看看往期的相关内容哈。

Framer:交互式轨迹控制视频插帧技术

Framer[1] 是一种支持用户通过交互式点进行轨迹控制的视频插帧技术。用户只需输入起始帧和结束帧,然后绘制所需的运动轨迹,AI 便会自动完成补帧。目前,Framer 还处于期货开源阶段,不过你要有类似需求,可以先看看 ToonCrafter[2],它也是做插帧的,但不支持交互控制。

X Grok 推出视觉理解功能

Grok[3] 最近推出了视觉理解功能,用户现在可以上传图片进行对话,但这一功能目前仅限于 X 的 Premium 订阅用户。

Grok 官方发布这个功能就只有两句话,而且还没有看到相关的基准测试。不过,似乎不如 ChatGPT。

Canvas 推出 Dream Lab:AI 排版设计新体验

Canvas(国内为可画)发布了Dream Lab[4]功能,利用 AI 技术帮助用户生成图片,完美地将 AI 能力融入到排版创作中。

目前,该功能仅对部分用户开放,免费用户最多可以使用 20 次。除了生图功能外,Canvas 还一并发布了投票、AI 带壳插图、AI 白板总结以及 Magic Write 等功能。

Flux 风格迁移升级:XLabs-AI 发布 iadapter-v2

flux-ip-adapter-v2[5] 是 XLabs-AI 推出的最新版本,支持 512 和 1024 分辨率的风格迁移。支持直接在 ComfyUI 中使用。v1 版本反正效果一般,希望 v2 能好些。


如果你喜欢《一觉醒来 AI 界发生了什么》系列的话,请 关注点赞在看收藏分享 五连警告,这对我真的很重要

现在加入 AI 日报群,不会漏掉消息嗷

Reference

[1]

Framer GitHub 仓库: https://github.com/aim-uofa/Framer

[2]

ToonCrafter 插帧技术: https://sanhua.himrr.com/news/84a1c89d-072b-44dc-8f05-df59cf186aa4

[3]

Grok 官网: https://x.com/grok/status/1850808322074509434

[4]

Dream Lab 功能介绍: https://x.com/canva/status/1849854177373192383

[5]

XLabs-AI 推出的 flux-ip-adapter-v2: https://huggingface.co/XLabs-AI/flux-ip-adapter-v2


阅读原文

跳转微信打开

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Framer X Grok Canvas Flux
相关文章