这个方法重要啊！生成一致性更好的长视频，解决长视频上下文难题！Test-Time Training 为解决当前 Transformer 架构依旧难以生成长达一分钟的视频（自注意力机制在处理长上下文时的低效所导致），研究提出了新的 Test-Time Training 层，其隐藏状态本身可以是神经网络，因此比传统层更具表现力，从而实现更具一致性、自然度和美感的长视频生成项目页（视频来自此）：

#长视频 #Test-Time Training #transformer #自注意力机制 #视频生成

相关新闻

Barret李靖

3小时前

Attention is all you need，顺着历史脉络去看 Transformer 自注意力机制的发展，还经历了Bag-of-Words、Word2vec、RNN、Attention 等概念的演进。《图解大模型》把 LLM 的内部原理，包括预训练、微调、语言模型的应用和优化等，一步步做了图解分析，写得挺不错👍

Gorden Sun

4小时前

一直想做这个，现在Sora可以直出

小互

7小时前

🚨OpenAI 发布全新多模态生成模型：Sora 2 这次不只是生成视频，还能同步生成语音、环境音，甚至把你“插入”视频当主角！模型亮点： - 支持多个镜头的连续生成 - 动作更物理真实、世界状态可控 - 真人Cameo登场，只需录一次就能随时穿越进任意场景 - 支持写实、动漫、电影等风格切换 - 新版 iOS App 已上线，支持 remix、个性化推荐、青少年保护等功能 👀

Gorden Sun

10小时前

差一点点就完美 #Sora2

Gorden Sun

11小时前

用上Sora 2了，Plus会员也能生成视频。这团体舞质量还挺高，就是画面很糊。进这个频道，左侧的Sora2话题，有人会分享邀请码，每个人可以生成1个，能邀请4个新人。让我想起了clubhouse。