猫眼影戏
 |
|
猫眼影戏
方中信
手机审查
猫眼影戏记者 张飙 报道Q8X2R7L1T4J5M9B6W3
编辑｜冷猫
大部分的高质量视频天生模子，都只能天生上限约15秒的视频 。清晰度提高之后，天生的视频时长还会再一次缩短 。
这就让实验AI视频创意的创作者们非？嗄樟 。要想实现创意，必需使用分段天生，连系首尾帧，不但操作起来很贫困，并且需要往返抽卡来包管画面的一致性 。
那么，限制视频天生时长的瓶颈在那里？
各人可能不知道的是，一段 60 秒、480p、24 帧/秒的视频，在模子内部会被拆解成凌驾 50 万个「潜在 token」
这些 token 就像一条极长的影象胶带，模子想要坚持剧情连贯、画面一致，就必需重新到尾生涯上下文影象 。但价钱是：算力直接爆炸，通俗显卡基础扛不住 。
这正是目今自回归视频天生模子的焦点矛盾 。一边是越长的上下文，画面越连贯；另一边是越长的上下文，盘算本钱越高 。
于是，研究者们不得不做出妥协：要么用滑动窗口切掉大部分历史，换取可运行的算力；要么对视频举行激进压缩，牺牲清晰度和细节 。
问题在于，这些压缩要领往往最先丢掉的，正是决议画面真实感与一致性的高频细节 。
也正是在这一逆境下，苏州大学校友，斯坦福大学博士，ControlNet 创作者张吕敏团队为此投入了研究提出了一种新的解决思绪，给出了专为长视频设计的影象压缩系统，在压缩的同时尽可能保存细腻视觉信息 。
论文问题：Pretraining Frame Preservation in Autoregressive Video Memory Compression论文链接：https://arxiv.org/abs/2512.23851v1
研究团队提出了一种神经网络结构，用于将长视频压缩为短上下文，并设计了一种显式的预训练目的，使模子能够在恣意时间位置保存单帧中的高频细节信息 。
基线模子可以将一段20 秒的视频压缩为约 5k 长度的上下文体现，同时支持从中随机检索单帧，并在感知质量上坚持优异的外观保真度
这种预训练模子可以直接微调为自回归视频模子的影象编码器（memory encoder），从而以较低的上下文本钱实现长历史影象建模，并且仅带来相对较小的保真度损失 。
该视频是使用完整历史上下文（不切割任何历史 。┲鹈胱曰毓樘焐 。20 多秒的历史被压缩为 ～ 5k 上下文长度，并由 RTX 4070 12GB 处置惩罚 。
全新的影象压缩架构
详细而言，研究团队接纳两阶段战略
首先，预训练一个专用的影象压缩模子，其目的是在恣意时间位置上尽可能保存高保真帧级细节信息 。
该预训练目的通过对从压缩历史中随机采样的帧最小化其特征距离来实现，从而确保模子在整个序列规模内都能稳健地编码细节信息 。
在网络结构设计上，提出了一种轻量级双路径架构：模子同时处置惩罚低区分率视频流和高区分率残差信息流，并通过将高区分率特征直接注入 Diffusion Transformer 的内部通道，绕过古板 VAE 所带来的信息瓶颈，从而进一步提升细节保真度 。
预训练影象压缩模子
影象压缩模子的预训练 。影象压缩模子需要将长视频（例如 20 秒）压缩成短上下文（例如长度为 5k） 。预训练的目的是在恣意历史时间位置检索具有高频细节的帧 。
该要领的焦点立异在于其预训练目的设计
研究团队视察到，权衡视频压缩机制保存上下文细节能力的一个合适的指标是其恣意时间位置高质量帧检索的能力 。关于高压缩率，完善检索变得不切现实，因此目的变为最大化恣意帧的检索质量 。
随后，研究团队将所选的清洁帧复制作为扩散模子的目的，使扩散系统能够在恣意时间位置重修目的帧 。该历程可体现为：
这种随机化选择机制有用避免模子通过仅编码易于会见的 。ɡ缡字』蚰┲ 。├础竿镀跞∏伞，从而迫使模子学习一种能够在整个时间序列规模内一连保存细节信息的体现方法 。
内存压缩模子的架构 。使用 3D 卷积、SiLU 和注重力机制来构建一个轻量级的神经网络结构，作为基准压缩模子 。
视频扩散模子的微调
微调自回归视频模子 。展示了最终自回归视频模子的微协调推理历程 。影象压缩模子的预训练在微调之前完成 。
由此获得的视频天生模子具备超长历史窗口（例如凌驾 20 秒）、极短的历史上下文长度（例如约 5k），并且对帧检索质量举行了显式优化 。
该扩散历程亦可凭证公式体现为：
实验效果
在实验中，研究团队使用 8 × H100 GPU 集群举行预训练，并使用 1 × H100s 或 A100s 举行 LoRAs 微调 。所有实验均在 HunyuanVideo和 Wan 系列的基础模子上举行 。
数据集由来自多个网站的约 500 万互联网视频组成 。其中约一半是竖屏短视频，其余为通俗横屏视频 。数据经由质量洗濯，然后使用 Gemini-2.5-flash VLM 对高质量部分举行字幕标注，剩余部分使用外地 VLM（如 QwenVL）举行处置惩罚 。测试集包括由 Gemini-2.5-pro 编写的 1000 个故事板提醒和 4096 个未在训练数据集中泛起过的视频 。
定性与定量评估
故事板上的定性效果 。通过从故事板中流式传输提醒来展示效果 。故事板是一组提醒，其中每个提醒涵盖一定命目的帧 。故事板可以由外部语言模子编写 。
在定性评估方面，如图所示，研究者证实晰模子能够处置惩罚多种多样的提醒和故事板，同时在角色、场景、物体和情节线方面坚持一致性 。
在定量评估方面，研究者们从 VBench、VBench2等平台引入了多个视频评估指标，并举行了一些修改 。
视频内容一致性的定量评测效果 。其中，Qwen 中的 「1p」 体现仅使用 1 张图像 作为图像模子输入 。由于部分要领保存严重伪影，因此未将其纳入人工 ELO 评分统计 。
如表所示，本文提出的要领在多个一致性指标上体现出合理的分数 。Wan+Qwen 组合在实例分数上似乎具有领先分数，这可能是由于图像模子不会显著改变或移动工具，从而阻止了 VLM 问答检测到的伪影 。本文的要领在工具一致性方面体现出有竞争力的分数 。别的，用户研究和 ELO 分数验证了本文提出的架构，证实它在压缩和质量之间实现了有用的权衡 。
消融实验
压缩结构的定量效果 。展示了使用差别消融压缩架构的数值测试 。
评测效果如表所示 。效果批注，本文要领在 PSNR、SSIM 等指标上取得了相对更优的性能 。别的，即便在 4×4×2 的较高压缩率条件下，该要领仍然能够有用坚持原始图像结构 。
压缩重修的视觉较量 。展示了使用差别可能的神经网络结构和种种压缩设置举行预训练后的重修效果 。
影象压缩模子预训练的影响 。展示了使用或未使用影象压缩模子预训练的效果 。输入是相同的 20 秒历史视频，在输出帧中可视化中心帧 。
除此以外，研究团队还在论文中讨论了差别神经网络架构设计之间的权衡取舍 。
更多信息，请参阅原论文 。
??时势1：Y3C.Top娩費看破解版最新版本
??01月08日,地市级媒体融合创新研讨会在广东云浮举行,
“可恨！”
,人人操免费公开 。??01月08日,成都千亩荷塘荷花盛开迎来观赏期,
我们应该看到，我镇所取得的效果照旧起源的，面临的压力很大，现在的形势是逆水行舟，不进则退，慢进也是退 。从全市规模看，虽然我镇的综合位次增添速率很快，与20xx年相比进了22 位，但有的经济指标排名还相当落伍，使命很是难题 。虽然县委县政府对我们的主要事情给予了肯定，在今年的经济事情聚会上，我镇十项事情受到了表扬，但现实上我们有些数字照旧不实的，比起人家来，尚有很大差别 。最具代表性的就是计生事情，人家不说，我们自己心理也十分清晰 。面临严肃的形势，全镇干部务须要坚持苏醒的头脑，坚持高昂的斗志，坚持扎实的作风 。
,欧美特黄视频,精品国产玖玖玖,91免费在线视屏 。??时势2：av在线大
??01月08日,波音任命一退役海军上将审查其商用飞机质量管理体系,
“石村 。”小不点脆声回应道 。
,啊 啊 啊 快 高,人妻沦陷2～婬辱の动漫,九九国产爱综合 。??01月08日,《营造学社之道》展览佛光寺站开展 纪念营造学社成立95周年,
小不点很坚决，直接俯冲了下来，如一头神禽幼鸟，展翅击长空，此后极速下降，砰的一声踏在了祭灵的头上 。
,中文字字幕在线一区,黄色网站AA十片,18 免费下载视频 。??时势3：小烧货几天没弄了这么多水了知乎
??01月08日,“梦想”号国际邮轮以三亚为母港首航,
这一刻，四十二颗兽牙一起悬浮，全都发出璀璨的光线，相相互连，像是化成了一件战衣，披在了狈风的身上 。
,pornhub欧美,日奈本子,欧美503com 。??01月08日,“五一”假期 江西吉州窑景区传统非遗文化盛宴引客来,
这些天，小不点如痴如醉，逐日都在听讲，研读骨书，小脸上挂着开心的笑容，大眼都快眯成了月牙状 。
,区欧美性爱,国产精品国产三级在线专,79AV成人无码 。??时势4：亚洲操逼视频a
??01月08日,如何巩固经济向好势头？财政部称将重点从六方面持续发力,
惋惜，未能奏效 。石昊祭宝术，远古凶禽张开了那恐怖的巨口，竟然一口将那雷禽吞了下去，直接从基础上瓦解 。
,免费黄色视频村妇,陈雅伦与黑人床战3次,日韩欧美国产图片综合网 。??01月08日,陆军某新兵团实施连贯考核强化新战士练为战意识,
第一，要进一步增强头脑政治建设 。 要强化党性磨炼 。 党委办公室姓党，讲政治、有党性、可靠是党委办公室第一位的要求，这是党委办公室的特殊职位和作用所决议的 。办公室每一名事情职员都必需讲政治、讲党性，要有与党中央、省委、市委在政治上坚持高度一致的自觉性和坚定性 。同时还要有创立性地贯彻执行党的蹊径目的政策的能力和水平，不可只当“收发室”和“转运站” 。这一政治“底气”来自坚实的马克思主义理论功底，来自科学的天下观和要领论，来自辩证的头脑方法和敏锐的洞察力，来自深挚的党性修养 。要常修为政之德 。修德当以诚为本 。忠实守信是为人办事的基本品德要求 。俗话说得好“巧伪不如拙诚” 。建设诚信社会、诚信政府，党办系统要施展楷模作用，起劲提倡并践行说老真话、当忠实人、办忠实事 。要增强律己贡献 。从事办公室事情的同志要有一种强烈的责恣意识、贡献精神 。要有面临难题，挺身而上的继续;面临危害，绝不退缩的勇气;面临名利，不争不抢的品质;面临清苦，快乐贡献的境界 。人们形容办公室主任是“事情上的忙人、经济上的穷人、生涯上的苦人、政治上的‘红人’、家庭里的‘罪人’” 。从事党委办公室事情，就是要守得住清贫、耐得住寥寂、经得起磨练，就是要爱岗敬业、公而忘私、任劳任怨，“见欲而止为德” 。能够顶住诱惑是一种苏醒，善于顶住诱惑是一种智慧 。不为名累，不为利诱，恬淡名利，清静致远，只有这样，才华时刻坚持优异的精神状态，才华真正做到勤政廉政、优政善政 。
,国产三级电影网,欧美日韩偷拍视频网,羞羞视频在线免费 。责编：乔以钢
审核：米克斯
责编：廖玉元
Copyright (C) 2001- Dzwww 鲁ICP备09023866号-1
