(3分钟详细教程)亚洲综合色一区二区三区小说苹果版v16.78.9.84.60.78.42-2265安卓网

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

ControlNet作者张吕敏最新论文:长视频也能实现超短上下文

2026-01-06 19:10:36
泉源:

猫眼影戏

作者:

蒋滨建

手机审查

  猫眼影戏记者 姜仁浩 报道Q8X2R7L1T4J5M9B6W3

编辑|冷猫

大部分的高质量视频天生模子 ,都只能天生上限约15秒的视频 。清晰度提高之后 ,天生的视频时长还会再一次缩短 。

这就让实验AI视频创意的创作者们非?嗄樟 。要想实现创意 ,必需使用分段天生 ,连系首尾帧 ,不但操作起来很贫困 ,并且需要往返抽卡来包管画面的一致性 。

那么 ,限制视频天生时长的瓶颈在那里?

各人可能不知道的是 ,一段 60 秒、480p、24 帧/秒的视频 ,在模子内部会被拆解成凌驾 50 万个「潜在 token」

这些 token 就像一条极长的影象胶带 ,模子想要坚持剧情连贯、画面一致 ,就必需重新到尾生涯上下文影象 。但价钱是:算力直接爆炸 ,通俗显卡基础扛不住 。

这正是目今自回归视频天生模子的焦点矛盾 。一边是越长的上下文 ,画面越连贯;另一边是越长的上下文 ,盘算本钱越高 。

于是 ,研究者们不得不做出妥协:要么用滑动窗口切掉大部分历史 ,换取可运行的算力;要么对视频举行激进压缩 ,牺牲清晰度和细节 。

问题在于 ,这些压缩要领往往最先丢掉的 ,正是决议画面真实感与一致性的高频细节 。

也正是在这一逆境下 ,苏州大学校友 ,斯坦福大学博士 ,ControlNet 创作者张吕敏团队为此投入了研究提出了一种新的解决思绪 ,给出了专为长视频设计的影象压缩系统 ,在压缩的同时尽可能保存细腻视觉信息 。

论文问题:Pretraining Frame Preservation in Autoregressive Video Memory Compression论文链接:https://arxiv.org/abs/2512.23851v1

研究团队提出了一种神经网络结构 ,用于将长视频压缩为短上下文 ,并设计了一种显式的预训练目的 ,使模子能够在恣意时间位置保存单帧中的高频细节信息 。

基线模子可以将一段20 秒的视频压缩为约 5k 长度的上下文体现 ,同时支持从中随机检索单帧 ,并在感知质量上坚持优异的外观保真度

这种预训练模子可以直接微调为自回归视频模子的影象编码器(memory encoder) ,从而以较低的上下文本钱实现长历史影象建模 ,并且仅带来相对较小的保真度损失 。

该视频是使用完整历史上下文(不切割任何历史 。┲鹈胱曰毓樘焐 。20 多秒的历史被压缩为 ~ 5k 上下文长度 ,并由 RTX 4070 12GB 处置惩罚 。

全新的影象压缩架构

详细而言 ,研究团队接纳两阶段战略

首先 ,预训练一个专用的影象压缩模子 ,其目的是在恣意时间位置上尽可能保存高保真帧级细节信息 。

该预训练目的通过对从压缩历史中随机采样的帧最小化其特征距离来实现 ,从而确保模子在整个序列规模内都能稳健地编码细节信息 。

在网络结构设计上 ,提出了一种轻量级双路径架构:模子同时处置惩罚低区分率视频流和高区分率残差信息流 ,并通过将高区分率特征直接注入 Diffusion Transformer 的内部通道 ,绕过古板 VAE 所带来的信息瓶颈 ,从而进一步提升细节保真度 。

预训练影象压缩模子

影象压缩模子的预训练 。影象压缩模子需要将长视频(例如 20 秒)压缩成短上下文(例如长度为 5k) 。预训练的目的是在恣意历史时间位置检索具有高频细节的帧 。

该要领的焦点立异在于其预训练目的设计

研究团队视察到 ,权衡视频压缩机制保存上下文细节能力的一个合适的指标是其恣意时间位置高质量帧检索的能力 。关于高压缩率 ,完善检索变得不切现实 ,因此目的变为最大化恣意帧的检索质量 。

随后 ,研究团队将所选的清洁帧复制作为扩散模子的目的 ,使扩散系统能够在恣意时间位置重修目的帧 。该历程可体现为:

这种随机化选择机制有用避免模子通过仅编码易于会见的 。ɡ缡字』蚰┲ 。├础竿镀跞∏伞 ,从而迫使模子学习一种能够在整个时间序列规模内一连保存细节信息的体现方法 。

内存压缩模子的架构 。使用 3D 卷积、SiLU 和注重力机制来构建一个轻量级的神经网络结构 ,作为基准压缩模子 。

视频扩散模子的微调

微调自回归视频模子 。展示了最终自回归视频模子的微协调推理历程 。影象压缩模子的预训练在微调之前完成 。

由此获得的视频天生模子具备超长历史窗口(例如凌驾 20 秒)、极短的历史上下文长度(例如约 5k) ,并且对帧检索质量举行了显式优化 。

该扩散历程亦可凭证公式体现为:

实验效果

在实验中 ,研究团队使用 8 × H100 GPU 集群举行预训练 ,并使用 1 × H100s 或 A100s 举行 LoRAs 微调 。所有实验均在 HunyuanVideo和 Wan 系列的基础模子上举行 。

数据集由来自多个网站的约 500 万互联网视频组成 。其中约一半是竖屏短视频 ,其余为通俗横屏视频 。数据经由质量洗濯 ,然后使用 Gemini-2.5-flash VLM 对高质量部分举行字幕标注 ,剩余部分使用外地 VLM(如 QwenVL)举行处置惩罚 。测试集包括由 Gemini-2.5-pro 编写的 1000 个故事板提醒和 4096 个未在训练数据集中泛起过的视频 。

定性与定量评估

故事板上的定性效果 。通过从故事板中流式传输提醒来展示效果 。故事板是一组提醒 ,其中每个提醒涵盖一定命目的帧 。故事板可以由外部语言模子编写 。

在定性评估方面 ,如图所示 ,研究者证实晰模子能够处置惩罚多种多样的提醒和故事板 ,同时在角色、场景、物体和情节线方面坚持一致性 。

在定量评估方面 ,研究者们从 VBench、VBench2等平台引入了多个视频评估指标 ,并举行了一些修改 。

视频内容一致性的定量评测效果 。其中 ,Qwen 中的 「1p」 体现仅使用 1 张图像 作为图像模子输入 。由于部分要领保存严重伪影 ,因此未将其纳入人工 ELO 评分统计 。

如表所示 ,本文提出的要领在多个一致性指标上体现出合理的分数 。Wan+Qwen 组合在实例分数上似乎具有领先分数 ,这可能是由于图像模子不会显著改变或移动工具 ,从而阻止了 VLM 问答检测到的伪影 。本文的要领在工具一致性方面体现出有竞争力的分数 。别的 ,用户研究和 ELO 分数验证了本文提出的架构 ,证实它在压缩和质量之间实现了有用的权衡 。

消融实验

压缩结构的定量效果 。展示了使用差别消融压缩架构的数值测试 。

评测效果如表所示 。效果批注 ,本文要领在 PSNR、SSIM 等指标上取得了相对更优的性能 。别的 ,即便在 4×4×2 的较高压缩率条件下 ,该要领仍然能够有用坚持原始图像结构 。

压缩重修的视觉较量 。展示了使用差别可能的神经网络结构和种种压缩设置举行预训练后的重修效果 。

影象压缩模子预训练的影响 。展示了使用或未使用影象压缩模子预训练的效果 。输入是相同的 20 秒历史视频 ,在输出帧中可视化中心帧 。

除此以外 ,研究团队还在论文中讨论了差别神经网络架构设计之间的权衡取舍 。

更多信息 ,请参阅原论文 。

??时势1:理论黄色网站在线观看

??01月06日,郑钦文首夺WTA500东京站女单冠军,

  上一次独角兽都隐在周围的山林中 ,他们没有见到 ,这次被看了个正着 ,凶寇皆眯缝着眼睛 ,无比的兴奋与激动 。

,日韩精品一区二区毛片无码 。

??01月06日,中国首张蛋白粉备案凭证发放,

  “什么 ,真是欺人太甚 ,我们一再容忍 ,将我们的好性情当成懦弱了吗?!”石林虎咆哮 。

,精东传媒刘玥吞精,日韩精品无码性爱视频,久久精品无码一级毛片潮喷 。

??时势2:操哭视频

??01月06日,福建平潭获得2025年第三十一届亚洲棒球锦标赛举办权,

  这批人刚进去 ,又一批人就到了 ,阵容更惊人 ,那是一条蛟在开路 ,长有二十几米 ,全身鳞片熠熠生辉 ,并且生有一对巨翅 ,横空而过 ,在地上投下大片的阴影 ,上面坐着一名中年人 ,尚有三个孩子 ,一个五六岁 ,一个八九岁 ,尚有一个十一二岁 ,皆头角峥嵘 。

,www深夜成人 网站下载麻豆,亚洲HEYZO专区无码综合明星,尼尔机械纪元2b怀孕生孩子 。

??01月06日,2023年青海省PM2.5平均浓度同比下降5%,

裁判要旨

最高法案例:原告在行政程序中拒不提供证据的效果

《******关于行政诉讼证据若干问题的划定》第六条划定:“原告可以提供证实被诉详细行政行为违法的证据 。原告提供的证据不建设的 ,难免去被告对被诉详细行政行为正当性的举证责任 。”因此 ,若原告在行政诉讼中新提交的证据属于确有正当理由且这些证据确实足以对行政行为的正当性造成实质性影响时 ,则证据可以获得采信并作为人民法院作出裁判的依据 。其次 ,行政诉讼坚持正当性审查的原则 ,同时为阻止铺张行政及司法资源 ,《******关于行政诉讼证据若干问题的划定》第五十九条划定:“被告在行政程序中遵照法定程序要求原告提供证据 ,原告依法应当提供而拒不提供 ,在诉讼程序中提供的证据 ,人民法院一样平常不予接纳 。”在行政机关作出行政行为的历程中 ,若是原告保存居心不提交有关证据或者懈怠搜集证据的情形 ,则人民法院关于原告在行政诉讼中新提交的证据不应予以采信 。最后 ,关于《******关于行政诉讼证据若干问题的划定》第六十条划定的“不可作为认定被诉详细行政行为正当依据”的证据 ,人民法院不可予以采信 。原告或者第三人在诉讼历程中提供的、被告在行政程序中未作为详细行政行为依据的证据属于不可作为认定被诉详细行政行为正当依据的证据情形之一 。

裁判文书

中华人民共和国******

行 政 裁 定 书

(2019)最高法行申4324号

再审申请人(一审原告、二审上诉人):肖淑春 ,女 ,1945年3月16日出生 ,汉族 。

委托诉讼署理人:肖金山(系肖淑春之子) ,男 ,1968年11月15日出生 ,汉族 。

委托诉讼署理人:刘飘 ,辽宁襄平状师事务所状师 。

被申请人(一审被告、二审被上诉人):辽宁省辽阳市人民政府 。住所地:辽宁省辽阳市文圣区新城路9号 。

法定代表人:王一兵 ,该市人民政府市长 。

第三人:辽宁省辽阳市公安局雄伟区公循分局 。住所地:辽宁省辽阳市雄伟区向阳街十四号 。

法定代表人:龚立军 ,该公循分局局长 。

第三人:王虹 ,女 ,1972年4月8日出生 ,汉族 。

再审申请人肖淑春因诉辽宁省辽阳市人民政府(以下简称辽阳市政府)行政复议决议一案 ,不平辽宁省高级人民法院(以下简称二审法院)(2018)辽行终631号行政讯断 ,向本院申请再审 。本院受理后 ,依法由审讯员梁凤云、审讯员张艳、审讯员仲伟珩组成合议庭 ,对本案举行了审查 ,现已审查终结 。

肖淑春不平辽阳市政府作出的辽市行复决字〔2017〕5号行政复议决议(以下简称5号复议决议) ,向辽宁省辽阳市中级人民法院(以下简称一审法院)提起诉讼 ,请求作废5号复议决议 。

一审法院以为:《中华人民共和国行政复议法》第三条第三项划定 ,遵照本法推行行政复议职责的行政机关是行政复议机关 。行政复议机关认真法制事情的机构详细办理行政复议事项 ,推行审查申请行政复议的详细行政行为是否正当与适当 ,制订行政复议决议 。凭证此项划定 ,行政复议机关对行政行为的审查应当是周全审查 ,不受申请人申请事实及理由的限制 。本案中 ,辽阳市政府在复议审查历程中 ,以为雄伟分局仅依据与肖淑春有利害关系的两位证人及肖淑春自己的询问笔萍 ,在没有其他证据佐证的情形下 ,作来由罚决议 ,证据不充分 ,并无不当 。关于肖淑春提出辽阳市政府作出的5号复议决议与其之前针对庞春勇的处分决议作出的辽市行复决字〔2016〕130号《行政复议决议》(以下简称130号复议决议)相矛盾的问题 ,因130号复议决议审查的是庞春勇的处分决议是否正当的问题 ,130号复议决议经审理查明部分准确与否并不可作为否定5号复议决议正当性问题的依据 。一审法院于2017年12月4日作出(2017)辽10行初13号行政讯断:驳回肖淑春的诉讼请求 。

肖淑春不平 ,提起上诉 ,请求作废一审讯断 。二审法院查明的事实与一审法院认定的事实一致 。

二审法院以为:本案的争议焦点是王虹是否殴打肖淑春 ,并造成其受伤 。本案中 ,雄伟分局对王虹作出行政处分的主要事实依据是事发时在场的肖淑春自己以及其女儿肖春艳和女婿庞春勇的陈述 。复议机关以为仅依据与肖淑春及与其有利害关系的两位证人的陈述 ,在没有其他证据佐证 ,且三人陈述亦纷歧致的情形下 ,认定处分决议证据不充分 ,并无不当 。关于肖淑春提出的其在诉讼阶段提交了事发当天的急诊病志和DR诊断报告单 ,证实其当天受伤事实的上诉主张 。肖淑春在事发当天未向作出原行政处分决议的公安机关提交 ,在行政复议阶段也未向复议机关提交 ,故复议机关在其时的证据条件下作出的复议决议并无不当 。其次 ,肖淑春所提交的急诊病志虽诊断为左肩外伤 ,但体检所见内容为“左肩外侧触痛 ,左肩枢纽外展活动受限”等系其自述内容 ,且DR诊断报告单诊断意见为:左肩骨质未见确切骨折线 。该两份证据难以认定王虹对肖淑春举行殴打 ,并造成其受伤 。故对肖淑春的该项上诉主张 ,不予支持 。关于肖淑春提出雄伟分局对王虹作来由罚决议后 ,王虹并没有提出行政复媾和行政诉讼 ,证实其对殴打肖淑春的事实没有异议的上诉主张 。王虹对行政处分是否提出行政复媾和行政诉讼 ,并不可成为证实其殴打肖淑春的证据 ,且王虹在诉讼阶段也提出其并未殴打肖淑春 ,故对肖淑春的该项上诉主张 ,不予支持 。关于肖淑春提出的一审中的证人证言并非孤证的上诉主张 。报警纪录、被害人陈述、急诊病志和DR诊断报告单的内容均系肖淑春自述 ,并不可证实肖淑春被王虹殴打受伤的事实 ,故一审认定肖淑春之女肖春艳的证人证言不可作为认定行政复议决议是否正当的依据并无不当 。关于肖淑春提出的辽阳市政府作出的130号复议决议系已经依法证实的事实 ,可以作为认定王虹殴打其证据的上诉主张 。王虹是否殴打肖淑春不是130号复议决议审查的主要事实 ,该复议决议中表述的内容不可直接作为认定王虹殴打肖淑春的直接证据 ,故对肖淑春的该项上诉主张 ,不予支持 。据此 ,二审法院于2018年12月25日作出(2018)辽行终631号讯断:驳回上诉 ,维持一审讯断 。

肖淑春仍不平 ,向本院申请再审 ,请求:作废二审讯断 ,判令辽阳市政府重新作出复议决议 。主要的事实与理由为:一、二审认定事实不清 。证人证言、报警纪录、急诊病志、DR诊断报告单、当事人陈述以及警员出警等证据 ,王虹未提出行政复媾和行政诉讼等 ,能够证实王虹殴打自己的事实 ,且该事实经辽阳市政府作出的130号复议决议予以认定 。

本院以为:本案的争议焦点为 ,肖淑春在诉讼中提交的证据应否采信及5号复议决议是否违反榨取倒运变换原则等问题 。

关于肖淑春在诉讼阶段提交的事发当天的急诊病志、DR诊断报告单等应否采信问题 。首先 ,《******关于行政诉讼证据若干问题的划定》第六条划定:“原告可以提供证实被诉详细行政行为违法的证据 。原告提供的证据不建设的 ,难免去被告对被诉详细行政行为正当性的举证责任 。”因此 ,若原告在行政诉讼中新提交的证据属于确有正当理由且这些证据确实足以对行政行为的正当性造成实质性影响时 ,则证据可以获得采信并作为人民法院作出裁判的依据 。其次 ,行政诉讼坚持正当性审查的原则 ,同时为阻止铺张行政及司法资源 ,《******关于行政诉讼证据若干问题的划定》第五十九条划定:“被告在行政程序中遵照法定程序要求原告提供证据 ,原告依法应当提供而拒不提供 ,在诉讼程序中提供的证据 ,人民法院一样平常不予接纳 。”在行政机关作出行政行为的历程中 ,若是原告保存居心不提交有关证据或者懈怠搜集证据的情形 ,则人民法院关于原告在行政诉讼中新提交的证据不应予以采信 。最后 ,关于《******关于行政诉讼证据若干问题的划定》第六十条划定的“不可作为认定被诉详细行政行为正当依据”的证据 ,人民法院不可予以采信 。原告或者第三人在诉讼历程中提供的、被告在行政程序中未作为详细行政行为依据的证据属于不可作为认定被诉详细行政行为正当依据的证据情形之一 。本案中 ,就王虹是否殴打肖淑春这一事实而言 ,肖淑春认可雄伟分局作出的处分决议中的认定 ,即主张王虹殴打了肖淑春 ,肖淑春在诉讼中提交新的证据也是为了证实此事实 。鉴于雄伟分局在行政程序中并未将肖淑春提交的事发当天的急诊病志、DR诊断报告单等作为处分决议的依据 ,肖淑春在行政复议阶段也未向复议机关提交 ,因此以上证据不可作为认定雄伟分局作出的处分决议认定事实清晰的依据 。

关于5号复议决议认定雄伟分局作出的处分决议保存事实不清、证据缺乏是否准确的问题 。雄伟分局作出的处分决议载明其作出的依据是对王虹、庞春勇的询问笔萍及证人证言等证据 。关于处分决议的作出依据是否充分问题 ,首先 ,一审法院审查后已认定作为处分依据的证人证言系与肖淑春有利害关系的两位证人出具 。其次 ,5号复议决议载明雄伟分局在复议程序中自述:庞春勇、肖春艳和肖淑春三人对现场情形的陈述纷歧致;出警当日 ,民警在询问详细情形的历程中 ,并未有人提出肖淑春被打一事 。最后 ,王虹在复议程序中自述:其其时怀有身孕 ,未殴打肖淑春;其被打后实时打110报警并入院治疗 。综合以上事实 ,辽阳市政府以为 ,在王虹不认可殴打肖淑春的情形下 ,雄伟分局仅依据其在处分决议中载明的依据作出王虹用高跟鞋和石头扔肖淑春和肖春艳的认定 ,并据此作出给予王虹拘留八日并?钊僭拇Ψ志鲆樗谰莸氖率挡磺濉⒅ぞ萑狈 ,并无显着不当 。别的 ,肖淑春提出的辽阳市政府作出的130号复议决议可以证实王虹保存殴打行为等问题 ,一、二审法院论理并无显着不当 ,本院予以认可 。

关于辽阳市政府在王虹未申请行政复议的情形下能否作废处分决议问题 。《中华人民共和国行政复议法实验条例》第五十一条划定:“行政复议机关在申请人的行政复议请求规模内 ,不得作出对申请人更为倒运的行政复议决议 。”该条划定了行政复议榨取倒运变换原则 。由于复议申请人申请行政复议 ,是为了作废对己倒运的行政行为 。若是行政复议机关在审查行政行为是否正当或适当的历程中 ,作出对复议申请人较原裁决更为倒运的决议 ,那么就会违反复议申请人提起行政救援的本意 。行政复议榨取倒运变换原则体现了“申辩不加重”的本意 ,即要求行政复议机关不得因当事人申辩而加重处分 。可是行政复议榨取倒运变换原则的适用也保存破例情形 。在行政处分案件中 ,扫除榨取倒运变换原则适用包括但不限于以下情形:一是被损害人及被处分人同为复议申请人 。此类情形中被损害人、被处分人会昭示请求作废处分决议;二是被损害人或被处分人申请了行政复议 ,另一方作为第三人在复议程序中保存有意识的默示申请作废处分决议的行为 。本案中 ,肖淑春因不平雄伟分局对王虹所作的处分决议而申请复议 ,被处分人王虹系复议程序中的第三人 。王虹虽然并非复议申请人 ,但其在复议程序中明确主张未殴打肖淑春、肖淑春保存作伪证等情形 ,因此可以认定王虹并不认可雄伟分局作出的处分决议 ,且已提出申辩 ,切合默示申请作废处分决议的要件 。在此情形下 ,辽阳市政府经审理后 ,决议作废处分决议 ,并未违反榨取倒运变换原则 。

综上 ,肖淑春的再审申请不切合《中华人民共和国行政诉讼法》第九十一条划定的情形 。本院遵照《******关于适用〈中华人民共和国行政诉讼法〉的诠释》第一百一十六条第二款之划定 ,裁定如下:

驳回再审申请人肖淑春的再审申请 。

审讯长  梁凤云

审讯员  张 艳

审讯员  仲伟珩

二〇一九年十仲春二十四日

法官助理刘均博

书记员宫傲

,8x8x免费电影昆山,97超碰808,lls_app_2024_apk安装包 。

??时势3:620886路mooc

??01月06日,香港9月出口货值同比升4.7% 连升七个月,

  然而 ,仅仅一个照面罢了 ,恶魔猿就敲开了他们的脑壳 ,猛地一吸 ,脑浆没入它的口中 ,被吃了清洁 。

,毛片网站免费的,女人扒开让男人桶,成人嘿嘿嘿 。

??01月06日,联合国中国青少年环境大会在沪举行,

  雕熊口中发出哀鸣 ,但至死都没敢动一下 ,被那股滔天的凶气榨取的一动不可动 。

,最新6080午夜免费视频,性爱视频又大又爽,日韩福利一区 。

??时势4:熟女视频久久性爱视频欧美综合视频

??01月06日,宁夏农垦集团有限公司原党委书记张戈接受审查调查 ,

  孩子们咋舌 ,钦佩不已 。

,欧美日韩 一区 二区,欧美性爱B,朱竹清本子 。

??01月06日,香港义工联盟等团体召开会议分享中共二十届三中全会精神,

  小石昊睁大了眼睛 ,他知道 ,那可能就是他的怙恃 。

,国产激情 专区 在线,妓女影视 妓女视频 妓女网站,97总站免费超级碰视频 。

【王者荣耀2024赛季揭幕 选手、战队、赛制齐应“新”元素】

【农业农村部公示第五批全国新型农业经营主体典型案例拟推介名单】

责编:张莉莉

审核:王亚玲

责编:刘天成

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图