v5.823 最新版
v1.661 最新版
v2.396.4880.799198 安卓免費版
v6.526 最新版
v6.158.5609 安卓版
v3.467.9953.171401 IOS版
v3.388 安卓免費版
v9.431.9583 安卓漢化版
v5.797.9783.207430 安卓漢化版
v5.186.4947.616892 安卓最新版
v8.323.8027.882773 PC版
v5.229 PC版
v5.837.6992.475703 安卓免費版
v7.476.9218 PC版
v1.247.3744 IOS版
v2.175.7492 安卓漢化版
v3.839.309 最新版
v1.461 安卓最新版
v5.52.8971 安卓免費版
v9.973 最新版
v7.62 安卓最新版
v9.962.3250.8237 IOS版
v2.939 安卓漢化版
v9.386.4037.371844 安卓免費版
v2.538.8838.307222 IOS版
v2.71.1948.548746 IOS版
v8.608.6800.557814 PC版
v6.873 安卓版
v4.362.3191 最新版
v3.541 安卓最新版
v3.952 安卓最新版
v2.174.758.199052 最新版
v8.177 安卓漢化版
v3.608 安卓最新版
v2.118 安卓免費版
v1.857.7617 安卓最新版
v2.329.7188 最新版
v2.348.9024.643353 安卓漢化版
v6.313.8235.813471 PC版
v4.511.6758.802396 IOS版
v7.414.3332.24935 最新版
v5.202.7205.989309 安卓版
v9.496.8633.608241 最新版
v4.145.2791 PC版
v4.585 安卓漢化版
v2.642.7479.362661 安卓免費版
v1.228.7959.381493 IOS版
v5.793.3766.41572 安卓免費版
v7.333.9411.829821 安卓免費版
v5.22 IOS版
v8.29.3785.269296 IOS版
v1.889.8607.344173 安卓版
v3.215.5470.790812 安卓免費版
v3.691.6944.523090 安卓版
v9.539.8743.638109 安卓免費版
v2.134.6925 安卓免費版
v2.18.5366.290375 安卓版
v4.78.7601.210425 IOS版
v2.921 最新版
v3.814.2063.285005 安卓最新版
v9.60.4601.326436 安卓最新版
v2.260.9319 最新版
v4.596 最新版
v5.777 安卓漢化版
v2.791.8452.239810 安卓免費版
v7.161.4804.649109 安卓免費版
v8.295.8771.325925 IOS版
v5.252 PC版
v1.663.3850.773139 安卓免費版
v5.446.5753 安卓漢化版
v6.445 安卓版
v6.295.1819.573544 安卓最新版
v2.155.3908 IOS版
v1.872 安卓版
v1.814 安卓免費版
v5.319.4356 安卓免費版
v3.601 安卓免費版
v5.739 IOS版
v6.693.2972 安卓版
v1.939 安卓免費版
黄色网站精品一二三
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
相关版本
多平台下载
审查所有0条谈论>网友谈论
欧美福利色
2020国产精品久久久久久
兰陵王抓住小乔的胸襟
A V视频
久草网
色欧美操B视频
午夜精品久久久999
国产操逼片
拔萝卜高潮动漫观看完整版大结局
免费AAAA级黄片
国产三级三级三级全黄a 级
1024手机看片国産
av网站在线免费观看国产
日本少妇 喂奶漫画
日韩人成视频
人人操人人玩人人干
yw1 9 3.com
99国产精品自在自在久久
色五月亚洲综合天天综合
日本下部隐私网站
黄色视频亚洲无码在线观看
少妇我被躁爽到高潮A片小雪
色欲精品在线
欧美综合婷婷,欧美综合五月,开心亚洲五月丁香五月婷婷六月亚洲…