首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《六月丁香婷婷香蕉久久》,《Q8X2R7L1T4J5M9B6W3》78w78w飞机
“免费人成网址在线观看”
91在线国产视频观看
……
01月09日
“yazhouhh”原来大熊猫的眼妆都不一样
↓↓↓
01月09日,织就千年风华 “90后”缂丝艺人“挑经显纬”间传承丝织技艺,va资源视频,久久亚洲欧美国产精品,AI裸绘app,欧美精品A视频
01月09日,“文明的足迹” 杨烨炘个展探讨中意文化碰撞下的艺术思考,小凑四叶交谊舞,激情片网站,麻豆AV在线高清免费播放,欧美日韩A片
01月09日,盘点后冬奥时代首个完整的冰雪旅游季,我要看亚洲老女人老妇人操逼,亚欧乱色熟女一区二区免费视频,国家一级黄色网站,久久久中文
01月09日|最高检:1-6月批准和决定逮捕各类犯罪嫌疑人36.7万人|爆乳在线播放|国产在线无码色视频|中国人与拘一级毛片|天天日天天干天天操天天爽
01月09日|宁夏头茬枸杞迎来采摘季|男人的 伸到女的|A片免费看一区二区三区免费网|欧美aa性爱品赏网在线播放|日本不卡一区
01月09日|涨价还不到一个月,特斯拉中国为何突然全系降价?|海角乱伦|91扒开内衣吃双乳|女同蕾丝一区二区三区|XX99精彩视频……
01月09日,广东专家创新乙肝治愈新策略 治愈率有望突破30%,亚洲日韩爱爱,中文字幕国产欧美日韩成年人看片,人人操一操,国产在线视频在线视
01月09日,巴基斯坦外交部宣布召回驻伊朗大使,▌麻酥酥▌西施玉足自慰2888,18岁以下禁止看的网站,小 伸入 视频麻豆,色偷偷91综合久久噜噜噜男男
01月09日|多家央企公告一季度“开门红”,战略性新兴产业投资加速|黄片人人操|羞羞视频免费网页入口|男女国产无套|免费一级A片在线观看播放视频国产
01月09日,(两会声音)任振鹤:甘肃不是落后的代名词,不甘落后也不能落后,自拍偷拍第,成年人性生活在线视频,让热在线观看,www.色色. com
01月09日,中美青年结束“山西行” 冀借交流共建“友谊之桥”,黄色视频在线播放视频大全网站大全网站大全网站大全网站,十八禁在线播放,双男主真人,综合网小说图片
01月09日,九部门:完善现代商贸流通体系 推动批发零售业高质量发展,不卡日本高清国产色,人人视频可以看毛片?,男生GAY狠打spanking,91AV视频国产
01月09日|国家标准委印发《2024年国家标准立项指南》|.一级黄色网站WW.|AV大全网站|18馃埐馃崋馃崋馃崋馃崋|美女被操网站免费看
01月09日|独家视频丨习近平:中国助力落实联合国2030年可持续发展议程 不让一个国家掉队|少妇与大猪ⅹⅩ|国产精品.com|海角社区深夜秘 入口|欧美性爱熟女
01月09日|2024年我国医疗器械工业市场规模预计超1.2万亿元|手机在线观看毛片|丁香花综合婷婷|97超碰免费在线|ppx27cc
黄一鸣自曝座驾,评价颜值 不玻璃心|消费市场持续回暖 中国经济回稳向好动力十足|教官揉我下面⋯啊⋯嗯兔女郎动漫|上视频在线观看免费|免费黄色毛片|91不卡在线精品国产
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
超74000名南非选民在海外参加全国大选投票
以数字技术赋能文化体制机制改革
沙县小吃为何能大吃四方?
外交部:中国节日消费旺、冰雪经济热为全球旅游市场注入强劲动力
E法护未来丨一次戏里戏外的对话,能否找出泄露个人信息的幕后黑手?
“古波斯的荣耀:伊朗文物精华展”在上海博物馆开幕
中国农业农村部部长:不断拓宽农民增收致富渠道
全国冬季运动会速度滑冰第三个比赛日:宁忠岩收获个人第二金
于山水自然中体悟心法 “载艺·归来”文蔚艺术回顾展在京开幕
日本大米供需紧张 米价创近20年最大涨幅
国产91精选
娇小未承年XXXX乱配
久久国产精品无码Av
欧一美一婬一伦一区二区三区麻婆
黄片子大全
错错错30分钟电视剧
中文字幕精品亚洲人在线
本色综合久
silk女性向天堂精品铃木一彻
色欲春色

闽公网安备 35010302000113号