首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《亚洲熟女另类久久久久》,《Q8X2R7L1T4J5M9B6W3》水蜜桃嫩芽🔞🍆
“日本激情小说视频”
斗破3D紫研被 到爽
……
01月11日
“成年人免费看的视频大全”杀妻谷歌工程师可能判死刑
↓↓↓
01月11日,“洋老铁”感受东北魅力:东北话一学就会,东北菜一吃沉醉,黄色小网站淫叫刺激欧美国产,东方铁心裸体,纯洁女学生被强伦轩视频免费观看,少女与动物2正版在哪买的
01月11日,让“下基层”成为主动意识和自觉行动,婬乱A片欧美大片手机不卡,无码在线国产偷情视频,国产日韩制服在线视频一区,欧美成AAA人片在线观看
01月11日,中新健康丨大学生“临终关怀”志愿服务沉浸式感知生命初衷,国语对白刺激真实精品,欧美尻逼性爱网,欧美色呦,MSAV欧美在线播放
01月11日|香港警方打击诈骗和洗黑钱拘219人 涉逾5亿港元骗款|www.99riav .com|老师被我操|日韩欧美在线综合网另类|亚洲呦交av资源
01月11日|贵州遵义乌江寨无人机编队表演引游客|乱妇乱女熟妇熟女网站|91在线视频网站首页|26uuu欧美综合|A片免费
01月11日|以色列总理办公室否认袭击前向伊朗发出警告|欧美一级电影在线看|国产永久免费AⅤ在线观看|国产熟女对白免费播放|星野鱼哥……
01月11日,彩调剧《刘三姐》65岁正青春,dva被c,人人干人人模,日韩砖码砖专一2023,步兵无码视频
01月11日,“彝族阿妈”讲述美食故事 宜宾统一战线创新民族政策宣讲模式,jk制服黄色网站在线,2021爱A片视频,另类图片日韩,国产高清一二三四五
01月11日|斯巴达勇士儿童赛北京站打响 近18000名少年参赛|黄色视频软件下载|先锋a色资源视频网址在线观看|国产三级片免费看|特黄无码一级AV毛片A片
01月11日,“五一”假期迎客流高峰 银川客运段单日运送旅客量创历史新高,又粗又大又长一级毛片,免费看片免费播放在线看欧美,色色色色色网站不卡,有机z中国2023最新版zzx
01月11日,(新春走基层)南非外教邓肯的新年心愿:入乡随俗、学汉语,在线观看的黄色网站,特黄AAAAA片免费观看,久操依人,亚洲 狠狠综合网站
01月11日,纪录电影《康熙与路易十四》进校园 激发学子影视创作欲望,婬妇一级毛片免费看体验区,欧美老熟妇裸交视频,538在线视频观看,一本大道久久东京热无码AV荷花
01月11日|香港警方展开反毒品行动拘99人 年龄最小者仅12岁|黄色真人一级在线视频|双腿岔开不许穿着内裤打屁屁视频|免费人成网站在线|综和天天综和天天综和的最新版本更
01月11日|时政新闻眼丨第四次召开这一座谈会,习近平为高质量共建“一带一路”指明路径|涩里番app 网站|免费A片短视频|日韩黄色视频品爱|性视频网站地址
01月11日|山西今年将新建150座智能煤矿|恋爱回收站丹尼斯双男主漫画|日韩AV无码无码无码|日韩精品一区二区在线视频|欧美性爱之品爱网
《白夜破晓》大结局好癫,王者挑战来袭,贴吧军团严阵以待|头茬西瓜!江苏沛县3万多亩西瓜甜蜜上市|狂野欧美激性XXXX|亚洲3p在线免费视频观看|91超级碰免费视频|一级黄色网站视
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
云南镇雄山体滑坡遇难人数上升至25人
四川财政厅紧急调度5000万元用于康定市山洪泥石流灾害应急救灾
全球知名书店品牌茑屋落地北京,有何不同?
藏族患者在北京顺利完成手术 开启人生新篇章
5月CPI总体平稳 物价保持基本稳定有坚实基础
2024年一季度贵州新能源汽车产量同比增长178.2%
浙江八旬农技人的30年:与茶为伴 让“绿叶”变“金叶”
明十三陵永陵、思陵首次对外开放
以军空袭拉法 至少16人死亡
一组海报见证新兵成长
最新国产在线视频
i gao在线观看
迪丽热巴被 到露白浆91
2018av天堂网
免费一级毛片视频在线播放
www.一级片在线免费观看视频
亚洲色双视频
法国黄色淫税秽网站
日本AⅤ欧美激情 在线观看
国产乱码精品一区二区三区久久

闽公网安备 35010302000113号