首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《九九视频免费看》,《Q8X2R7L1T4J5M9B6W3》熟女阿姨社区
“肉欲奥运会1983删减了吗”
www在线免费看黄色视频
……
01月12日
“欧美aaaaaaaaaa”烧伤妈妈丈夫给医生送锦旗
↓↓↓
01月12日,种一棵树,最好的时间是现在,米菲兔卡通图片app下载,高清无码黄色网站免费,火影のロエ,黄色免费看在线
01月12日,政策红利持续释放 多组数据印证国际社会来华投资信心增强,久久久AAA片,欧美特黄久久精品一级A片,H国产乱伦,0606xxx
01月12日,(乡村行·看振兴)山西中阳:“农文旅康”融合串起乡村振兴“致富链”,91精品国产综合久久精品麻豆,www性欧美,18禁污污的网站免费观看,在线观看国产网站
01月12日|从1天到1个月,超长“双11”发生了什么?|涩谷果步rct系列|亚洲激情 小说|香蕉茄子|17c在线
01月12日|北京舞蹈学院青年舞团在澳大利亚悉尼首演|欧洲在线观看视频精品|老妇bbwhd|王者荣耀18|老逼自拍
01月12日|怎样养出乌黑亮丽好头发?护发小妙招请查收|女生脱衣服干逼网站免费播放|捧起她娇臀猛烈冲刺H视频|美国十次农夫航道介绍|tubu8HD👙👙软件……
01月12日,南京调整2024年度住房公积金缴存基数,日韩精品在线观看,一级黄色网页,白丝校花扒腿自慰,黄片免费看国
01月12日,东西方创意交融探新 南京沉浸式演出惊艳“绽放”,国产JIZZJIZZ免费看Jizz,一级生活片,精品中文在线视频免费观看,黄色网址直接看
01月12日|江西永修:秸秆回收再利用 变废为宝增效益|A片大黄片|狼友无码视频在线观看免费|嘿咻无码视频在线观看|天天碰天天色
01月12日,商务部国际贸易谈判代表兼副部长王受文会见联合国贸发会议秘书长格林斯潘,亚洲va韩国ⅴa欧美va不卡,国产无遮挡又爽又刺激的视频老师,av免费在线观看首页加入,小 插进
01月12日,贵州“村超”“村BA”流量变现 “五一”假期持续火爆,国产AB自拍,三级黄片免费,白丝啪啪,欧美69交性视频
01月12日,“五一”假期乐山大佛景区游客畅游,97午夜,亚洲一区污,91免费版在线观看,国产精品一区二区无码不卡中文
01月12日|白鹭蹁跹新疆铁门关市黄水渠湿地|亚洲熟妇视频|又大又又粗长又硬又黄的免费视频|久久一区二区有码|一级A片无码AV在线播放
01月12日|新疆阿克苏地区库车市发生3.0级地震 震源深度10千米|国内黄色一级精品|亚洲第一精品911青草衣衣|欧美伦妇高潮颤抖久久|国产好大好爽好深好湿免费视频
01月12日|澳大利亚楚商联合会与江西九江市访澳团举行经贸座谈会|精品一级亚洲无毒黄色网站|免费看A级黄色视频|小 塞|欧美国产激情
李娟回应与董宇辉访谈“不同频”,孙杨国内赛400自取得17连胜|前6月饮料类商品零售额同比增5.6% 市场呈现新亮点|黑土小南小樱泳装|激情视频图片一区|中文字幕毛片无码av不卡|日本三级免费黄色录像
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
中国成功发射遥感四十二号02星
香港研究指重症流感患者患急性肾损伤风险为新冠患者两倍
孩子学过的字转眼就忘,该怎么办?
天津印发方案对接国际高标准 推进自贸区制度型开放
河北省出台防汛避险人员转移条例
2023年二连浩特口岸进出口值为423.1亿元
博鳌亚洲论坛2024年年会定于3月26日至29日举行
民政部等部门联合出台政策加快发展农村养老服务
未来三天陕甘宁等地有强降雨 南方酷热天气持续
“龙虾之都”江苏盱眙:首网龙虾抢“鲜”上市
国产精品一级在线
99视频久久精品久久
超碰在线免费图片
欧美熟女婷婷色
91亚色
永久黄网站色视频免费不卡
丁香婷婷一区二区
国产色无码砖区在线看
久久精品视频免费
www.zachiew.com

闽公网安备 35010302000113号