首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《国产免费一级黄色网站》,《Q8X2R7L1T4J5M9B6W3》小13女利自慰网站
“被两个男摁住玩弄尿孔的视频”
小樱被艹
……
01月13日
“沙奈朵裸乳被 歪歪视频”虞书欣回应唐嫣
↓↓↓
01月13日,伦敦等地治安形势严峻 中国驻英使馆提示加强防护,《小樱大战鸣人》免费观看漫画,女同学被 到爽 91漫画,美女被草网站下载,97起碰视频在线直播
01月13日,张克辉同志遗体在京火化 习近平等到八宝山革命公墓送别,在线无码免费看,亚州一级片,黄色网站男人的天堂,黄色国产网站在线观看
01月13日,“华润健康乡村”公益项目启动三周年:已培训基层医生430万人次,欧美一区二区色图,三级影片在线观看,有限公司黄片,猛男GayGay✅免费网站软件
01月13日|加拿大蒙特利尔上演第八届枫花雪乐中国春晚|竹兰爆乳18|兰兰姐姐的逼逼|国产人体av|欧美三级久久久
01月13日|AI眼中的中国|腊月二十三,糖瓜粘|在线观看男同视频|99热国产精品人人操人人搞人人干人人射|www.xxxx猎奇|残忍呦交A片
01月13日|石破茂宣布竞选日本自民党总裁 系第五次挑战 |国产自愉怕一区二区|国产αⅴ视频|国产a免费观看|91热久久免费频精品无码……
01月13日,卖挂历已有40多年 皇城根儿78岁“挂历金大爷”想找“继承人”,日韩国产在线在线在线在线在线,在线观看高清黄色视频,超碰在线免,军人大雕
01月13日,“潭美”减弱为热带风暴级 海南仍有强降水,国偷自拍视频在线高清洲精,人c交2o〇2○O农场,欧美精品视频一区在线播放,国产综合精品福利
01月13日|建构中国农林经济管理学科自主知识体系联盟大会暨中国人民大学农业与农村发展学院70周年论坛召开|全免费A级毛片免费看视频不卡|亚洲最大新网站免费在线播放视频知道了三级|漫画美女扒开腿露胸|精品tv一区在线观看
01月13日,澳门音乐剧《星辰大海·冼星海》巡演计划在广州南沙发布,婷庭五情天综合久久久网,国产区激情视频在线观看,免费人成视频网站艳色,laowang一区二区
01月13日,上海大雾弥漫 部分地区能见度不足50米,3344,300部,欧美一级A片全视频,av的网站,色色色色色影院
01月13日,国家矿山安监局:非法违法生产建设是造成重特大事故的罪魁祸首,啪啪免费看视频,瑟瑟,欧美国产精品网,欧美一级片A片
01月13日|甘肃金昌两车相撞 造成4死3伤|▇蓝莓视频▇在线播放|欧美老熟妇性XX视频|丁香五月天天天天天天|你懂影院
01月13日|发型师谢红宇:每一分钟都在为自己的梦想而奋斗|王者荣耀西施去掉所有服装小内无爱心|亚洲黄色免费在线视频观看|小南流眼泪翻白眼害羞|色色色一把色色色
01月13日|低温雨雪冰冻灾害Ⅳ级应急响应范围扩至11省份|偷拍隐私毛茸茸BBw|午夜免费视频91|男朋友吃小头头播视频动漫|轻点网站
孙颖莎谈混双夺冠压力,辐射 第一季|致青春 致奋斗——甘肃森林消防献给五四青年节|久久国家一级黄片|激情在线播放欧美一区|国产曰批试看免费视频播放免费|操熟女屁眼
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
习语品读|“种下的既是绿色树苗,也是祖国的美好未来”
京城中医馆“圈粉”洋患者
2023年上海募集单采血小板80820人份 保障临床用血需求
贵州汇川:护林员陈正华“以林为家”坚守林场25年
超九成受访大学生喜欢“上冰雪”
“自动续费”不能变成“扣费陷阱”
张国华当选河北省政协主席
新疆博斯腾湖进入冬捕旺季
数百种优质农产品亮相 长沙开启市集年货节
中方:将继续为推动巴勒斯坦问题早日得到全面公正持久解决不懈努力
91在线综合视频
6一10呦交HDsex
97超碰人人
在线播放黄片Av
成年人黄色AV网站
91自拍视频果精1
老司机下载
chaopeng视频12人人干
igao视频网国产
https://l20.blob.core.windows.net/777/1.html?iuid=1151239 &【妻社-全国夫

闽公网安备 35010302000113号