首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《国产精视频在线观看》,《Q8X2R7L1T4J5M9B6W3》一区二区,国产最新进精品视频
“182tv午夜福利”
海角老吴
……
01月10日
“99riav67”人民警察
↓↓↓
01月10日,成都:为外籍留学生搭建文化交融、创新创业实践平台,免费国产黄片视频,日韩无码黄色视频,国产全黄A一级毛片视大学生宿舍,黄色国产区
01月10日,美日等国拟派团赴台“致贺” 中方已提出严正交涉,加勒比在线网站,欧美黄色电影在线看,免费黄色日本电影,福利网址观看
01月10日,贵州“最美农村路”助力乡村振兴,黄色a级毛片不卡视频,网站A片e,华人免费视频观看一区,jiujiure最新地址
01月10日|中国民商卫星助力新疆阿克苏地震应急救援|自拍人人爱人人操|免费H漫全彩纯肉无码网站|在线观看国产第一页|久久不能视频99
01月10日|专家:大湾区在中国动漫发展重要节点频频发力|蜜桃视频app|深夜18禁黄网站禁片无遮挡观看|chinagay男男xx无套|欧美一级大片网站
01月10日|突发:叙利亚首都大马士革传出枪炮声 中使馆紧急提醒 |天堂婷婷|黄色网站一级免费|小厨娘微密破解版|黄色网站性交免费……
01月10日,“中国布龙之乡”浙江奉化:“二月二”大巡游迎“龙抬头”,大屌性爱,埃及猫原视频,特黄A级毛片免费,中国老奶奶视频视频显示出来
01月10日,住房和城乡建设部启动地震应急三级响应,欧美性三级视频,中国老太大屁股刚交,芙宁娜侧乳被 裸体自慰影片,欧美美女性爱一区
01月10日|中国地震局:新疆乌什7.1级地震位于天山地震带 为逆冲型破裂|国产精品自拍偷|欧美亚洲人成网站在线观看|不是所有网站都叫日日干91|日韩在线理论A片免费
01月10日,石家庄国际陆港保税物流中心(B型)正式封关运行,免费能看的最新黄色网站,999啪啪啪资源站,69免费视频,欧州黄片
01月10日,港乐已死?资深乐评人:不是超越才叫延续生命力,免费h网站视频,mmm12345黄色片,欧美一级c片免费全部完,xxxwww
01月10日,在宁台青连续4年推广棒球 促大陆青年走上赛场,腹肌精牛,日韩一区日韩二区,在线观看的免费无码黄网站,性爱乱伦视频网
01月10日|国务院食安办通报对媒体反映的“罐车运输食用植物油乱象问题”调查处置情况|欧美久久精品鲁一鲁|久久99热频国这里只有精品|在线免费欢看18岁黄片|欧美性爱日韩夜
01月10日|做好养老金融大文章 建行打造养老生态圈|国产第一页亚洲|日韩久久午夜|色婷婷综合视频在线观看视频一区|久久久久久免费高清国产
01月10日|诺如病毒感染进入高发季 全人群普遍易感|欧美性交XXXX|欧洲熟妇色ⅩXXXX欧美老熟妇|特级黄碟|操妞 国产 爱
金价过去7周中涨了6周,731部队罪证陈列馆发布参观提醒|两度被村民按手印挽留的驻村第一书记|免费观看AV一级毛片|两根茎一起挤进视频|新春萨姆依:555488|做爱故事系列
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
【东西问·中外对话】从长城到武术,丘索维金娜讲述自己如何“迷上”中国文化
西藏当雄:念青唐古拉山脉雪景
云南镇雄山体滑坡已致12人遇难 现场搜救仍在进行
俄罗斯女商人逐梦厦门:金砖合作开启无限商机
广州塔1小时内6次“吸”闪电
2024年开年最卷的行业,为何是文旅?
第十二届全球视频媒体论坛在泉州举行 李书磊以视频方式出席并致辞
寒潮来袭 重庆巴南迎2024年首场降雪
郑钦文夺得WTA500东京站冠军
山东济南:超然楼亮灯引民众观看
性XXⅩ欧美
亚洲欧美性交小
毛片在线免费播放
亚洲欧美毛香港
国产中文字幕在线
欧美性靠逼乱伦
实践 拍击OTK
久久国产亚洲一区二区三区
人人干人人操欧美
AV网站免费无码

闽公网安备 35010302000113号