豆包视觉大模型Doubao-vision-pro-32k——模型简评与使用

459 阅读5分钟

豆包视觉大模型Doubao-vision-pro-32k——模型简评与使用

一、模型概述

智匠MindCraft近期整合了全新的视觉大模型——Doubao-vision-pro-32k。该模型具备32K的上下文长度,支持多图识别功能,暂不支持视频识别。输入输出价格为20元/百万tokens。单张图片处理约消耗1K左右,图片处理效率较高。

二、官方的应用场景介绍

1.图表识别

image.png

2.多图洞察及答疑

image.png

image.png

3.精准图像识别

image.png

4.作文批改

image.png

5.创意图像文案

image.png

image.png

三、实测效果

1.看图作诗

image.png

大模型回复:

图中展示的是芙蓉镇的自然景观,其中有倾泻而下的瀑布和依山而建的古建筑。以下是一首以图中场景为灵感所作的诗:

《咏芙蓉镇》

湘西明珠芙蓉镇,瀑布飞流映古楼。

青山绿水画中韵,岁月沧桑史长留。

吊脚楼边听风雨,石板街头忆旧游。

千年传奇今犹在,世外桃源任君求。

这首诗描绘了芙蓉镇的独特风光和历史韵味,展现了其作为旅游胜地的魅力。 点评:准确识别出了图片出处,作诗水平相当高了,可能是国际顶尖水平。

2.多图推理及写作

image.png

提示词:根据图中人物写个言情小作文

大模型回复:

图中展示的是游戏《最终幻想7:重制版》中的人物克劳德·斯特莱夫和艾瑞丝·盖恩斯巴勒。以下是根据这两个人物所撰写的言情小作文:

《克劳德与艾瑞丝的重逢》

克劳德·斯特莱夫,这位眼神锐利如剑的战士,背负着沉重的大剑,穿梭在枪林弹雨的战场。他的身影如同暗夜中的幽灵,冷峻而孤独。然而,在他坚毅的外表下,藏着一颗曾经破碎的心,那份伤痛如同隐藏在乌云后的月光,时隐时现。 艾瑞丝·盖恩斯巴勒,一位宛如春天花朵般的女子,她的笑容如同阳光穿透晨雾,温暖而明亮。她手中的花束,散发着生命的气息,象征着她对世界的热爱与温柔。她的眼神中,总是带着一丝让人无法抗拒的期待和希望。

命运的红线将他们紧紧相连,却又让他们历经波折。克劳德的过去像一道无法逾越的鸿沟,横亘在他们之间。他曾试图用冷漠和疏离来掩盖内心的脆弱,但艾瑞丝却总能看穿他伪装的坚强,用她的温柔和耐心,一点一点地融化他心中的坚冰。

那是一个黄昏,夕阳如血,染红了整个天空。克劳德孤独地站在破旧的火车站台上,他的身影被夕阳拉得很长很长。就在这时,一个熟悉的声音在他身后响起:“克劳德,好久不见。”他猛地回头,只见艾瑞丝站在那里,手中依然捧着那束鲜花,眼中满是温柔和思念。

克劳德的心中涌起一股无法言喻的情感,他的嘴唇微微颤抖,却半晌说不出话来。艾瑞丝轻轻地走上前,将手中的花束递给他,微笑着说:“这是给你的,欢迎回来。”克劳德接过花束,那一瞬间,他仿佛感觉到心中有什么东西正在慢慢愈合。 “艾瑞丝,我……”克劳德的声音有些沙哑,他想说些什么,却又觉得千言万语都无法表达他此刻的心情。 艾瑞丝轻轻地摇摇头,用手指放在他的唇上,阻止了他的话语。“什么都不用说,你回来就好。”她的眼中闪烁着泪光,但那却是幸福的泪花。

在那片血红的夕阳下,克劳德和艾瑞丝紧紧相拥,仿佛整个世界都只剩下他们两人。那一刻,所有的痛苦和悲伤都烟消云散,他们的心中只有彼此,只有这份失而复得的温暖和爱意。

从那以后,克劳德不再是那个孤独的战士,他的心中有了一个可以停靠的港湾。而艾瑞丝也始终陪伴在他身边,用她的爱和温柔,守护着他那颗曾经破碎的心。他们一起面对未来的风雨,无论前方有多少艰难险阻,他们都知道,只要彼此紧握双手,就没有什么能够将他们分开。

在这个充满战乱和痛苦的世界里,克劳德和艾瑞丝的爱情就像一朵盛开在废墟中的花朵,虽然历经磨难,却依然绽放着最绚烂的光彩,成为彼此生命中最璀璨的星辰。

点评:准确识别出了图中的人物。小作文文笔和逻辑不错。

3.用HTML代码还原UI。

image.png

大模型回复:

image.png

点评:效果还不错,在国内视觉模型属于上等。相比国外顶流视觉模型尚有差距。

用户可以通过智匠MindCraft的客户端或小程序直接使用该模型,也可以通过API接口进行开发对接。

image.png

image.png