0

0

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

WBOY

WBOY

发布时间:2023-05-29 14:03:04

|

1382人浏览过

|

来源于搜狐

转载

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

云从ai大模型参战!支持图文跨模态理解,跟gpt-4拼做中考题

智东西

作者 | ZeR0

编辑 | 漠影

智东西5月18日报道,今日,云从科技推出从容大模型,并现场演示了从容大模型在问答、写命题作文、意图理解、多轮对话、英文写作、机器翻译、编程、图文跨模态理解、做中考真题等方面的能力。目前从容大模型处于内测阶段。

根据演示,从容大模型对一本预先上传好的大约有五六百页的《大话西方艺术史》书籍进行了深度理解,包括询问书籍相关内容、总结这是一本什么样的书、找到指定要求的图等。

经过对从容大模型、ChatGPT、GPT-4做去年中考真题的能力进行测试,云从从容比ChatGPT的答题速度更快,答历史、生物题的得分略低于ChatGPT,答地理题的得分与ChatGPT持平,答政治题、道德与法制题的表现比ChatGPT更好。目前GPT-4.0的水平明显优于其他系统。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

现场,大模型信创生态联盟正式成立,成员包括优刻得、厦门文旅、华为昇腾、南沙公控、CSDN、众数信科等,旨在促进大模型技术的创新和发展,推动人工智能在各个行业应用。

云从科技也将分别与中国中检、神舟信息、深圳报业、佳都科技、金世缘、游族网络、艾登科技合作,推出质量大模型、金融大模型、文娱大模型、交通大模型、制造大模型、游戏大模型、医疗大模型等。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

一、基础能力演示:支持图文跨模态理解,做中考题速度比ChatGPT快

从容大模型的对话界面跟ChatGPT差不多。叶懋,云从科技技术管理部总监,在现场展示了从容大模型的基础能力。

问答方面,从容大模型的回复风格偏简洁、实在,能够避开一些陷阱题挖的坑。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

写作方面,针对去年四川省的一个中考作文题“以最美的颜色为题写一篇不少于600字的作文”,从容大模型现场写出一篇作文。向它提出更多修改或限定要求,比如用白色改写、要求更有深度、改成以一个患病小孩的视角写最美的颜色来自于医护人员的白大褂等等之后,从容大模型能够理解意图并展现出多轮对话的能力。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

在从容大模型的现场,我成功完成了一篇英文招领启事的创作,并按照要求对落款进行了修改。要求它翻译成中文后,它首先给出的回复是偏生硬的直译,接着按照“用中文习惯改写”的新要求改写了这篇启事。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

编程方面,从容大模型先展示了写代码的能力,写出一段快速排序的代码。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

向它提出相对专业些的话题,“这段代码的时间复杂度是多少”,从容大模型的回复没什么毛病。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

要求加上代码注释,它也能快速完成。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

再提高点难度,让它写出C++程序员能看懂的代码,它不仅完成了任务,还按照前面的要求添加有注释。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

阅读理解方面,从容大模型支持对长文档或者多文档聚合进行理解,并支持图文跨模态理解。

云从技术人员预先上传了一本大概有五六百页的《大话西方艺术史》书籍,从容大模型对这本书的内容进行了深度理解,接着就能基于这本书所涉及的知识范畴与用户进行互动,包括询问书籍相关内容、总结这是一本什么样的书等。

如下图所示,界面中间部分是书籍的正文,右边是对话交互界面,从容大模型准备了一些提问样例,点击某个样例后,它就会实时生成回复,并附有回复内容相关的一些线索。点击这些线索就会链接到书中对应的段落位置。通过从容大模型,用户可以提供图片描述并在书籍中快速定位。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

云从科技对从容大模型、ChatGPT和GPT-4进行了测试,以确定它们在2022年各学科中考真题解题方面的能力。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

从测试结果来看,云从从容比ChatGPT的答题速度更快,答历史、生物题的得分略低于ChatGPT,答地理题的得分与ChatGPT持平,答政治题、道德与法制题的表现比ChatGPT更好。目前GPT-4.0的水平明显优于其他系统。

海螺视频
海螺视频

海螺AI推出的AI视频生成工具,可以生成高质量的视频内容。

下载

二、行业应用示例:城运治理、设备维修、金融运营、政策解答

要让从容基础大模型真正用起来,需要构建行业大模型。

云从科技联合创始人、广东公司总经理姚志强分享了从容大模型在基层治理场景的应用,比如面向民众服务的一语智办、面向公务员及网格队伍的智治精灵、面向应用开发者的编程助手、面向城运治理中心的融合指挥。

在城市运营治理中心的场景中,大屏幕播放了城市运营智能大屏幕AI助手的演示。如果一个指挥员命令“将第五屏幕移至中间”,那么AI会理解这个命令,并且迅速执行。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

指挥员又提问“这个周边人和车多吗”,AI大模型随即借助多模态能力,自动分析人流车况,选取周边人和车最多的几路视频画面,并告知“依据视频内容,湖泊周边交通状态良好,但存在车辆占道违停现象,同时部分位置人员较为拥挤,建议安排安保人员维持秩序”。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

指挥员继续提问:“今天对市民游玩有什么建议?”AI大模型回复了天气状况,并给出“适合出游”、“做好防晒”的建议。

面向设备维修管理场景的例子,是云从科技基于行业大模型做的智能维修伴随系统。

维修计划有两个来源:一是基于设备分类,设备历史的维修记录以及最近的生产计划等会综合自动形成一个维检修计划;二是巡检机器人或探头会在机器人巡检过程中发现某地方有个问题,这个问题可能是临时性的,它会知道有什么故障、可能性是什么、是否需要发送一个维修请求。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

在准备维修的过程中,通过研究维修手册、维修记录以及专家建议,大型机器逐渐发展成为具备“老师傅”级别的维修技能。在维修前,系统会提供一个包括图文、音视频、维修关键要点的完整预习课程,方便维修工程师预习要维修的设备可能是什么故障、故障是由什么导致的、应该带什么工具、采用什么修、换什么备件等等。

在维修过程中,云从智能维修伴随系统提供两个典型的解决方案:一是“指导”,工程师可以问大模型设备故障应该怎么修;二是“监督”,大模型可以监测工程师的维修动作是否规范、有没有遗漏重要修程。

在维修工单关闭时,无需工人自己写,系统会根据全程的视频记录自动解析,形成一个图文的维修记录,并伴有这次维修中的核心视频内容,以便进行维修复盘和对后续维修提供知识源。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

面向金融场景,大模型能够提升银行内部的业务运营效率。从容大模型可将银行海量的数据资源,转化为更有价值的信息,突破了专业知识的供给瓶颈,有助于提升银行在普惠金融、银行运营能力、服务实体经济方面的能力。现场演示了AI虚拟客户经理回答理财相关专业问题的表现。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

相比通用大模型,用本地知识库进行优化的行业大模型能够提供更专业严谨的回答,避免出现胡编乱造的情况。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

以海关政策AI精灵为例,海关政策AI精灵基于海关总署2000多份材料,形成本地的知识库,通过语义分割、语义检索、prompt learning等技术,为从容大模型构造了精准的提示词,进而能够充分发挥大模型的能力,为用户提供准确的政策解答。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

云从科技内部还孵化了若干大模型应用创业项目,比如大麦数字人直播平台能够实现直播间智能搭建、直播预热语料提供等功能。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

面向教育场景,智能教育AI精灵能够基于现有课程教纲、题库等基础模型,形成自生题库,根据学生平时表现生成定制习题及学习计划,并能够通过学生表现自动生成对应的综合评价分析,减少老师日常工作负担。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

结语:未来几年,技术会不断解锁场景

在展示出语言、数学、推理等基础通识能力后,大模型正在走向行业,展现出在金融、法律、医学、政策等专业知识领域的应用潜能。

周曦,云从科技的董事长和总经理,认为大型模型将会颠覆传统的交互方式,并主要通过三种形式展现:问答、伴随和托管。其中,“问答”即当前的GPT;“伴随”即AI会像一个朋友一样,伴随你执行很多的事情;“托管”即一件事主要交给AI来做,类似在网游中的“挂机训练”。一旦达到“托管”阶段,人们就能够腾出手来,从而去做更有意义且更感兴趣的事情。

他谈道,有了整个平台框架,通过基础大模型构造了基础能力后,可以不断增加行业大模型的技能包,那么就能构造出更加强大的行业系统。这个系统可服务于To G、To B、To C的各行各业。

云从AI大模型参战!支持图文跨模态理解,跟GPT-4拼做中考题

在周曦看来,没有强大的基础大模型,直接做行业大模型,不具有长期持续的生命力,因为要想让行业大模型足够实用,需要反过来训练基础大模型,如果想要让行业大模型真正在产业上量产使用,必须将效率和成本控制做到极致,而极致优化必须要掌握基础大模型。

未来产业的发展取决于不断涌现的技术突破,而行业应用不单纯依赖于创意,而是需要技术加持。在未来的几年里,技术将不断开拓新的应用场景,同时场景方也将不断尝试重构行业效率和体验。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
拼多多赚钱的5种方法 拼多多赚钱的5种方法
拼多多赚钱的5种方法 拼多多赚钱的5种方法

在拼多多上赚钱主要可以通过无货源模式一件代发、精细化运营特色店铺、参与官方高流量活动、利用拼团机制社交裂变,以及成为多多进宝推广员这5种方法实现。核心策略在于通过低成本、高效率的供应链管理与营销,利用平台社交电商红利实现盈利。

28

2026.01.26

edge浏览器怎样设置主页 edge浏览器自定义设置教程
edge浏览器怎样设置主页 edge浏览器自定义设置教程

在Edge浏览器中设置主页,请依次点击右上角“...”图标 > 设置 > 开始、主页和新建标签页。在“Microsoft Edge 启动时”选择“打开以下页面”,点击“添加新页面”并输入网址。若要使用主页按钮,需在“外观”设置中开启“显示主页按钮”并设定网址。

8

2026.01.26

苹果官方查询网站 苹果手机正品激活查询入口
苹果官方查询网站 苹果手机正品激活查询入口

苹果官方查询网站主要通过 checkcoverage.apple.com/cn/zh/ 进行,可用于查询序列号(SN)对应的保修状态、激活日期及技术支持服务。此外,查找丢失设备请使用 iCloud.com/find,购买信息与物流可访问 Apple (中国大陆) 订单状态页面。

31

2026.01.26

npd人格什么意思 npd人格有什么特征
npd人格什么意思 npd人格有什么特征

NPD(Narcissistic Personality Disorder)即自恋型人格障碍,是一种心理健康问题,特点是极度夸大自我重要性、需要过度赞美与关注,同时极度缺乏共情能力,背后常掩藏着低自尊和不安全感,影响人际关系、工作和生活,通常在青少年时期开始显现,需由专业人士诊断。

3

2026.01.26

windows安全中心怎么关闭 windows安全中心怎么执行操作
windows安全中心怎么关闭 windows安全中心怎么执行操作

关闭Windows安全中心(Windows Defender)可通过系统设置暂时关闭,或使用组策略/注册表永久关闭。最简单的方法是:进入设置 > 隐私和安全性 > Windows安全中心 > 病毒和威胁防护 > 管理设置,将实时保护等选项关闭。

5

2026.01.26

2026年春运抢票攻略大全 春运抢票攻略教你三招手【技巧】
2026年春运抢票攻略大全 春运抢票攻略教你三招手【技巧】

铁路12306提供起售时间查询、起售提醒、购票预填、候补购票及误购限时免费退票五项服务,并强调官方渠道唯一性与信息安全。

35

2026.01.26

个人所得税税率表2026 个人所得税率最新税率表
个人所得税税率表2026 个人所得税率最新税率表

以工资薪金所得为例,应纳税额 = 应纳税所得额 × 税率 - 速算扣除数。应纳税所得额 = 月度收入 - 5000 元 - 专项扣除 - 专项附加扣除 - 依法确定的其他扣除。假设某员工月工资 10000 元,专项扣除 1000 元,专项附加扣除 2000 元,当月应纳税所得额为 10000 - 5000 - 1000 - 2000 = 2000 元,对应税率为 3%,速算扣除数为 0,则当月应纳税额为 2000×3% = 60 元。

12

2026.01.26

oppo云服务官网登录入口 oppo云服务登录手机版
oppo云服务官网登录入口 oppo云服务登录手机版

oppo云服务https://cloud.oppo.com/可以在云端安全存储您的照片、视频、联系人、便签等重要数据。当您的手机数据意外丢失或者需要更换手机时,可以随时将这些存储在云端的数据快速恢复到手机中。

40

2026.01.26

抖币充值官方网站 抖币性价比充值链接地址
抖币充值官方网站 抖币性价比充值链接地址

网页端充值步骤:打开浏览器,输入https://www.douyin.com,登录账号;点击右上角头像,选择“钱包”;进入“充值中心”,操作和APP端一致。注意:切勿通过第三方链接、二维码充值,谨防受骗

7

2026.01.26

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
麻省理工大佬Python课程
麻省理工大佬Python课程

共34课时 | 5.2万人学习

国外Web开发全栈课程全集
国外Web开发全栈课程全集

共12课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号