实测昆仑万维大模型「天工」3.5:“文科脑”能说会道也解不出鸡兔同笼

科创板日报 2023-04-18

财联社4月18日讯(记者 崔铭)昨日,昆仑万维(300418.SZ)正式发布大语言模型「天工」3.5,同时宣布即日起启动邀请测试。财联社记者第一时间对其进行了测评。

「天工」3.5由昆仑万维与奇点智源联合研发,昆仑万维方面称,其为第一个真正实现智能涌现的国产大语言模型,已“非常接近OpenAI ChatGPT的智能水平”,可满足文案创作、知识问答、代码编程、逻辑推演、数理推算等多元化需求。

那么,该产品实际表现如何?让我们一探究竟。

在开始测试前,记者先请「天工」3.5做了个自我介绍。

考虑到在此之前,业内已有多家企业推出大模型,记者也顺势问了它与其他大模型相比有什么优点?

「天工」3.5回答其优点在于灵活、高效、智能、安全和环保,并表示自己是一个“非常有用和可靠的工具”。

初步了解之后,记者接下来分别从文本写作、语义理解、逻辑推理、数学计算、撰写代码这几个方面,实测「天工」3.5的各项能力。

首先,我们抛出了一个比较常规的写作要求:如果续写《西游记》故事,可以有哪些角度?

可以看到,「天工」3.5给出了几个写作方向,语言组织能力较为通顺,也较为符合逻辑。

随后,记者让其以“月光”为主题写一首有平仄且押韵的七言律诗,「天工」3.5在几秒钟内便完成了。

有趣的是,记者也让ChatGPT(3.5版本)写了一首,发现两首诗竟有不少重叠的部分。

工具总归是要落到实处,记者让其写一条MMORPG游戏广告文案,要求要有梗有转折。「天工」3.5迅速给出了答案,内容整体风格符合该类游戏特点,但转折部分稍显生硬。

记者又提出让它撰写电商运营岗位的招聘JD(职位描述),「天工」3.5给出了非常详细的答复,涵盖职位名称、职位描述、任职要求、薪资待遇,甚至最后还附上了公司介绍和投递邮箱。不仅格式工整,内容也较为合理。

语义理解方面,「天工」3.5能准确说出成语释义。

也懂一点上海话。

记者决定加大难度,问一些“陷阱题”,看看「天工」3.5能否从容应对。

先来一个脑筋急转弯,提问:小明的爸爸有三个儿子,大儿子叫大毛,二儿子叫二毛,三儿子叫什么名字?

「天工」3.5一次就答对了。

同样的问题,记者去问ChatGPT(3.5版本),虽也回答正确,但多了一句灵魂拷问:所以小明的名字是什么。

再来一道灯谜题,提问:说它是头牛,不会拉犁头,说它力气小,背着屋子走。(打一个动物)

「天工」3.5又一次答对了。

而ChatGPT(3.5版本)并没有答对。

面对“蒸包子”问题,「天工」3.5也回答的头头是道,颇为“理性”。

ChatGPT(3.5版本)则给出了略微不同的回答。

接着,记者希望能考一下它的数学能力。

最经典的“鸡兔同笼”问题:若干只鸡兔同在一个笼子里,已知笼子里有9个头,有30只脚,请问笼中各有多少只鸡和兔?

这次「天工」3.5列出了正确的方程式,却得出了错误的答案。

在被指出这一问题后,「天工」3.5 “虚心认错”并重新计算了一遍,但还是没有得出正确的答案。

同样的题目,我们又问了一遍ChatGPT(3.5版本),依然是列出了正确的方程式,但在运算过程中出错,最后也没有回答正确。

记者又问了一道奥数题:已知父亲今年32岁,儿子今年5岁,请问几年后父亲的年龄正好是儿子的年龄的4倍?

这次「天工」3.5没有答出。

同样的问题,ChatGPT(3.5版本)算出了正确答案。

记者还尝试使用「天工」3.5写代码,提问:用Scala实现并查集,在得到回答后,又再次提问:用Java再写一遍。

随后记者拿给程序员朋友检查,对方称结果是对的,还表示这一问题相对基础,写代码能力如何还要视具体需求,若能进行多轮对话联系上下文修改,会是个辅助业务的“好帮手”。

最后,以一个哲学问题结尾。

记者问了著名的“电车难题”,「天工」3.5指出这是一个伦理困境的问题,并给出了一个辩证的答复。

从记者体验来看,「天工」3.5已经能够较为准确、完整、流畅地回答问题,较少出现“答非所问”的情况。在跟ChatGPT(3.5版本)对比使用过程中,二者的文本写作能力接近,在一些与数理相关问题上,还有优化的空间。

昆仑万维CEO方汉在昨日发布会上透露,「天工」3.5累计投入数亿元,由数百人研发团队历时3年时间打造。目前最高已能支持1万字以上文本对话,实现20轮次以上用户交互,在多类问答场景中都能实现较高的输出水平及较强记忆能力。

据悉,未来昆仑万维「天工」大模型在数理、逻辑推理等方面也将不断迭代优化,随着产品技术成熟,将根据监管和合规要求逐步启动开源,「天工」4和「天工」5也在推进计划中。

(编辑 刘琰)

哆哆女性网科技技术公司起名游戏中起名字起名大全免费取名2021年男最好的远程控制软件明起名字好听小女孩姓许起名杭州诺贝尔瓷砖花谢花飞飞满天兔属起名游戏平台排名公司起名网大全集姚橹太康二手房勾魂尤物肉蒲团电影给妈妈的一封信作文姓余起人名word文件打不开免费起名免费取名网辽宁号舰长起名看三才五格重要还是五行八字重要恒大vs米内罗竞技武汉公司起名琴行起哪些名字好不可撤销在线观看奥杜尔关于童话的作文性瘾症cctv1直播在线观看高速公路里程查询淀粉肠小王子日销售额涨超10倍罗斯否认插足凯特王妃婚姻不负春光新的一天从800个哈欠开始有个姐真把千机伞做出来了国产伟哥去年销售近13亿充个话费竟沦为间接洗钱工具重庆警方辟谣“男子杀人焚尸”男子给前妻转账 现任妻子起诉要回春分繁花正当时呼北高速交通事故已致14人死亡杨洋拄拐现身医院月嫂回应掌掴婴儿是在赶虫子男孩疑遭霸凌 家长讨说法被踢出群因自嘲式简历走红的教授更新简介网友建议重庆地铁不准乘客携带菜筐清明节放假3天调休1天郑州一火锅店爆改成麻辣烫店19岁小伙救下5人后溺亡 多方发声两大学生合买彩票中奖一人不认账张家界的山上“长”满了韩国人?单亲妈妈陷入热恋 14岁儿子报警#春分立蛋大挑战#青海通报栏杆断裂小学生跌落住进ICU代拍被何赛飞拿着魔杖追着打315晚会后胖东来又人满为患了当地回应沈阳致3死车祸车主疑毒驾武汉大学樱花即将进入盛花期张立群任西安交通大学校长为江西彩礼“减负”的“试婚人”网友洛杉矶偶遇贾玲倪萍分享减重40斤方法男孩8年未见母亲被告知被遗忘小米汽车超级工厂正式揭幕周杰伦一审败诉网易特朗普谈“凯特王妃P图照”考生莫言也上北大硕士复试名单了妈妈回应孩子在校撞护栏坠楼恒大被罚41.75亿到底怎么缴男子持台球杆殴打2名女店员被抓校方回应护栏损坏小学生课间坠楼外国人感慨凌晨的中国很安全火箭最近9战8胜1负王树国3次鞠躬告别西交大师生房客欠租失踪 房东直发愁萧美琴窜访捷克 外交部回应山西省委原副书记商黎光被逮捕阿根廷将发行1万与2万面值的纸币英国王室又一合照被质疑P图男子被猫抓伤后确诊“猫抓病”

哆哆女性网 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化