新闻中心

Mistral与微软合作为"小语言模型"带来革命,Mistral中杯代码能力超越GPT-4,成本降低2/3

2023-12-17
浏览次数:
返回列表

近来,"小语言模型"突然成为热门话题

本周一,刚刚完成4.15亿美元融资的法国AI初创公司Mistral,发布了Mixtral 8x7B模型。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

Mistral与微软合作为

这个开源模型尽管尺寸不大,小到足以在一台内存100GB以上的电脑上运行,然而在某些基准测试中却能和GPT-3.5打平,因此迅速在开发者中赢得了一片称赞。

之所以叫Mixtral 8x7B,是因为它结合了为处理特定任务而训练的各种较小模型,从而提高了运行效率。

这种「稀疏专家混合」模型并不容易实现,据说OpenAI在今年早些时候因为无法让MoE模型正常运行,而不得不放弃了模型的开发。

紧接着,就在第二天,微软又发布了全新版本的Phi-2小模型。

Mistral与微软合作为

Phi-2的规模只有27亿参数,比Mistral的规模小得多,仅足以在手机上运行。而与之相比,GPT-4的参数规模高达一万亿

Phi-2在精心挑选的数据集上进行了训练,数据集的质量足够高,因此即使手机的计算能力有限,也能确保模型生成准确的结果。

虽然还不清楚微软或其他软件制造商将如何使用小型模型,但最明显的好处,就是降低了大规模运行AI应用的成本,并且极大地拓宽了生成式AI技术的应用范围。

这是一个重要的事件

Mistral-medium代码生成完胜GPT-4

最近,Mistral-medium已经开始进行内测

有博主对比了开源的Mistral-medium和GPT-4的代码生成能力,结果显示,Mistral-medium比GPT-4的代码能力更强,然而成本却只需GPT-4的3成!

Mistral与微软合作为

总价来说就是:

Mistral工作效率高,且完成工作的质量也很高

2)不会将token浪费在冗长的解释性输出上

3)给出的建议非常具体

首先,要编写用于生成斐波那契素数的PyTorch数据集的cuda优化代码

Mistral-Medium生成的代码严肃、完整。

Mistral与微软合作为

Mistral与微软合作为

Mistral与微软合作为

GPT-4生成的代码,勉勉强强还可以

浪费了很多token,却没有输出有用的信息。

Mistral与微软合作为

然后,GPT-4只给出了骨架代码,并没有具体的相关代码。

Mistral与微软合作为

第二道题是:编写高效的Python代码,将大约10亿个大型Apache HTTP访问文件导入SqlLite数据库,然后使用它来生成对sales.html和product.html的访问直方图

Mistral的输出非常出色,尽管log文件不是CSV格式的,但是修改起来很简单

Mistral与微软合作为

Mistral与微软合作为

Mistral与微软合作为

GPT-4依旧拉跨。

Mistral与微软合作为

Mistral与微软合作为

Mistral与微软合作为

此前,这位博主测试过多个代码生成模型,GPT-4一直稳居第一。

目前,强大的竞争对手Mistral-medium终于出现,将其从宝座上推下

虽然只发布了两个例子,但博主测试了多个问题,结果都差不多。

他提出建议:考虑到Mistral-medium在代码生成质量方面提供更好的体验,应该将其整合到各地的代码助手中

Mistral与微软合作为

有人按照每1000token算出了输入和输出的成本,发现Mistral-medium比起GPT-4直接降低了70%!

Mistral与微软合作为

确实,节省了70%的令牌费用,这是一件大事。此外,通过简洁的输出,还可以进一步降低成本

Mistral与微软合作为

以上就是Mistral与微软合作为"小语言模型"带来革命,Mistral中杯代码能力超越GPT-4,成本降低2/3的详细内容,更多请关注其它相关文章!


# 微软  # 企业商城网站建设方案  # 品牌网站建设800元  # 全国推广公司专卖网站  # https 网站seo优化  # 常州网站搜索优化  # 袋鼠店seo  # 外贸推广网站建设流程图  # b2b网站怎么做关键词优化  # 首款  # 发布了  # 将于  # 将其  # 三大  # 多个  # 还可以  # 出了  # 这是  # 模型  # 片子网站建设美丽图片  # 惠济本地网站推广 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: 夸克加载什么要会员  市盈率估值1stdv是什么意思  手机如何ip绑定域名解析  丰田type-c接口是什么  市盈率20a21e是什么意思  市盈率3.2是什么意思  怎么打印数组j*a  华为交换机如何复制命令行  access 如何输入命令  单片机.lib文件怎么打开  笔记本如何使用固态硬盘  所有删除的聊天记录都可以恢复吗?  j*a怎么用json数组  如何为服务器配置静态路由?服务器配置静态路由详细教程  复制 命令如何撤销  vivo手机nfc功能是什么意思  夸克搜题的原理是什么  vue组件typescript怎么用  element ui是什么  单片机学习视频怎么调色  为什么夸克流畅播失败  为什么都用typescript  命令行如何打开打印机  安装固态硬盘如何设置  linux如何跳回命令行界面  怎么自学typescript  命令行ftp如何创建目录  春运车站抢票和网上抢票  广东春运抢票怎么抢不到  负市盈率是什么意思  dos命令如何复制目录结构  5G类似微信的聊天软件有哪些  苹果16系统有哪些功能  电脑显示屏上power是什么意思  跨境电商gmv是什么意思?跨境电商GMV:理解其含义、计算方法和影响因素  xdm是什么意思  typescript什么意思  1s等于多少ms  33000日元等于多少人民币  华为的nfc功能是什么意思  什么叫typescript  j*a对数组怎么使用  如何在命令行写j*a程序  春运抢票在哪儿抢票  j*a怎么求数组均值  如何正确使用固态硬盘  没基础做单片机怎么样  如何给电脑加装固态硬盘  如何安装tree命令  苹果16有哪些改善 

搜索