微软推出可在智能手机上运行的轻量级AI模型Phi-3 Mini

2024-04-25 06:19:36 来源:网络

【环球网科技综合报道】微软最近发布了一款名为Phi-3 Mini的轻量级人工智能模型,该模型被设计为能在智能手机和其他本地设备上运行。这款拥有38亿参数的模型是微软即将发布的三个Phi-3系列语言模型中的首个。其目标是为云驱动的大型语言模型提供一个更经济实惠的替代方案,使得规模较小的组织也能采用人工智能技术。

微软表示,Phi-3 Mini的性能轻松超越了之前的Phi-2小型模型,并且与Llama 2等大型模型不相上下。令人惊讶的是,这款新模型的响应能力接近于那些参数规模是其10倍的模型。

研究团队在论文中指出,这一创新的关键在于他们所使用的训练数据集。该数据集以Phi-2模型为基础,但融入了“经过严格过滤的网络数据和合成数据”。这种独特的数据集构建方式受到了儿童读物的启发,这些读物使用更简单的语言来阐述复杂的主题,从而有效地使较小的语言模型能够发挥更高的效能。

尽管Phi-3 Mini在某些方面可能还无法与云驱动的大型语言模型相媲美,但它在从数学到编程再到学术测试的各项任务中,都展现出了超越Phi-2和其他小型语言模型(如Mistral、Gemma、Llama-3-In)的实力。更重要的是,这款模型可以在像智能手机这样简单的设备上运行,而且无需互联网连接。

然而,Phi-3 Mini的主要限制在于其“事实知识”的广度,这主要是由于其训练数据集相对较小。因此,在“TriviaQA”测试中,它的表现并不出色。尽管如此,对于那些只需要处理较小内部数据集的模型来说,这仍然是一个不小的进步。微软希望,通过推出这样的模型,能够让那些无力承担云连接大型语言模型费用的公司也能接触到人工智能技术。

目前,Phi-3 Mini已经在Azure、Hugging Face和Ollama等平台上提供。微软接下来还计划发布功能更为强大的Phi-3 Small和Phi-3 Medium模型,它们分别拥有70亿和140亿个参数。

,微软推出可在智能手机上运行深圳国税局 的轻量级AI模型Phi-3 Mini

相关:

Facebook字节跳动,TikTok非死不可?文 | 佘宗明TikTok,会成为首个在全球最具影响力的两个大国中都不能用的APP吗?现在看,极有可能。面对大洋彼岸的围猎,眼下的TikTok已不是在悬崖之上,而是扒在悬崖边的树枝上。最新消息是,当地时间4月23日,美国参议院通过了TikTok剥离法案。这离法案生效,只差临门一脚——白宫已经说了,拜登将在4月24日签署法案。节奏比很多人预想的,要快太多。认或不认,现实就摆在那:正渡生死劫的TikTok,已命悬0.01线。在缝合带中的..

高通发布骁龙X Plus处理器:4纳米工艺 10核Oryon CPUIT之家 4 月 24 日消息,高通今天正式宣布推出面向 PC 平台的全新骁龙 X Plus 处理器,该处理器平台此前已经得到曝光,今天终于正式揭晓。和骁龙 X Elite 平台一样,采用先进的 4 纳米的制程工艺。不过其高通 Oryon CPU 有 10 个定制的高性能核心,比 X Elite 系列少 2 个,最高主频高达 3.4GHz,总缓存 42MB,内存带宽达可达 136GB/s,Adreno GPU 速度可达 3.8TFLOPS。和苹果 M3 处理器相比,..

iQOO Z9 Turbo 发布:6000mAh 大电池,搭载三代骁龙 8S 的充电宝今年四月份的卷王大战,真的很激烈。一加、真我和 Redmi 都拼尽了浑身解数,力求在千元定位上争个第一。现在,iQOO 也来了。他们推出了新一代千元性能旗舰 iQOO Z9 Turbo。这款新机拿着着本价位最强的处理器和容量最大的电池,加入到今年的千元卷王大战里。标配的三代骁龙 8s先来看看千元卷王们最强调的环节——性能。iQOO Z9 Turbo 搭载了第三代高通骁龙 8s 移动平台和 iQOO 独显芯片 Turbo,搭配 LDPPR 5X ..

跟库克确认了,是真的!苹果多款狠货,5月7日发苹果终于要发新品了!回想起上一次,还是今年的 3 月 4 日晚:苹果最强MacBook Air发布,但还是8+256...而上一次,只是悄然在线上发布了 MacBook Air,排面显然差了点意思。但这次,苹果举办的,是“Apple 特别活动”。这个特别活动的档位有多高呢?小编霜云为大家整理了去年一整年,全部的三场特别活动。可以看到,有两场分别为夏季的 WWDC 和秋季的 iPhone 年度发布会。剩下的一场,是新款 Macbook Pro 和 iMa..

国产AI应用再现黑马!千万人在用的秘密我参透了作者 | 香草编辑 | 漠影五一假期就要到了,你的出行计划决定了吗?如果你不知道去哪里合适,可以问问豆包,也许能得到想要的答案。▲豆包提供五一出行建议豆包是谁?这是字节跳动研发的一款AI智能助手,可实时联网获取最新信息,通过语音、对话等交互提供灵感、答疑解惑,还提供写作、翻译、口语聊天等智能体(Agent)。随着大模型能力狂飙突进,AI作为生产力工具,在搜索、创作、生活等场景为学生党、打工人带来新质生产力..

市值50亿,AIGC第一股“流血”上市!开盘破发跌超20%作者 | 程茜编辑 | 心缘智东西4月24日报道,今日,顶着“AIGC第一股”的名号,出门问问正式登陆港交所。出门问问上市首日破发,其发行价为3.8港元(折合约3.51人民币)/股,开盘下跌21.58%至2.98港元(折合约2.76人民币)/股,随后有小幅上升,股价最高点为3.76港元(折合约3.48人民币)/股。截至当日收盘,出门问问股价为3.68港元/股,下跌3.16%,市值为54.89亿港元(折合约50.78亿人民币)。▲出门问问发行首日股价图出门..

宝马MINI Aceman全球首发:8种体验模式,最高续航450km凤凰网科技讯(作者/刘俣辰)4月24日,2024宝马集团之夜在北京举办。宝马集团旗下两大品牌BMW和MINI新品车型首次展出,包括BMW新世代概念车、MINI首款纯电动跨界车型MINI Aceman以及全新电动MINI Cooper。其中,MINI最新车机系统拥有8种MINI体验模式,CLTC最高续航里程450km。官方显示,新世代车型将首次采用第六代BMW eDrive电驱技术及圆柱电芯,能量密度、续航里程、充电速度实现提升;人机交互方面,新世代车型将搭载BMW全..

大众CEO回应小米SU7撞脸Taycan:我很骄傲快科技4月24日消息,据媒体报道,日前,大众集团CEO奥博穆斯在媒体沟通会上被问及了与小米汽车相关的问题。关于小米SU7的外观设计,奥博穆斯认为,小米SU7与保时捷Taycan非常相似,而保时捷Taycan的设计正是在他担任保时捷CEO时定稿的。因此,奥博穆斯表示,他为保时捷的设计成为标杆而感到“非常骄傲”。除了奥博穆斯之外,保时捷中国总裁兼首席执行官柯时迈(Michael Kirsch)也表示:“对于小米SU7和保时捷的相似之处,我认..

微软发布Phi-3 Mini:3.8B参数小到能塞进手机,性能媲美GPT-3.5编译 | 长颈鹿编辑 | 香草智东西4月24日报道,4月23日,微软在官网开源了小语言模型(SLM)——Phi-3-mini。这是微软Phi-3系列模型推出的首个模型。Phi-3-mini作为微软Phi系列的第四代产品,以其38亿参数和3.3T tokens的庞大训练数据量,在语言、推理、编码和数学基准测试中超越了众多数百亿参数规模的模型。此外,Phi-3-mini有4k和128k tokens两个上下文长度变体,经过预训练和指令调整,可以更好地理解人类的语言、表达..

福岛第一核电站发生事故,驻日使馆发声问:今天上午,日本福岛第一核电站设备供电系统因故部分停止运行,相关作业人员受伤,监测废炉作业的“免震重要栋”断续停电。请问发言人对此有何评论?答:福岛第一核电站不断发生事故,一再表明东京电力公司管理失序混乱,难以保障作业安全,更加凸显了国际社会开展监督的必要性。我们将继续密切关注事故后续影响,再次要求日方正视周边邻国和国际社会关切,全面配合建立利益攸关方实质参与、独立、有效的长期国际监测安排,以..