您现在的位置是:知识 >>正文
大模型让让,小模型登场丨科创要闻
知识7人已围观
简介4月23日,微软推出小语言模型SLM)Phi-3系列,有Phi-3-mini、Phi-3-small、Phi-3-medium三个版本,在评估语言、编程、数学能力等的基准测试中,Phi-3系列模型表现 ...
4 月 23 日,大模登场微软推出小语言模型(SLM)Phi-3系列,型让有Phi-3-mini、模型Phi-3-small、丨科Phi-3-medium三个版本,创闻在评估语言、大模登场编程、型让数学能力等的模型基准测试中,Phi-3系列模型表现优于同等规模甚至更大规模模型(如GPT-3,丨科5)。微软称其是创闻目前同类中最强大且最具成本效益的小型语言模型。
Phi-3模型的大模登场“小体积”,让手机上运行高能力的型让语言模型成为可能。如Phi-3-mini只占用手机18GB内存,模型如在iPhone 14上部署,丨科苹果的创闻A16仿生芯片在设备上脱机运行,可以实现每秒超过12个token。
自2022年12月ChatGPT爆火之后,科技公司们一头扎进了大型模型的竞争,2023年接连刷新模型参数,2024年开始“内卷”长文本。大家似乎默认数据越多、参数越大、算力越强,模型的能力越强。
但是,高昂的运行成本、具体场景模型调试难度等问题,让大模型商业化的路径慢下来。此时小模型的优势就体现出来了。
小模型,目前某些领域也能接近大模型的性能。特别是在各手机和PC厂商正在力推的AIPC、AI手机上,对设备计算能力、运行能力、储存能力要求较低,能在地化运行的小模型,的确是不错的选择。
其实早在2023年6月份,微软就发布了第一代Phi模型,Phi-3系列已经是其第四代产品。近期,苹果公司也凑了小模型的热闹。
2024年4月24日,在大模型上没有什么动静的苹果公司,发布开源小语言模型OpenELM,包括
Tags:
转载:欢迎各位朋友分享到网络,但转载请说明文章出处“画地成牢网”。http://www.tj-baode.com/news/23c83799139.html
相关文章
西华医疗美容门诊部侵权 赵丽颖打官司获赔3.3万元
知识西华医疗美容门诊部微信公众号登载文章侵权泉州网11月29日讯记者 黄墩良)今年最火的一部电视剧是什么?古装剧《楚乔传》当榜上有名,据称该剧网络播放量突破400亿次,主演赵丽颖更是红极一时。昨日,记者了 ...
【知识】
阅读更多杨政体测视频曝光!17折第二组慢了7秒,事后大腿拉伤,差距太大
知识杨政的体测吸引了无数人的关注,不过遗憾的是,最终他还是没有过。当然就体测的过程也曝光出来了。其中17折第一组跑得还算可以,无奈第二组开始他的体能就急剧下滑了,甚至慢了7秒多。并且在来到第三组和第四组之 ...
【知识】
阅读更多杨政半夜自宣退出体测:我有一定几率通过体测 但压力太大头都秃了
知识12月4日消息,此前,四川队新秀杨政一直在冲刺备战CBA体测,并且计划参加12月12日的体测。12月4日凌晨,杨政突然在社交媒体上宣布退出体测,表示自己压力太大了!此前,四川男篮新秀杨政在CBA体测中 ...
【知识】
阅读更多