• 最近访问:
发表于 2024-07-08 01:10:00 股吧网页版
WAIC 2024|面壁智能CEO李大海:端侧模型是大模型走进千家万户、千行百业的关键
来源:广州日报新花城

  “打造全球领先的轻量高性能大模型,进行知识密度的压缩,已经成为大模型未来竞争新的重要方向。端侧模型有独特的生态位,它离用户更近、更能匹配个体和企业单位数据隐私的需求,是大模型走进千家万户、千行百业的关键。”面壁智能联合创始人、CEO李大海在2024世界人工智能大会(WAIC) “长三角协同创新AI新质生产力发展论坛”上表示。

  在记者的专访中,李大海进一步阐述了端侧模型的显著优势。首先,端侧模型在隐私安全方面表现卓越,能够更有效地处理用户的隐私数据,因为这些数据不会离开用户的设备。利用这些数据,端侧模型在提供个性化服务方面具有明显优势。另外,未来有许多场景对终端大模型的推理能力有很高的可靠性要求,这些场景非常适合端侧模型的应用和发展。

  “首先,端侧模型本质上是一种私有化部署,因此端侧模型与私有化部署并不是相互矛盾的分类,这是需要明确的第一点。”李大海表示,其次,随着端侧模型性能的增强,它们相较于传统的私有化部署方式,提供了更多的便利和成本效益。例如,在推理过程中,用户无需额外购买专业的GPU显卡,因为端侧设备上的GPU已经足够使用,这在成本和隐私安全方面赋予了端侧模型明显的优势。然而,端侧模型的功能有其局限性。当面临超出其处理能力范围的复杂任务时,就需要依赖更强大的模型来完成。因此,端侧模型和私有化部署之间实际上是一种配合关系。

  李大海表示,面壁智能的MiniCPM端侧模型代表了这一趋势,依托于扎实的原创性AI技术底蕴,面壁智能是世界范围内对高效大模型探索最为前列的大模型团队之一,目前已完成了贯彻高效训练、高效落地与高效推理的大模型全栈技术生产线布局。

  据悉,面壁在今年 2 月份的时候,开始推出面壁小钢炮MiniCPM系列端侧模型,在2月1日发了第一版,4月发了第二版,5月发了2.5的版本。在2.5版本上,以1%的参数规模,形成了可以跟去年GPT-4V和Gemini Pro的多模态能力对标的一个模型,模型参数只有8B大小。

  然而,“尽管端侧大模型具有这些优势,它们仍然只是整个AI解决方案的一部分。我们相信‘端’和‘云’协同在一起,才能够完整地把用户的需求满足好。”李大海强调。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
郑重声明:用户在社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-34289898 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:021-54509966/952500