奉天承運網(wǎng)

　　低成本、上线快、易调试，可在特定任务上反超通用大模型　　轻量化小模型兴起，中小企业也能搭上AI“快车”　　阅读提示　　随着人工智能快速发展迭代，一些企业开始押注小模型。相较大模型，低成本、上线快、易调试的小模型，以更高的性价比为中小企业和个人用户提供了打开人工智能大门的钥匙。　　近两年，人工智能快速发展迭代，大语言模型如雨后春笋般涌现，文本生成、文生图、语音处理、代码处理、视频处理等生成式人工智能走进人们的生活。同时，一些企业开始发力研发可在电脑、手机端训练的轻量化小模型。　　“我们需要高铁、飞机、游轮等大型交通工具，也需要私家轿车、公交车，以及摩托车、自行车等小型交通工具。因为在不同场景下，不同人群有不同需求。”在青岛自然语义公司联合创始人、首席架构师孙燕群看来，满足特定市场的需求，是专而精的小模型兴起的重要原因及其存在的价值。　　今年3月，自然语义研发的Euler模型通过中央网信办生成式人工智能服务备案。不同于大模型动辄千亿级的参数量，Euler的参数量只有2.5B(25亿)，是典型的轻量化小模型。相较于大模型，小模型有何特点？应用前景如何？记者对此进行了采访。　　低成本、易调试的端侧小模型兴起　　关于小模型，目前并没有明确定义。孙燕群表示，在行业内，参数量低于100B的模型就算比较小的模型。在实际应用时，要想在笔记本电脑端实现微调，模型参数量一般在3B左右。　　相较大模型，小模型在算力消耗、使用成本方面更具优势。具体来说，一是训练和推理所需的硬件资源较少，使得成本较低；二是使用更便捷，可在手机、电脑、物联网设备等计算场景中实时运行；三是结构简单，开发者能快速定位问题，易于调试。　　记者了解到，随着大模型的比拼日益激烈，一些企业开始押注小模型。2024年8月，微软和英伟达就相继发布过小型语言模型。国内不少企业也开始研发在“断网、弱网”环境下，让各种智能终端具备自主思考能力的端侧小模型。例如，在今年3月举办的中关村论坛年会期间，北京的面壁智能公司就发布了应用于汽车智能座舱的纯端侧超级智能助手。今年1月，广东佛山移动牵头联合40家单位成立佛山市AI小模型产业联合体，致力于通过人工智能小模型提供个性化服务，助力企业完成智能化升级。　　“小模型让我们实现了与科技巨头们的错位竞争。”提到小模型的具体应用场景，孙燕群举例说，Euler通过备案后，已经开始面向中小企业和个人用户提供服务。如与山东某市级档案馆合作，上线了档案模型；与青岛当地一家仪器仪表设备公司合作，开发了内网技术相关的模型。　　退而求其次后的“主动作为”　　“客观来说，大模型的能力强于小模型，一个参数量2.5B的模型无论如何都不可能超过200B模型的算力。”孙燕群直言，这也是大公司都在做千亿级模型的原因。模型小，神经网络参数就少，容纳的知识量不够，“体现在文本生成上，就是容易出现上下文不连贯的情况”。　　自然语义最初的目标并不是小模型。2019年底，该公司考虑要做大模型，但由于发展方向不明朗，同时在购买高算力GPU上面临资金和货源压力，因此未能实施。　　“没想到，仅过了两年时间，国外的大模型就发布了。”孙燕群回忆说，后来随着越来越多大企业涌入大模型赛道，作为基础硬件的高算力GPU价格水涨船高。“那段时间，听说哪里有GPU，我们就坐飞机去买，常常是提前交了定金也不一定能买到。”最终，公司用10多台设备组成一个算力集群，能支撑做出7B参数的模型。　　为了在现有设备基础上尽可能提高参数，自然语义公司工程师经过头脑风暴，想出了新的分词方式，以及将向量计算从实数空间转换到复空间等各种办法。“经过模型训练，这些技术都达到了比较好的效果，能让一个3B参数的模型，达到了150B参数模型60%左右的能力。”孙燕群表示。　　中国信息通信研究院人工智能研究所副总工程师王蕴韬告诉记者，小模型之所以能在“瘦身”后仍保持可观性能，得益于一系列成熟的模型压缩与高效架构技术，包括剪枝、量化、知识蒸馏、设计先天高效的网络架构等。　　让“小身材”跑出“大能量”　　“小模型发展大有可为。”在王蕴韬看来，未来面向特定应用场景的小模型，潜力将会进一步释放。以AI终端为代表的应用形态及产品服务，将成为小模型释放大能力的主战场。　　关于小模型的应用前景，王蕴韬进一步解释，一是为离线办公、文档摘要、私密对话等场景铺平道路；二是随着处理器架构和神经处理单元技术的应用，手机、车载和物联网设备将成为小模型的天然舞台；三是在垂直领域与“专精特新”行业，如金融、医疗、法律、教育等已出现6B及以下参数的定制模型，成本低、上线快，可在特定任务上反超通用大模型。　　“市场关心的是能否解决实际问题，不关心背后模型细节，能够与场景深度结合，拥有行业知识，尤其是可信的小模型至关重要。”王蕴韬说。　　从用户端来看，在实际应用中，小模型的性价比优势也十分明显。北京某互联网公司算法工程师张先生向记者表示，在现有技术条件下，想要在本地部署大模型存在一定难度。“专业GPU芯片价格太高，无法应用到低价格的终端上，如手机、机器人等配备的芯片就无法撑起大模型。另外，这些终端所配备的电池，往往也支撑不了高性能芯片的耗电等。”张先生表示，这些硬件性能有限的终端，更适合小模型施展。　　王蕴韬分析认为，未来将是大小模型混合的系统范式。“云端大模型负责通用推理，端侧小模型承担即时响应与私域数据处理。”他还强调，小模型并非“大模型的低配版”，而是面向资源受限环境与专用任务的高性价比解法。通过配合端云混合部署和行业数据精调，企业完全可以让“小身材”跑出“大能量”，在AI商业落地的下一程中获得确定性收益。(工人日报 记者 陶稳) 【编辑:惠小东】

• 首頁
• 知識
• 娛樂
• 時尚
• 熱點
• 休閑

網(wǎng)站分類

• 知識
• 焦點
• 百科
• 娛樂
• 熱點
• 休閑
• 時尚
• 綜合

熱門文章

• 紅十字國際委員會再次緊急呼吁保護加沙地帶醫(yī)療機構(gòu)
• 以戲劇鏈接情感，中外家庭在滬演繹家庭溫暖
• 吉大二院：讓以人為本的醫(yī)療服務(wù)更多一點
• 現(xiàn)代農(nóng)業(yè)脫口秀｜“百草之王”重生之長白山下的逆襲
• 新疆拾光｜穿越絲路 聽龜茲壁畫“奏響”千年樂舞篇章
• 通化市：農(nóng)煥“新” 地生“金”
• 新華吉林快報丨長春新民大街歷史文化街區(qū)7月5日正式開街
• 以賽為媒 以體興城——“雙奧冠軍之城”長春加速打造“賽事名城”新名片
• 四川啟動四級防汛應(yīng)急響應(yīng)
• 街鎮(zhèn)直通車
• 對問題玩具“零容忍”，監(jiān)管必須敢于“亮劍”！
• 吉林省柳河縣頒發(fā)林下山參不動產(chǎn)權(quán)證書
• 上半年經(jīng)青茂口岸出入境旅客量創(chuàng)新高
• “加餐”“蓋被” 為黑土地“增肥”
• 長三角醫(yī)學(xué)院校研討黨建引領(lǐng)人才培養(yǎng)

友情鏈接

• 教皇專用！純電奔馳G580定制車正式交付
• 全是草臺班子：經(jīng)銷商因為名字太接近錯發(fā)英特爾顯卡
• 豪華MPV車型再加一，奇瑞星途星紀(jì)元E08首輪冬標(biāo)車下線
• 豐田GR SUPRA TRACK版官圖亮相！誰還敢說豐田是“老頭樂”？
• 第三季度全球半導(dǎo)體廠商收入排名：英偉達僅排第七，韓美企業(yè)霸榜
• 自定義網(wǎng)格線竟是好生意，佳能相機需要付費近千元升級
• 松下G97、ZS99雙機發(fā)布，無反、便攜相機任君選擇
• 純電買菜車？豐田Urban Cruiser發(fā)布
• 華為Mate 70系列：因為怕偏色，所以全點了色準(zhǔn)
• ChatGPT全球宕機沖上熱搜，或與iOS 18.2 正式版推送有關(guān)
• 印度“秦始皇”上線，要求手機和筆記本統(tǒng)一使用USB
• 聯(lián)想發(fā)布“一體多端”戰(zhàn)略：YOGA與moto razr攜手帶來AI新體驗
• iPhone保值率沖上熱搜，蘋果官宣iPhone比安卓保值率至少高40%
• vivo X200標(biāo)準(zhǔn)版配置曝光，距離“真香機”尚有段距離
• 長虹展示海量智慧硬件：用科技助力行業(yè)智能化
• B站給首批用戶送了定制金幣，年齡雖超35歲但仍是“二次元”
• 戴爾AI PC解鎖五大應(yīng)用場景：帶來AI全新勢能
• 戴爾AI PC解鎖五大應(yīng)用場景：帶來AI全新勢能
• 繼續(xù)卷！吉利銀河E5更多信息曝光，預(yù)售13萬元起
• 削減10%產(chǎn)能，關(guān)閉常州工廠！日產(chǎn)在中國的好日子，到頭了？

© 2025. sitemap