清华大学刘知远:我们的使命就是要把模型装到距离用户最近的地方去

来源: 极目新闻
2024-07-05 14:06:32

  2024世界人工智能大会暨人工智能全球治理高级别会议于7月4日在上海举行。清华大学计算机系长聘副教授、面壁智能首席科学家刘知远出席并演讲。

  刘知远谈到,未来的大模型是云端协同的模式。既要有云上极强的system two大模型,也需要充分的去利用端侧的算力来形成sy stem one大模型。

  他谈到,在端侧上,可以有非常快的毫秒级的响应,每秒可以有40个token的生成能力。也可以在飞行模式下,只利用端侧的算力,完成相关的计算。这也能够充分注重用户的相关的隐私数据,不上网就可以在端侧完成相关的计算,所有的这些都需要依赖端侧模型的支持。而本身mobile ctm已经预装了数十种相关的intent,可以帮助我们一键完成相应的包括机器翻译、人设等等大模型的预设的一些能力。

  在刘知远看来,通过研发这种端侧模型,形成端侧的生态,将会揭开端侧AI的生态序幕。

  我们会看到,端侧既有像智能手机、穿戴设备、聚身智能、智能家居、汽车、PC等非常多样的场景。这些场景的端侧算力其实是远远没有被挖掘的。“我们需要利用端侧的模型来充分的去挖掘在端侧上的应用,我们的使命就是要把模型装到距离用户最近的地方去,”他说。

  新浪声明:所有会议实录均为现场速记整理,未经演讲者审阅,新浪网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。

责任编辑:李昂

<strong>  旅行者号“超时加班”</strong>

  请在乘机过程中坚持佩戴口罩,做好个人防护,降低染疫风险。

  郭燕红介绍,截至1月19日,全国基层医疗卫生机构共配备了247.8万个指氧仪、19.1万台制氧机,乡镇卫生院常用药物配备状况持续改善,基层医务人员队伍不断扩充。

  银行业内人士认为,随着动态调整机制的建立,预计后续将有更多城市下调首套房贷款利率。

  吴庄收费站是河南、安徽乃至中西部地区通往江浙沪的主要门户之一,成为了近日关注焦点。据人民网报道,今年春运前十天,相比2022年春运,吴庄站入口流量同比增加88.72%,其中1月12日一天,吴庄站入口流量达到惊人的8.43万辆,同比增长七成多,是2022年平时入口均流量的7.5倍。

  随着人才队伍的稳定,村里的产业项目越来越多。除69座大棚外,还有有机蛋鸡养殖、海红果树基地、观光旅游等产业,逐渐形成“公司+合作社+基地+农户”的业态模式,创造了1500多个就业岗位。2022年,榆岭窊村集体经济收入超过100万元,村民人均可支配收入达9.8万元。

苏秀柔

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有