·据不完全统计,目前中国10亿参数规模以上的大模型已发布79个,14个省市/地区都在开展大模型研发,主要集中在北京和广东,其中北京38个大模型,广东20个大模型。中国大模型中,已有半数以上大模型开源,高校/科研机构是开源主力。
·北京、江苏、广东、上海等是大模型人才相对较多的地区,为大模型研发提供关键智力要素支撑。但人才总量仍然稀缺,大模型具有较高门槛,需要高素质AI人才,目前各地大模型人才数量均不充足。
中国10亿参数规模以上的大模型已发布79个,主要集中在北京和广东。
(资料图片仅供参考)
5月28日,在2023中关村论坛平行论坛之一的人工智能大模型发展论坛上,中国科学技术信息研究所所长赵志耘发布《中国人工智能大模型地图研究报告》,目前中国10亿参数规模以上的大模型已发布79个,主要集中在北京和广东,其中北京38个大模型,广东20个大模型。中国大模型中,已有半数以上大模型开源,高校/科研机构是开源主力。
2017年谷歌发布的Transformer网络结构是大模型发展的源头技术,自此以后大模型技术在自然语言理解、计算机视觉、智能语音等方面都取得了标志性的技术突破,在模型精度、通用性和泛化能力等方面都实现了跨越式发展。ChatGPT又进一步激发了语言大模型爆发式涌现,也吸引了大量研发团队投入到通用视觉、多模态等更多大模型研发方向。赵志耘表示,仅用5年多时间,大模型技术已形成庞大技术群,衍生出涵盖各种参数规模、各种技术架构、各种模态、各种场景的大模型家族。
从全球大模型发展态势来看,美国谷歌、OpenAI等机构不断引领大模型技术前沿,欧洲、俄罗斯、以色列等越来越多的研发团队也在投入到大模型的研发中。从全球已发布的大模型分布来看,中国和美国大幅领先,超过全球总数的80%,美国在大模型数量方面始终居全球最高,中国从2020年进入大模型快速发展期,目前与美国保持同步增长态势。
在中国大模型的发展态势中,赵志耘表示,据不完全统计,到目前为止中国10亿参数规模以上的大模型已发布79个,14个省市/地区都在开展大模型研发,主要集中在北京和广东,其中北京38个大模型,广东20个大模型。在模型领域分布上,自然语言处理仍是目前大模型研发最活跃的重点领域,其次是多模态领域,在计算机视觉和智能语音等领域的大模型还较少。在研发主体分布上,大学、科研机构、企业等不同创新主体都在参与大模型研发,学术界和产业界之间的联合研发仍不足。“今年以来大模型有着快速发展的态势,但我们同时也观察到了合作收缩的趋势,接下来需要注意。”
与此同时,算力-模型匹配度高,公共算力发展迅速。北京、广东、浙江、上海等地的大模型数量最多,这四个地方也是近三年人工智能服务器采购数量最高的地区。各地也在通过提供公共算力方式补充快速增长的人工智能算力需求,为大模型研发提供更多算力支持。
人才也是人工智能的重要支柱。北京、江苏、广东、上海等是大模型人才相对较多的地区,为大模型研发提供关键智力要素支撑。但人才总量仍然稀缺,大模型具有较高门槛,需要高素质AI人才,目前各地大模型人才数量均不充足。
“通过大模型的论文发布,我们可以看到中国大模型的学术影响力正在逐步形成。从区域影响力来看,北京、广东、上海三地无论是论文数量还是论文引用量都在国内最高。”赵志耘表示,清华大学与阿里和百度联合开发的CogView模型论文引用数最高。但与国外领先大模型的学术影响力相比差距仍然较大。
从开源创新生态上看,中国大模型中,已有半数以上大模型开源,北京、广东、上海三地开源数量和开源影响力均居国内前三。高校/科研机构是开源主力,“清华大学的ChatGLM-6B、复旦大学的MOSS以及百度的文心系列大模型开源影响力最高。”赵志耘表示。
中国大模型的产业化应用沿着两条路径发展,第一种是通用类大模型持续拓展应用领域,文心一言、通义千问、紫东太初、星火认知等中国一批通用化大模型正在快速发展,打造跨行业通用化人工智能能力平台,其应用行业正在从办公、生活、娱乐向医疗、工业、教育等加速渗透。第二种是垂直领域专业类大模型不断深化落地,一批针对生物医药、遥感气象等垂直领域的专业大模型发挥其领域纵深优势,提供针对特定业务场景的高质量专业化解决方案。
倡导加强资源和研发力量的统筹,促进大模型有序发展。
针对大模型发展的不足,赵志耘提出4点建议与展望:
一是加强资源和研发力量的统筹,促进大模型有序发展。通过加强智算中心、超算中心、云计算中心等计算资源的统筹,制定公共数据共享目录和共享规则,推动数据分级分类有序开放。
二是加快基础研究和技术创新,提升学术和开源影响力。大模型技术仍处于发展初期,潜在的基础理论和技术创新空间巨大。通过蒸馏、量化等小型化技术实现模型“瘦身”,为大模型小型化、绿色化发展提供技术支撑。进一步加强产学研合作,鼓励大模型开源开放,也将加速大模型技术进步。
三是强化大模型发展中的场景牵引作用,打造大模型标杆项目。以行业专有训练数据集为基础,打造金融、医疗、电力等领域的专业大模型,在特定业务场景实现高质量应用突破,也希望通过应用场景和应用数据反向促进大模型技术迭代升级。
四是强化国际合作,积极参与全球人工智能治理。以负责任的态度共同推动大模型的治理,希望人工智能的治理原则和伦理规范能够进一步在大模型的全链条中落地生根。同时在增进共识的基础上加强人工智能治理的全球合作。
标签:
据各方数据,1月31日上午10时许,深圳出品的动画电影《熊出没·伴我熊芯》票房突破10亿元,在首日票房、档期票房、连续破亿天数等多方面打
1月27日,携程发布的《2023年春节旅游总结报告》显示,今年春节,深圳游客的出境游订单量同比去年增长近5倍。相较国内热门景点的人山人海,
1月27日,记者从深圳市文化广电旅游体育局获悉,2023年春节黄金周期间(1月21日至27日),深圳共接待游客469 25万人次,旅游收入31 58亿元,
据深圳市春运办统计,1月15日和16日连续两天,深圳对外发送旅客人数都在48万左右,春运进入客流高峰期。1月15日,深圳春运对外旅客发送量达
新年音乐会是观众喜闻乐见的年度重要文化品牌活动,多年来已成为深圳市民跨岁迎新的例牌项目。12月30日、31日晚,深圳交响乐团将在深圳音乐
作为来深科研人员中的一员,中山大学附属第八医院的助理研究员郭雅婕对深圳在人才服务方面的举措赞不绝口:我作为基础研究人员,很希望自己
12月1日晚8点,2023年故宫年票正式开售。相比于去年,今年购票顺畅了许多。据了解,2022年故宫年票发售时,因短时间内购买年票人数过多,曾
昨日,冷空气到达,广州气温逐步下降。据商超方面预测,随着气温的逐渐下降,市民对于御寒类商品消费需求有所上升,不少广州商超准备了有关
小井盖、大民生。今年以来,深圳开展全市窨井盖专项治理工作成效显著。截至11月20日,全市共排查窨井盖约350万个,发现存在问题的窨井盖约3
备受关注的汕汕(汕头至汕尾)铁路汕头站及站区工程近日传出最新动态:项目已顺利完成工程招标工作,由中铁建设集团有限公司中标承建。目前,
问法预告丨对“公证事物”有疑问?5
公证是公证机构根据自然人、法人或者其他组织的申请,依照法定程序对民事法律行为、有法律意义的事实和文书
天天新资讯:青岛今天阴天间多云有阵
青岛市气象台今天早上6时发布:【青岛市区】今天白天,阴天间多云有阵雨,有轻雾,北风3到4级,今天夜间,
观焦点:加油满200元减30元,有青岛
5月14日,青岛市启动了本地“社会保障卡惠享山东行”活动,首批福利电子社保卡每周日加油满减优惠火热进行
头条焦点:致敬!军人小伙勇闯火海,
“多方打听,终于找到你了!”最近,北部战区海军某潜艇基地艇员队收到城阳一家企业专门送来的感谢信和锦旗
世界今头条!老楼加保温层,公共设施
5月27日,闽江路与闽江二路交界处,这里的楼体全部搭建起施工围挡,工人师傅在往楼上运送保温材料,准备对
角向磨光机如何使用_角向磨光机
1、角向磨光机适合用来切割、研磨及刷磨金属与石材。2、角向磨光机使用事宜:带保护眼罩。3、2、打开开关之
美国白宫和国会共和党人就提高债务上
当地时间5月27日,美国总统拜登和众议院共和党议长麦卡锡就提高联邦政府31 4万亿美元的债务上限达成原则性
最高奖励200万元!惠州拿出真金白银
支持政策再“加码”!5月23日,惠州出台《惠州市工业经济稳增长若干措施》,从支持工业企业扩产增效、支持
免费qq币领取如何快速赚q币_免费qq币
免费qq币领取如何快速赚q币,免费qq币这个很多人还不知道,现在让我们一起来看看吧!1、建议这样,获得免费Q
中移在线完成 1050 套欧拉操作系统
IT之家从官方获取到,本次迁移工作涉及17个分中心,1000+业务实例,首次使用openEuler「三热」特性(内核热
生存质量测定方法及应用_关于生存质
生存质量测定方法及应用,关于生存质量测定方法及应用介绍这个很多人还不知道,我们一起来看看!1、《生存质
生存调查_关于生存调查介绍 微速讯
生存调查,关于生存调查介绍这个很多人还不知道,我们一起来看看!1、生存调查。2、原指保险实务操作之一。3
观焦点:加油满200元减30元,有青岛
5月14日,青岛市启动了本地“社会保障卡惠享山东行”活动,首批福利电子社保卡每周日加油满减优惠火热进行
人力资源资格证报考条件要求_人力资
1、人力资源职业资格证考试有三级和二级的,报考条件也不同人力资源管理师三级报考条件是比较宽松的(符合其
夏季使用空调前,别忘了做这事
进入夏季,闲置已久的空调将迎来使用高峰期。记者走访了解到,近期,不少市民已经开始使用空调,而对空调清
建设工程项目管理标杆观摩交流会在穗
中国青年报客户端讯(夏子涵中青报·中青网记者林洁)近日,“协同策划,精益建造,打造全生命周期客户满意
沙特和美国呼吁苏丹冲突双方延长停火
当地时间28日凌晨,沙特与美国发表联合声明,呼吁苏丹冲突双方延长目前的临时停火协议。声明说,协议延长将
马丁:不管是打替补还是首发 我就是
东部决赛G6,热火主场103-104惜败凯尔特人,大比分被扳成3-3。赛后,马丁接受了采访。谈到首发时,马丁表示
高考临近,考生备考忙_全球视点
随着高考临近,我市的高三学子都在积极备战,学校也从考生的课程、作息、心理等方面做出了全面安排部署,护
生存的选择_关于生存的选择介绍 当
生存的选择,关于生存的选择介绍这个很多人还不知道,我们一起来看看!1、《生存的选择》是2000年山东科学技
世界今头条!老楼加保温层,公共设施
5月27日,闽江路与闽江二路交界处,这里的楼体全部搭建起施工围挡,工人师傅在往楼上运送保温材料,准备对
电影《乔治娅》观摩座谈会召开 专家
1905电影网讯近日,温情现实主义题材的电影《乔治娅》点映场及映后座谈会在中国电影家协会举行。《乔治娅》
又见抢七!巴特勒:我们去年也打了G7
东决G6,热火103-104不敌绿军,大比分3-3被拖入抢七。赛后,巴特勒接受了采访。谈到抢七时,巴特勒表示:“
生存策略_关于生存策略介绍
生存策略,关于生存策略介绍这个很多人还不知道,我们一起来看看!1、生存策略是指适应于获取和利用资源的生
第二届“活力海珠杯”公开赛揭幕-环
文 羊城晚报全媒体记者苏荇2023年海珠体育荟·第二届“活力海珠杯”浙商银行系列公开赛5月27日正式启动。赛
整容遭遇价格欺诈如何办_世界观热点
整容遭遇价格欺诈怎么办,与经营者协商解决。即与经营者协商,把所购买的商品或所得的服务退换、维修或作适
补锌最好最简单的方法?-动态焦点
1、补充水果:如苹果、草莓等,富含多种微量元素,包括一定量的锌元素,可以通过适量食用水果补锌;2、多吃
头条焦点:致敬!军人小伙勇闯火海,
“多方打听,终于找到你了!”最近,北部战区海军某潜艇基地艇员队收到城阳一家企业专门送来的感谢信和锦旗
惠州:6岁儿童误含高锰酸钾片!近期
小朋友喜欢用嘴巴探索世界殊不知,危险暗藏其中。近两个月,市中心人民医院急诊医学科就接诊了7例因误服药
天天热点!国内数学大师纷纷发来贺信
5月27日上午,由半岛都市报社和青岛中学联合举办的“半岛·青中杯”数学思维邀请赛颁奖典礼在青岛中学中心