5月20日至23日,“一带一路”国际科学组织联盟发起、广东省人民政府主办的2023大湾区科学论坛在广州举行。在21日的主论坛上,中国工程院院士、鹏城实验室主任高文表示,我们正在启动中国算力网的建设,希望在将来实现算力像电力一样“即插即用”,无论用户、算力在哪里,通过算力网络就能随意调配算力资源。
中国工程院院士、鹏城实验室主任高文
高文指出,ChatGPT之所以对整个技术发展带来如此大的冲击,最关键的在于它使用了大模型,算力、数据和算法三者的结合是大模型的核心。为应对日益增长的算力需求,鹏城实验室于2020年研制人工智能大型科技基础设施“鹏城云脑II”,该系统已连续五次蝉联衡量系统数据吞吐能力的IO500排行榜冠军,目前已支持了包括“鹏程·盘古”、 “鹏城-百度·文心”等大模型的训练和应用,为企业和高校在人工智能应用方面也起到了很好的支撑作用。
“鹏城云脑II”搭载了4096颗AI芯片,每颗芯片的算力与A100相当,整机算力达到每秒100亿亿次AI运算,而未来要搭建的下一台机器,总体算力规模是“鹏城云脑II” 的16倍,是训练GPT3.5模型所需的微软算力的3倍,将为人工智能训练持续提供强有力的算力支持。高文表示,为更好达成以上目标,鹏城实验室正推动一个大模型的开源和大模型的底座训练工作,通过构建完整的创新体系、开源的办法等,促进AI大底座在各个领域的应用,向社会、企业、行业赋能。