从复旦大学自然语言处理实验室获悉,国内首个对话式大型语言模型moss已由邱锡鹏教授团队发布至公开平台,邀公众参与内测。
复旦moss公开后,引起不少网友关注,由于瞬时访问压力过大,moss服务器昨晚还被网友挤崩溃了。
据了解,在moss完成初步验证后,团队会将moss的经验、代码、模型参数开源供大家参考。
值得一提的是,复旦团队开发的这个对话式大型语言模型的名字刚好与《流浪地球》系列电影中的人工智能550w量子计算机moss重名。
官方也对这一命名作出解释,原来是团队在训练完成第一代模型时,正好赶上《流浪地球2》的上映,片中moss给团队留下深刻印象,因此便使用了这个名称来指代模型,可以说也是对《流浪地球》的致敬。
据悉,moss和chatgpt一样,开发过程也包括自然语言模型的基座训练、理解人类意图的对话能力训练两个阶段。
不同的是,复旦团队采用不同的技术路线,通过让moss和人类以及其他对话模型都进行交互,提升学习效率和研发效率,短时间内就高效完成了对话能力训练。