清华团队推出谈话机器人ChatGLM,会中文和英文,能问答谈话
发布时间:2023-03-24 13:03:15 所属栏目:动态 来源:
导读:近日,在GPT-4发布的同一天,清华大学顶尖的NLP团队也公开了自研的ChatGPT大模型——中英双语对话模型ChatGLM-6B,这是一个初具问答和对话功能的千亿中英语言模型,并针对中文进行了优化。需要注意的是,目
|
近日,在GPT-4发布的同一天,清华大学顶尖的NLP团队也公开了自研的ChatGPT大模型——中英双语对话模型ChatGLM-6B,这是一个初具问答和对话功能的千亿中英语言模型,并针对中文进行了优化。需要注意的是,目前ChatGLM每轮对话最多只可以进行5个来回,每次最多输入1000字。 据官方介绍,ChatGLM参考了ChatGPT的设计思路,在千亿基座模型GLM-130B中注入了代码预训练,通过人工智能监督手段的微调等技术手段来实现与原来的人类设计师的意图对齐。 ChatGLM官方博客中提到,该模型基于General Language Model(GLM)架构,具有62亿参数。结合模型化技术,用户可以在消费级的显卡上进行本地部署。ChatGLM-6B使用了和ChatGLM相同的技术,针对中文问答和对话进行了优化。经过约1T标识符的中英双语训练,辅以监督微调、反馈自助、人类反馈强化学习等技术的加持,62亿参数的ChatGLM-6B虽然规模不及千亿模型,但大大降低了推理成本,提升了效率,并且已经能自动生成相当符合现实的人类偏好的电子邮件回答。 当问起它和ChatGPT的区别时,它表示:“我和ChatGPT都是基于人工智能技术的语言模型,但我们在设计和应用场景上有所不同。ChatGPT是由OpenAl开发的,旨在与人类进行对话的大规模语言模型,其应用场景主要是回答人类的问题或者提供信息;而是清华大学KEG实验室和智谱AI公司于2023年共同训练的语言模型GLM-130B,主要用于中文问答、提供建议和支持等日常交互场景。” (编辑:汽车网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |
推荐文章
站长推荐
