可以单机运行的ChatGLM-6B发布

清华技术成果转化的公司智谱 AI 开源了 GLM 系列模型 ChatGLM-6B,这是一个支持中英双语的对话语言模型,基于 General Language Model (GLM) 架构,具有 62 亿参数。结合模型量化技术,用户可以在消费级的显卡上进行本地部署(INT4 量化级别下最低只需 6GB 显存)。

chatglm1 1
ChatGLM-6B

ChatGLM-6B 使用了和 ChatGLM 相同的技术,针对中文问答和对话进行了优化。经过约 1T 标识符的中英双语训练,辅以监督微调、反馈自助、人类反馈强化学习等技术的加持,62 亿参数的 ChatGLM-6B 已经能生成相当符合人类偏好的回答。

ChatGLM-6B 是智谱 AI 在开源社区贡献的重要成果之一,也是清华大学在自然语言处理领域的创新突破之一。智谱 AI 希望通过开源 ChatGLM-6B 模型,促进对话系统的发展和应用,并与广大开发者和研究者共同探索更高效、更智能、更人性化的对话交互方式。

ChatGLM
ChatGLM-6B

目前ChatGLM-6B 的不足可能包括以下几点:
它需要遵守特定的许可协议,不能用于商业目的或者侵犯他人权利。
它可能存在一些生成质量不高或者不符合人类偏好的回答,需要进一步改进模型或者引入人类反馈。
它可能没有覆盖到所有的中英文自然语言处理任务,需要根据不同的场景进行适当的微调或者适配。

ChatGLM
ChatGLM-6B

ChatGLM 基于 智谱 AI GLM-130B
GLM-130B 是一个开源的、支持中英双语的双向密集模型,具有 1300 亿参数,使用 General Language Model (GLM) 算法进行预训练。它可以在单个 A100 (40G * 8) 或 V100 (32G * 8) 服务器上支持带有 1300 亿参数的推理任务。结合 INT4 量化技术,可以降低硬件要求。

GLM-130B 是目前最大规模的开源双语预训练模型之一,也是 GPT-3 级别的模型之一。它在多个中英文自然语言处理任务上都取得了优异的表现。
在线版的chaglm 目前还在内测阶段。 根据测试大模型的各项能力都已经接近chatgpt。

以上是小文智能对于ChatGLM-6B的相关介绍。我们是一家专业的数字人厂商,采用小文智能自研的人机交互技术和算法,具有高质量的语音识别、视觉识别、语义理解、情感分析和智能推荐能力;可以在多种平台上运行,包括智能手机、电脑、智能音箱等,为客户提供全天候的智能服务;模拟真实人类的外貌、语言和行为,可以与用户进行真实的对话和互动;可以根据客户的需要进行定制化开发,可以满足客户的特定需求和业务场景。我们的数字人已经成功应用于多个行业和领域,如金融、医疗、零售、制造等,拥有众多忠实客户和合作伙伴。如果您想了解更多关于数字人的信息和解决方案,请联系我们的专业团队,我们将为您提供最优质的服务和支持。需要体验小文智能数字人的更多应用,可登录小文智能官网