日前智谱AI方面宣布推出自主智能体AutoGLM,并已在PC端开放,仅需安装清言插件即可使用,手机端AutoGLM则已开放安卓版的内测。同时其还推出了端到端情感语音模型GLM-4-Voice,可模拟真实的情感表达,实现富有情感的自然对话。
据了解,AutoGLM基于自进化在线课程强化学习框架WEBRL,克服了训练任务稀缺、反馈信号稀少和策略分布漂移等网页智能体研究和应用难题,由于采用了自适应学习策略,因此能够在迭代过程中不断改进、持续稳定提高自身性能。目前其可适配微信、淘宝、美团、小红书等应用,已覆盖常用的线上聊天、网购、社交、地图、酒店火车订票等功能。
具体而言,AutoGLM能够仅靠接收简单的文字/语音指令,模拟出人类与设备的交互方式,从而完成给定任务,例如在小红书/知乎/知网等平台进行检索、筛选、打开网页、阅读、并总结,一次性快速浏览多个网页等。理论上可完成人类在相关设备上可以做的任何事,并且不受限于简单的任务场景或API调用,也不需要手动搭建工作流,操作逻辑与人类类似。
据悉,为了保护用户隐私,AutoGLM不会主动获取用户的相关信息,如需执行授权范围之外的任务,则将会主动提示以获取用户同意。此外即便用户向其进行授权,也不意味AutoGLM将永久拥有相关权限,每次从后台启动后其都会重新向用户申请无障碍权限。
而GLM-4-Voice语音模型则是在GLM-4-9B基座模型的基础上,以海量音频和音频文本交错数据预训练而成,可流式交替输出文本和语音两个模态的内容,并能根据语音指令变化做出相应的声音变化,最低只需输出20个token便可以合成语音。目前其支持中英文语音,尤其擅长粤语、重庆话、北京话等,后续还将上线视频通话功能。
值得一提的是,在不久前举办的骁龙峰会上,智谱方面宣布与高通展开合作,将GLM-4V端侧视觉大模型面向骁龙8至尊版进行深度适配和推理优化,从而支持丰富的多模态交互方式,赋能更加情境化、个性化的终端侧智能体验。对此智谱COO张帆表示,骁龙8至尊版移动平台提供了卓越的AI算力,结合高通AI软件栈推理框架的性能优化,使得智谱的终端侧大模型可以在设备端实现高速推理。
此外三星方面也已与智谱达成战略合作,将三星AI硬件的优势和对标全球体验的应用场景与智谱GLM大模型结合,携手打造更优质、个性化的AI手机和智能服务。此前在今年9月,智谱与荣耀方面签署了AI大模型技术联合实验室战略合作协议,进一步探索基于用户场景的端侧AI智能体验,共同推动智能终端领域大模型技术和应用创新,并通过荣耀手机等全场景产品为用户带来更智慧便捷的AI服务。