当前位置:首页>财经

学者:大型语言模型技术快速演进 对人类诚实、有助、无害最重要

日期:2023-04-05

来源:玫瑰财经网

浏览:

    学者:大型语言模型技术快速演进 对人类诚实、有助、无害最重要

    上海4月4日电(记者 陈静)复旦大学计算机科学技术学院教授、MOSS系统负责人邱锡鹏4日对记者表示,好的语言模型需要更好地理解语言与常识。情景学习、思维链和自然指令学习是语言模型的关键技术。

    邱锡鹏教授认为,大型语言模型技术的快速演进,已经给人类展现出一个通向“通用人工智能”未来的大框架,下一步最重要的是让大模型和现实世界“对齐”,保证模型对人类的可信、诚实、有助、无害至关重要。

    邱锡鹏解释,情景学习,即在上下文语境中学习的能力。语言模型会在“提示词”(prompt)中附带一些例子作为“上文”输入,再预测并输出下文,这就改变了传统的学习范式,可以大幅降低下游开发成本。

    思维链,指的是做大模型示例的时候不要只给答案,也要给它推导过程,语言模型学习这个推导过程,最终给出一个正确的答案。他认为,这是突破模型参数约束、实现“涌现”能力的关键技术。自然指令学习,则是让模型能直接理解人类指令,模型从指令中学习判断能力,不断“对齐”人类的真实意图。

相关文章阅读

Copyright (c) 2022 玫瑰财经网 版权所有

备案号:冀ICP备17019481号

玫瑰财经网发布此信息的目的在于传播更多信息,与本站立场无关。玫瑰财经网不保证该信息(包含但不限于文字、视频、音频、数据及图表)全部或者部分内容的准确性、真实性、完整性、有效性、及时性、原创性等。
相关信息并未经过本网站证实,不对您构成任何投资建议,据此操作,风险自担。