语言模型表征与机理
分析模型内部如何编码、组织和调用语言知识,解释能力形成与模型行为背后的计算机制。
表征分析机制解释行为分析
Computational Linguistics & Consciousness Sciences Lab
- 我们研究不同时间尺度与动态环境中,人类语言的使用、理解、学习和演化,并以计算方法探索语言、智能与意识之间的深层联系。
- 欢迎有志于从事人工智能、计算语言学、心理语言学、认知科学等领域研究的同学加入。
分析模型内部如何编码、组织和调用语言知识,解释能力形成与模型行为背后的计算机制。
研究语言模型的推理路径、结构化生成与能力边界,探索更有效且可解释的推理方法。
研究模型何时知道、何时不知道,刻画置信度与知识边界,并让模型在不确定时作出恰当反应。
从频谱、统计规律和心理语言学信号出发,识别机器生成文本并衡量生成质量与人类偏好。
研究模型如何存储、遗忘和更新信息,以及在连续场景中保持长期记忆和适应新知识的能力。
连接心理语言学、眼动与行为实验和计算模型,比较人类与机器在语言理解和判断上的异同。
一作为课题组博士生安浩,论文提出结合正确性与语义熵不确定性的联合微调方法 FiSCoRe。
阅读全文祝贺黎永源同学!
阅读全文祝贺所有作者,其中两篇论文入选 Main Conference Oral。
阅读全文