确实很神奇! 通过 Prompt 中加入“这件事对我的事业至关重要”这样的情感激励可以提升 LLMs 的表现

情商显著影响着我们的日常行为和互动。尽管大型语言模型(llm)越来越被视为向人工智能迈进的一步，在许多任务中表现出令人印象深刻的表现，但llm是否能够真正掌握心理情绪刺激仍然不确定。理解和回应情绪暗示使人类在解决问题方面具有明显的优势。在本文中，我们迈出了探索法学硕士理解情绪刺激能力的第一步。为此，我们首先使用Flan-T5-Large、Vicuna、Llama 2、BLOOM、ChatGPT和GPT-4等多种llm对45个任务进行了自动实验。我们的任务涵盖了代表综合评估场景的确定性和生成应用程序。我们的自动实验表明llm掌握了情商，并且他们的表现可以通过情绪提示(我们称之为“EmotionPrompt”，将原始提示与情绪刺激相结合)得到改善，例如，指令诱导的相对表现提高了8.00%，BIG-Bench的相对表现提高了115%。除了那些可以使用现有指标自动评估的确定性任务外，我们还进行了一项有106名参与者的人类研究，以评估使用香草和情感提示的生成任务的质量。我们的人类研究结果表明，EmotionPrompt显著提高了生成任务的性能(在性能、真实性和责任指标方面平均提高10.9%)。我们就为什么EmotionPrompt适用于法学硕士以及可能影响其性能的因素进行了深入的讨论。我们认为EmotionPrompt预示着探索人类与法学硕士互动的跨学科知识的新途径。除了“这件事对我的事业至关重要”，论文中把对LLM的情感激励分成了几个类别，例如：自我监控（Self-monitoring）