PulseAugur
实时 21:52:47
English(EN) AMA Prompting: ask the same question six ways, then learn which prompt to trust without any labels

AMA提示技术利用提示方差获得更可靠的LLM答案

一种名为AMA(Ask Me Anything)的新提示技术,通过将多个提示视为同一潜在答案的噪声测量来解决大型语言模型(LLM)输出的固有方差问题。AMA不试图消除提示方差,而是结合不同提示格式的输出来抵消单个提示的偏差。这种方法与多次采样同一提示的自洽性不同。该技术包括创建问题的不同“视图”,例如开放式问题或填空题,然后使用加权组合而不是简单的多数投票来聚合这些视图。 AI

影响 该方法通过提供一种更稳健的方式来聚合来自不同提示的答案,从而可以提高LLM输出的可靠性。

排序理由 该项目描述了一种新颖的LLM提示研究技术。[lever_c_demoted from research: ic=1 ai=1.0]

在 dev.to — LLM tag 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

AMA提示技术利用提示方差获得更可靠的LLM答案

报道来源 [1]

  1. dev.to — LLM tag TIER_1 English(EN) · Devanshu Biswas ·

    AMA Prompting: ask the same question six ways, then learn which prompt to trust without any labels

    <p>There is no perfect prompt.</p> <p>You already know this. Two prompts a human would call identical in meaning score ten or fifteen points apart on the same benchmark. You swap a word and undo a week of tuning. You ship the winner and it quietly regresses on live traffic.</p> <…