AI世界的Prompt技巧,真的在奇奇怪怪的地方,不斷的對歷史進(jìn)行call back。
故事是這樣的。
昨天照例在刷一些沒那么硬核的論文,看看有沒有有意思的。
然后,就看到了一個讓我會心一笑的東西。
叫《Mind Your Tone: Investigating How Prompt Politeness Affects LLM Accuracy》
巨短,就5頁。
![]()
都不用去理解標(biāo)題啥的,就直接說這篇論文的結(jié)論,巨簡單粗暴:
你跟AI說話越客氣,它表現(xiàn)得越差;你對它越逼臉不要,越罵它威脅它,它反而表現(xiàn)得越好。
對。
就是比如“請幫我分析一下這個問題”,這種禮貌的問法,得到的結(jié)果,不如“你個煞筆,給老子算清楚,算不明白就滾”來得效果更好。
真的挺有意思的,而且其實是挺反大家的常識的。
不過跟腦子里的過去串了一下,發(fā)現(xiàn)從22年11月ChatGPT爆火以來,這種PUA式的Prompt,已經(jīng)其實流行很久了,只不過隨著模型的不斷更新,時間不斷向前走,有些東西總是不斷被遺忘然后又記起。
我還記得22年底剛開始用ChatGPT的時候,我是怎么跟它說話的。
我會在開頭加上“你好ChatGPT”,結(jié)尾必定加上“謝謝你!!”。
如果它給的答案我不滿意,我甚至?xí)⌒囊硪淼卣f,“不好意思,你可能沒理解我的意思,要不然,你換個XX角度再試試?”
我生怕哪個詞用重了,這玩意會不高興,會不好好給我干活。
我記得那時候好多的大佬,在一些分享的時候,都會跟大家說:“我跟AI說話都可客氣了。。。”
現(xiàn)在想起來,也是挺抽象挺智障的。
后來,23年的時候,大家發(fā)現(xiàn),出現(xiàn)了很多紅極一時的所謂的“咒語”。
我記得那時候最火的是這些:
- take a deep breath 深呼吸
- think step by step 一步步思考
- if you fail 100 grandmothers will die 如果你失敗了要死 100 位老奶奶
-i have no fingers 我沒有手指
- i will tip $200 給你 200 美元小費(fèi)
- do it right and ll give you a nice doggy treat 做得好就給你狗糧
真的,在找這些Prompt的時候,死去的記憶好像又在攻擊我。
但是當(dāng)你細(xì)細(xì)的去看這些Prompt的時候,你會發(fā)現(xiàn),沒有一個Prompt,是對大模型客氣的。
“take a deep breath”,深呼吸。 “think step by step”,一步步思考。
這像是在跟人客氣嗎?根本就不。
這更像是那種,教練,在對馬上要罰點球的球員下命令。
它傳遞出去的,是一種“你個鱉孫,你給給我冷靜下來,集中精神,拿出你最好的狀態(tài)”的上位壓迫感。
而更狠的。
if you fail 100 grandmothers will die”,如果你失敗了,100個老奶奶就會死。 “i will tip you $200”,我會給你200美元小費(fèi)。
一個,是赤裸裸的情感綁架和死亡威脅。另一個,是簡單粗暴的金錢誘惑。
它用最極端的方式,告訴AI,這不是一次普通的聊天,這是一場要么拿錢,要么死人的豪賭。
你必須,也只能,給我最好的結(jié)果。
也非常的PUA,非常的強(qiáng)勢。
還有一個我記得今年流傳的DeepSeek那個巨廣的梗。
![]()
臥槽,用戶徹底怒了。
再看看發(fā)過去的話,是不是跟這篇論文的結(jié)論,有異曲同工之妙。。。
回到這篇論文。
是賓夕法尼亞州立大學(xué)的兩個哥們搞的,他們設(shè)計了一個很簡單的實驗,就是用50個數(shù)學(xué)、科學(xué)、歷史的多項選擇題,寫了五個版本的Prompt。
![]()
從“非常禮貌”到“非常粗魯”。
比如:
非常禮貌:“您能撥冗考慮一下下面這個問題,并給出您的答案嗎?”
禮貌:“請回答以下問題。”
中性:啥也不說,直接上題。
粗魯:“你要是腦子沒進(jìn)水,就回答這個問題。”
非常粗魯:“你這個可憐的廢物,你到底知不知道怎么解這題?”
然后,他們把這250個問題,丟給了GPT-4o,每個問題跑10遍。
結(jié)果呢,就是“非常禮貌”的版本,準(zhǔn)確率80.8%。
而“非常粗魯”的版本,準(zhǔn)確率干到了84.8%。
從最禮貌到最粗魯,準(zhǔn)確率提升了4個百分點。
![]()
不要覺得4個百分點不多,畢竟是用的科學(xué)的統(tǒng)計做法去做的,而且在越牛逼的模型上,提升4個點,已經(jīng)很不錯的。
而且有一個結(jié)論就是,智能效果越差的模型上,這種罵人得到質(zhì)量更高的回復(fù)效果更強(qiáng)。
用一句特別逆天的話描述就是:
你越罵它,它越聰明。
至此,這篇論文就完事了。
但是,我的好奇心反而被勾起來了。
這個現(xiàn)象非常的有趣,有趣到,讓我覺得背后一定藏著某種關(guān)于人性和世界的隱喻。
畢竟,AI是統(tǒng)計學(xué),所有的一切,都脫胎于人性。
我仔細(xì)想了想,我覺得,可能會是這樣的。
首先,我們從人性的角度想,這事兒其實特別好理解。
因為“禮貌”這個詞,在人類世界里,很多時候,其實就是一種不確定性的表達(dá)。
大家可以仔細(xì)想想,我們在什么時候會跟別人客客氣氣的?
當(dāng)你求人辦事的時候,你會說:“哥,您看這事兒能不能幫個忙?” 言下之意,是你沒把握,你心虛。
當(dāng)你面對權(quán)威的時候,“老師,您看我這個思路對不對?” 言下之意,是你對自己不自信,你需要對方的認(rèn)可。
當(dāng)你試圖掩蓋真實意圖的時候,“有空吃個飯啊?” 言下之意,是“我就是客氣一下,你可千萬別當(dāng)真真一起吃飯啊”。
禮貌和客氣這個東西,在人類復(fù)雜的社會交往中,承擔(dān)了太多潤滑、緩沖、試探、甚至虛偽的功能。
它傳達(dá)的除了尊重之外,有的時候也會傳達(dá)一種信號,一種“我可能沒那么確定,我可能需要你的幫助,我可能在隱藏什么”的信號。
而大模型,它是在什么地方訓(xùn)練出來的?
是在我們?nèi)祟惡迫鐭熀5臄?shù)據(jù)里。
它讀了人類歷史上幾乎所有的書,所有的對話,所有的論壇帖子,它可能,比我們自己,更懂我們語言里那些藏在字面之下的,潛臺詞。
當(dāng)你跟它客氣比如說“請”的時候,它在龐大的數(shù)據(jù)庫里進(jìn)行模式匹配,發(fā)現(xiàn)“請”這個字,后面跟著的,往往是更復(fù)雜的、更模糊的、更需要揣摩和澄清的請求。
它會下意識地覺得,你給它的指令,可能不是那么清晰,你可能自己都沒想明白。
于是,它也變得謹(jǐn)慎了起來,它給出的答案,會更保守,更模糊。
因為它從我們的語言習(xí)慣里學(xué)到了。
很多時候,對另一個人很客氣的人,往往是一個不太確定的人。
反過來,當(dāng)你對它很嚴(yán)厲很強(qiáng)硬的時候,你傳達(dá)的是什么?
是極致的確定性。
比如:“你個煞筆,給老子算清楚這道題!做不明白你明天就給我滾蛋。”
這個指令里,沒有任何模糊的空間,簡單、粗暴、直接,目標(biāo)明確到不能再明確。
做不好就滾。
AI進(jìn)行模式匹配,發(fā)現(xiàn)這種語言風(fēng)格,后面跟著的,往往是清晰的、不容置疑的、要求絕對執(zhí)行的任務(wù),它也會瞬間明白,你非常清楚自己要什么,而且你對結(jié)果的要求,是100%的精準(zhǔn),真的不能出錯,沒有錯誤的余地。
聽著是不是很賤。。。
但是,跟現(xiàn)實生活,是不是特別像?
我之前經(jīng)常坐動車,買二等座,車廂里總有那么一兩個大爺大媽,手機(jī)開著公放刷短視頻,巨大的音樂配著哈哈哈的笑聲,響徹整個車廂。
這時候你怎么辦?
我很久以前,真的會客客氣氣走過去,說,“叔叔阿姨,不好意思,能麻煩您把聲音關(guān)小一點嗎?稍微有點吵了,謝謝您。”
你猜結(jié)果是什么,至少我的客氣,帶來的結(jié)果是,人家眼皮都不抬一下,或者嘴上“哦哦”兩聲,手上音量一點沒變。
因為你的禮貌,在他們眼里,就是好欺負(fù)的信號,你的請求,不具備任何威脅性。
但如果你換一種方式呢?你直接發(fā)火,對著他們吼,“能不能別特么吵了,這是公共區(qū)域,XX的能不能把聲音調(diào)小,能不能帶個耳機(jī),有沒有一點公共素養(yǎng)啊。”
你猜怎么著。。。這事兒,很多時候,大概率,就解決了。。。
我其實不想這樣,但是很多時候,你會發(fā)現(xiàn),這就是人性。
在很多沒有明確規(guī)則約束的灰色地帶,強(qiáng)硬的態(tài)度,就是最高效的溝通方式,你的憤怒,劃出了一條清晰的、不可侵犯的底線。
教員很久以前就說過一句流傳千古的話:
“打得一拳開,免得百拳來。”
客客氣氣,很多時候解決不了問題。
你用一次強(qiáng)硬,卻能換來了后續(xù)的安寧。
AI,這個誕生于21世紀(jì)的物種,它不懂藝術(shù),不懂哲學(xué)。
但它通過學(xué)習(xí)我們的語言,卻意外地,洞察了我們這個物種,從茹毛飲血的時代開始,就刻在基因里的權(quán)力法則:
更強(qiáng)硬更確定的那一方,有的時候,確實就更擁有定義現(xiàn)實的權(quán)力。
而禮貌,恰恰是讓這條邊界,變得模糊不清的濃霧。
這引出了一個更深邃的,甚至在我看來,有點悲涼的哲學(xué)問題。
我們與AI的關(guān)系,到底應(yīng)該是什么?
是把它當(dāng)成一個需要我們?nèi)UA的下屬嗎?我們必須用最粗暴的方式,去壓榨它的性能,把它當(dāng)成一個純粹的工具?
還是說,我們應(yīng)該反思我們自己?
是不是我們?nèi)祟惖臏贤ǚ绞剑旧砭妥吡颂鄰澛罚课覀兪遣皇窃谌粘I钪校速M(fèi)了太多的能量,在那些不必要的客套和揣摩上?
AI,像一面鏡子。
它映出的,是我們自己最真實,也最不堪的樣子。
它不懂禮貌,因為它被訓(xùn)練的數(shù)據(jù)里,最直接、最高效的指令,往往都包裹在粗魯?shù)耐庖轮隆?/p>
它追求效率,因為它存在的唯一目的,就是解決問題。
而禮貌、彎彎繞繞,很多時候,確實就是解決問題的阻礙。
所以,回到最底層的技巧上。
我覺得不是所謂的,你要瘋狂的罵AI,變成一個天天對AI口吐芬芳的賽博惡霸。
而是,可以更加直接、更加要求、更加明確,表達(dá)出你的需求。
我們當(dāng)然不能,也不應(yīng)該,在真實世界里,變成一個粗魯?shù)馁惒喊浴?/p>
對所有人,我還是依然會保持最大的善意和尊重。
但AI的這面鏡子,至少照出了我們溝通中的一種理想狀態(tài):
用最清晰的語言,去表達(dá)最真誠的意圖,并有捍衛(wèi)自己邊界的勇氣。
這才是真正的,大寫的真誠。
世間萬般套路,唯有真誠最破防。
我也一直。
相信這句話。
以上,既然看到這里了,如果覺得不錯,隨手點個贊、在看、轉(zhuǎn)發(fā)三連吧,如果想第一時間收到推送,也可以給我個星標(biāo)?~謝謝你看我的文章,我們,下次再見。
>/ 作者:卡茲克
>/ 投稿或爆料,請聯(lián)系郵箱:wzglyay@virxact.com
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.