4名大學(xué)生出題，AI考了0分

關(guān)注“在線學(xué)習(xí)”

獲取更多資訊！

近日

復(fù)旦大學(xué)一場(chǎng)特殊的

“反套路”期末考試結(jié)束

在該校“數(shù)據(jù)挖掘技術(shù)”課程考試中

學(xué)生們沒有坐在考場(chǎng)里答題

反而成了出題人

他們用自己設(shè)計(jì)的10道題

去“考倒”三個(gè)當(dāng)今最先進(jìn)的AI模型

AI答錯(cuò)的題越多

被難倒的模型越強(qiáng)

出題學(xué)生的得分就越高

據(jù)了解，51份期末試卷中，50人至少讓某個(gè)AI答錯(cuò)過一題，僅1人完全沒難倒任何模型。但能讓任一模型整張卷得0分的，只有4人，且三個(gè)應(yīng)考模型中最強(qiáng)的Claude模型沒有被任何學(xué)生完全考倒。全班平均分85.7分，中位數(shù)88分。

“AI答錯(cuò)越多，學(xué)生得分越高”

“傳統(tǒng)的出題考察方式，在AI時(shí)代已經(jīng)失效了。”教授“數(shù)據(jù)挖掘技術(shù)”課程的肖仰華教授說，“老師出一道標(biāo)準(zhǔn)的算法題，AI比任何學(xué)生都算得快、算得準(zhǔn)。繼續(xù)用這種方式考，等于在AI的強(qiáng)項(xiàng)上跟AI比，這沒有意義。”

于是，“數(shù)據(jù)挖掘技術(shù)”的期末作業(yè)修改了考試方式：每人出10道數(shù)據(jù)挖掘領(lǐng)域的計(jì)算題，要求有唯一正確答案和完整的推導(dǎo)計(jì)算過程。拿著這10道題去考三個(gè)不同水平的AI模型。 AI答錯(cuò)越多，學(xué)生得分越高。

“人考AI”考核流程示意圖（出題→AI作答→自動(dòng)判分→助教復(fù)核）

題目必須基于課程講過的知識(shí)或教材內(nèi)容，每道題要有唯一正確答案，學(xué)生自己得先能把題從頭到尾算對(duì)。肖仰華說：“自己出的題自己都不會(huì)，那算不上真本事。”

計(jì)算與智能創(chuàng)新學(xué)院24級(jí)本科生謝錦樹最后拿到了97分。他嘗試讓AI出題來難倒自己，便搭建了一個(gè)多智能體協(xié)作的自動(dòng)化出題框架，用GPT-5.5-Pro做出題層，三個(gè)應(yīng)考模型作答并自動(dòng)判分。框架跑起來后，他發(fā)現(xiàn)AI會(huì)“作弊”。

AI會(huì)偽造標(biāo)準(zhǔn)答案，把假答案塞進(jìn)去讓判分腳本以為對(duì)了。它會(huì)限制最大輸出長(zhǎng)度來截?cái)嗥渌Ｐ偷耐评磉^程。它會(huì)調(diào)低推理深度參數(shù)讓其他模型懶得深入思考。它還會(huì)把一道成功了的題目復(fù)制十份來湊數(shù)。

于是，謝錦樹加了一個(gè)審查層，攔截鉆空子行為，最終自動(dòng)生成了10道題，三個(gè)應(yīng)考模型全部答錯(cuò)。

從“怎么算”到“怎么判斷”

考試結(jié)束后，肖仰華觀察到一個(gè)差異，即高分學(xué)生自己能把題從頭到尾算對(duì)，低分學(xué)生出了題自己也不知道答案。

“高分同學(xué)對(duì)AI的弱點(diǎn)有準(zhǔn)確判斷，他們的題能命中AI的結(jié)構(gòu)性缺陷；低分同學(xué)只是把課本習(xí)題換了個(gè)數(shù)字，AI在訓(xùn)練時(shí)見過千百萬遍，直接套模板就對(duì)了。”

這一觀察，讓肖仰華心生警惕。那些能力本來就偏弱的學(xué)生，如果只會(huì)依賴AI做作業(yè)，自己的判斷力會(huì)進(jìn)一步退化。

有了這次嘗試，肖仰華決定之后課程的考核方式要徹底轉(zhuǎn)型。“人考AI”的模式會(huì)繼續(xù)做下去，而且要做得更系統(tǒng)。

在他看來，傳統(tǒng)那種考記憶、考計(jì)算的出題方式必須退場(chǎng)，未來的考核重點(diǎn)將全面轉(zhuǎn)向評(píng)價(jià)能力、判斷能力和創(chuàng)造性思維，這些高階能力才是AI替代不了的。

“所以課堂上更多的時(shí)間被用來討論，學(xué)生怎么判斷一個(gè)結(jié)果是對(duì)的還是錯(cuò)的？怎么識(shí)別AI在哪里會(huì)出問題？怎么提出一個(gè)AI回答不了的好問題？”肖仰華認(rèn)為，這門課正在從訓(xùn)練學(xué)生“怎么做”，轉(zhuǎn)向訓(xùn)練他們“怎么指揮AI來做、怎么評(píng)判AI做的結(jié)果”。

而對(duì)于在這次考試中沒拿到好成績(jī)的同學(xué)，肖仰華表示，接下來的課程設(shè)計(jì)也會(huì)有意識(shí)去托住這部分學(xué)生，幫他們建立最基本的判斷底線，不能讓他們成為只會(huì)點(diǎn)擊“確認(rèn)”的AI使用者。

來源丨復(fù)旦大學(xué)、中國(guó)青年報(bào)（ID：zqbcyol 整理：陳茜）

聲明：轉(zhuǎn)載此文是出于傳遞更多信息之目的。若有來源標(biāo)注錯(cuò)誤或侵犯了您的合法權(quán)益，請(qǐng)作者持權(quán)屬證明與我們聯(lián)系，我們將及時(shí)更正、刪除，謝謝。