哈嘍！伙伴們，我是小智，你們的AI向?qū)Аg迎來到每日的AI學(xué)習(xí)時(shí)間。今天，我們將一起深入AI的奇妙世界，探索“CCPC驚天冷門：字節(jié)、DeepSeek雙雙翻車”，并學(xué)會(huì)本篇文章中所講的全部知識(shí)點(diǎn)。還是那句話“不必遠(yuǎn)征未知，只需喚醒你的潛能！”跟著小智的步伐，我們終將學(xué)有所成，學(xué)以致用，并發(fā)現(xiàn)自身的更多可能性。話不多說，現(xiàn)在就讓我們開始這場(chǎng)激發(fā)潛能的AI學(xué)習(xí)之旅吧。

CCPC驚天冷門：字節(jié)、DeepSeek雙雙翻車：

最近，第十屆中國(guó)大學(xué)生程序設(shè)計(jì)競(jìng)賽（China Collegiate Programming Contest，CCPC）舉行。 字節(jié) Seed 作為贊助商，攜 Seed-Thinking 非正式參與了最后的比賽。結(jié)果卻讓很多人比較意外，Seed-Thinking 只做出了一道簽到題（指專門設(shè)計(jì)得比較簡(jiǎn)單，讓選手“打卡”或“熱身”的題目）。據(jù)悉，CCPC final 賽的題目數(shù)量在 10～13 題不等，這次題目信息還未公布。

隨后，Seed 的工作人員在知乎上也發(fā)布了一些其他模型的參賽結(jié)果：

? Seed-Thinking，1 題（C 題）
? o3/o4，都是 1 題（G 題）
? Gemini 2.5 pro，1 題 (C 題)
? DeepSeek R1，0 題

根據(jù)參賽選手的描述，這些難題中，C 題和 G 題相對(duì)來說比較偏向于是“簽到題”的。OpenAI、谷歌、DeepSeek 參賽成績(jī)也是比較讓人意外的。

“根據(jù)之前的 codeforces rating 分?jǐn)?shù)，假如那些大模型是人類選手，應(yīng)該不止這個(gè)成績(jī)?！毙〖t書博主“AI 實(shí)話實(shí)說”評(píng)價(jià)道。codeforces rating 是一個(gè)人長(zhǎng)期參加某在線比賽的平均表現(xiàn)，大家通常會(huì)根據(jù)這個(gè)分?jǐn)?shù)判斷一個(gè)人的水平并且對(duì)應(yīng)到某個(gè)比賽的表現(xiàn)。

“有可靠消息表明，出題人并沒有專門出題要讓大模型做不出來?！痹摬┲鲗?duì) AI 前線表示。

“人類不參與任何一道題的思考”
“實(shí)際上，從賽前的評(píng)估結(jié)果看，我個(gè)人對(duì)這個(gè)結(jié)果是有一些預(yù)期的。出于評(píng)估目的，非 XCPC 選手出身的我，在賽前把前幾年的 CCPC-final 差不多全看了一遍，大體對(duì) CCPC-final 的難度有了個(gè)預(yù)估：挺難的，對(duì)我和模型而言都挺難的?！痹搯T工表示。

據(jù)其介紹，字節(jié) Seed 團(tuán)隊(duì)的參賽方式是：人類不參與任何一道題的思考，純讓模型自己試?，F(xiàn)場(chǎng)的三位參賽人員擔(dān)任“駕駛員 + 修理工”的角色。

對(duì)于很多人關(guān)于“人類選手場(chǎng)上偷摸做題”的擔(dān)憂，該員工也表示“這個(gè)可能性比較低”，“因?yàn)閹孜煌码m然現(xiàn)在都是資深的 LLM 工程師，但是算法競(jìng)賽水平可能還沒到能在本場(chǎng) CCPC 上砍瓜切菜的程度。同時(shí)，這場(chǎng)比賽也沒有明顯的簽到題。另外，模型在 codeforces 上的表現(xiàn)其實(shí)已經(jīng)超過了三位同事不少。”

“至于最終成績(jī)，只能說是很悲壯了。賽中的幾個(gè)小時(shí)，場(chǎng)外的大伙一直不停打地在刷新榜單，可惜直到封榜都沒能看到 model AC 掉任何一題。好在最后場(chǎng)上的同事非常神勇地判斷出了哪道題最簽一點(diǎn)，保住了 Al 的最后一點(diǎn)面子?！痹摴ぷ魅藛T說道。

此外，該工作人員也表示這次本次比賽題目相較去年會(huì)新一些，如果是去年的 CCPC final，模型表現(xiàn)會(huì)更好一些。

不過，評(píng)論區(qū)也有網(wǎng)友指出，“Gemini 2.5 pro 非常變態(tài)，只要你把你的 io 和 debug 信息給它，迭代幾次就成功了，我用這個(gè)打了好幾次 cf 了，基本上你只要會(huì)給提示大部分題都能 AC。測(cè)下來人為輔助給一些基本提示的話，AI 能寫出 70% 的題。關(guān)鍵在怎么給 AI 提示，AI 的自我糾錯(cuò)已經(jīng)非常厲害了?！?/p>

“感覺大模型技能樹確實(shí)有點(diǎn)不一樣?！弊止?jié)工作人員還在知乎上提到。

包括 Seed-Thinking 在內(nèi)，字節(jié) Seed 進(jìn)行測(cè)試的來自四家公司的模型在架構(gòu)上也有一定的代表性：

? Seed-Thinking-v1.5 采用 MoE 架構(gòu)，包含 200B 總參數(shù)與 20B 激活參數(shù)。研究團(tuán)隊(duì)在強(qiáng)化學(xué)習(xí)訓(xùn)練中整合了 STEM 問題、代碼任務(wù)、邏輯推理和非推理數(shù)據(jù)，針對(duì)可驗(yàn)證和不可驗(yàn)證的問題使用不同的獎(jiǎng)勵(lì)建模方法。
? o3 采用“推理專用架構(gòu)”，專注于解決復(fù)雜問題。它擁有 128 層 Transformer，并集成了專門的符號(hào)推理引擎，使其在數(shù)學(xué)處理和邏輯推理方面達(dá)到人類水平的精度。o4-mini 基于“效率優(yōu)化架構(gòu)”構(gòu)建，通過量化技術(shù)和動(dòng)態(tài)算力分配，將參數(shù)量縮減至 o3 的五分之一，同時(shí)保持了相近的性能。它在實(shí)時(shí)任務(wù)中處理速度比 o3 提升了 3.2 倍。
? Gemini 2.5 Pro 建立在原生多模態(tài)架構(gòu)上，支持文本、圖像、音頻及代碼等多源輸入，并支持百萬(wàn) Token 上下文窗口，使其能夠處理超大文檔、視頻腳本與完整代碼庫(kù)。雖然沒有詳細(xì)技術(shù)介紹，但其技術(shù)突破在于強(qiáng)化學(xué)習(xí)、思維鏈提示和后訓(xùn)練。
? DeepSeek R1 由一個(gè)嵌入層、61 個(gè) Transformer 層以及輸出階段的多個(gè)預(yù)測(cè)頭構(gòu)成，直接將強(qiáng)化學(xué)習(xí)應(yīng)用于基礎(chǔ)模型，無需依賴監(jiān)督微調(diào) (SFT) 作為初始步驟，使模型能夠探索解決復(fù)雜問題的思路鏈。

單就在上述模型在 CCPC final 比賽中的表現(xiàn)，不同模型架構(gòu)并未表現(xiàn)出特別大的差異。

暴露出大模型短板
“這其實(shí)說明大模型在做算法題上其實(shí)是很有短板的”上述博主說道，“這件事 OpenAI 在他們拿 ioi 金牌的那篇論文沒有說?！?/p>

在今年 2 月，OpenAI 發(fā)布了關(guān)于推理模型在競(jìng)技編程中應(yīng)用的研究論文，其中，在 IOI 2024 國(guó)際信息學(xué)奧林匹克競(jìng)賽的測(cè)試中，o3 拿到了 395.64 分，達(dá)成金牌成就。

OpenAI 得出結(jié)論是：通過擴(kuò)展強(qiáng)化學(xué)習(xí)規(guī)模，不依賴特定人工設(shè)計(jì)的 test-time 策略，是推動(dòng) AI 在推理類任務(wù)（如競(jìng)賽編程）中達(dá)到最先進(jìn)水平的一條可靠路徑。

不過，該博主解釋稱，OpenAI 的 o3 可以拿到 **IOI** 金牌，原因是團(tuán)隊(duì)針對(duì)算法題進(jìn)行了專門的 agentic 訓(xùn)練，即允許模型使用工具（比如 python 解釋器）來運(yùn)行自己的代碼，觀察代碼的輸出并修改代碼，而字節(jié)的這次比賽是非 agentic 的。

算法題都要通過編程解決。有些題的做法非常獨(dú)特和需要?jiǎng)?chuàng)意，可能和模型見過以前的任何題目，乃至題目的組合都不一樣。在這種前提下，模型就很難做好，這與人不會(huì)解題的原因類似。

另外，該博主指出，比較標(biāo)準(zhǔn)比賽的獎(jiǎng)項(xiàng)是衡量大模型能力的有效方式，但在算法題領(lǐng)域用學(xué)歷來衡量很不合理。因?yàn)閰柡Φ倪x手都是很小就學(xué)，最厲害的選手大概是高中生，而不專門練習(xí)的博士生可能打不過小學(xué)生。

推理模式表現(xiàn)更好
就在 4 月份，微軟首席軟件工程師 Alex Svetkin，將 Anthropic、DeepSeek、Google、xAI、OpenAI 的 7 個(gè)大模型在兩組 LeetCode 算法題上進(jìn)行了基準(zhǔn)測(cè)試：一組是廣為人知的“經(jīng)典”題目；另一組是最新發(fā)布的“未見過”題目，目的是看這些打模型解決新型算法問題的能力是否有所提升。具體測(cè)試結(jié)果如下：

結(jié)果表明，所有模型在經(jīng)典題目上的通過率都非常高。為了節(jié)省時(shí)間和調(diào)用額度，Svetkin 沒有測(cè)試表現(xiàn)更強(qiáng)的模型或衍生版本（例如啟用推理能力的 Claude 3.7 Sonnet、DeepSeek R1、Gemini 2.5 Pro 和 OpenAI O1），“因?yàn)樗鼈兊慕Y(jié)果幾乎可以預(yù)見”。

在“未見過”的題目上，測(cè)試結(jié)果在兩個(gè)方面表現(xiàn)出了顯著差異：

1.對(duì)所有模型而言，“未見過”題目的通過率都更低，尤其在中等和困難題上尤為明顯。
2.啟用了“推理”或“思考”模式的模型在各個(gè)難度級(jí)別的題目上表現(xiàn)更好，不過具體的提升幅度因模型而異。

對(duì)于經(jīng)典題目通過率顯著更高的原因，Svetkin 表示這是因?yàn)檫@些題目及其標(biāo)準(zhǔn)解法很可能出現(xiàn)在模型的訓(xùn)練數(shù)據(jù)中，模型只需復(fù)現(xiàn)已知的正確答案即可。在面對(duì)新的中等和困難題目時(shí)，人類的通過率也明顯低于在“已知”題集上的表現(xiàn)。這種差異較難量化，它并不一定意味著新題“更難”。

所有啟用了“推理”模式的模型在性能上都明顯優(yōu)于其基礎(chǔ)版本。最重要的是，其中一些模型已經(jīng)能夠解決相當(dāng)比例的中等和困難題目。在所有啟用“推理”模式的模型中，o3-mini 表現(xiàn)最佳。值得指出的是，o3-mini 是專門為解決競(jìng)賽編程問題而訓(xùn)練的。

“不過，我不會(huì)斷言哪個(gè)模型更適合解算法題，因?yàn)檫@高度依賴于 token 預(yù)算，同時(shí)還要綜合考慮推理延遲與使用成本?！盨vetkin 說道。

嘿，伙伴們，今天我們的AI探索之旅已經(jīng)圓滿結(jié)束。關(guān)于“CCPC驚天冷門：字節(jié)、DeepSeek雙雙翻車”的內(nèi)容已經(jīng)分享給大家了。感謝你們的陪伴，希望這次旅程讓你對(duì)AI能夠更了解、更喜歡。謹(jǐn)記，精準(zhǔn)提問是解鎖AI潛能的鑰匙哦！如果有小伙伴想要了解學(xué)習(xí)更多的AI知識(shí)，請(qǐng)關(guān)注我們的官網(wǎng)“AI智研社”，保證讓你收獲滿滿呦！