為什麼 AI 現在能一次讀完一整本書
作者 Chatday Editorial Team ·
有個數字聽起來像唬人的:你今天用的 AI,一次就能讀進將近一百萬個字。那大概是一個小書架的書,一口氣全吞下去,而且還是在它回答任何一個問題之前。
科技圈把這個叫做「上下文視窗」,而最近這些數字已經誇張到有點離譜。那麼,一百萬個某某東西到底能給你帶來什麼,一般人又為什麼該在意?我們把它翻成白話。
上下文視窗到底是什麼
想像你在跟一個只記得對話最近幾分鐘的人講話。你講了一個很長的故事,等講完,他已經忘了開頭是怎麼開始的。這就是上下文視窗很小的 AI。
上下文視窗,是 AI 為了單一任務一次能「看到」的全部:你的問題、你貼上去的文件、對話先前的來回,以及它正在寫的回答。全部裝得下時,AI 就能把整份內容前後串起來。裝不下時,最舊的部分就從後面掉出去,AI 回答時就像從沒看過那些內容一樣。
所以更大的視窗,說穿了就是更大的桌面。在動手之前,有更多空間可以把需要的東西全攤開。(這跟 AI 在不同對話之間記得你是兩回事,那是另一個功能。上下文視窗講的是一次處理一項任務。)
是 token,不是字:AI 真正在數的單位
值得認識的術語只有這一個,因為每個標題都在用。
AI 不數字數,它數 token。一個 token 是一小塊文字,有時候是一個完整的短單字,有時候是一個長單字的一部分。在英文裡的概略規則是,一個 token 大約四個字元,或者說一個單字的四分之三左右。所以 1,000 個 token 大約是 750 個字,一百萬個 token 大約是 75 萬個字。
那為什麼要把字拆開?這樣模型才能處理任何語言、任何錯字,連自創的字也不會卡住。你不用自己去數 token。你只要知道,當一家公司在炫耀「一百萬 token 的上下文視窗」,它其實是在說「一次能讀大約 75 萬個字」。
一百萬個 token 比聽起來大得多
數字大到一個程度就不再有意義,所以我們把它擺在你可能會丟給 AI 的真實東西旁邊。
| 你想讓 AI 讀的東西 | 大約幾個 token | 裝得進 100 萬的視窗嗎? |
|---|---|---|
| 一長串往來的電子郵件 | 幾千 | 輕鬆 |
| 一份 50 頁的報告 | 大約 3 萬 | 輕鬆 |
| 一本 300 頁的小說 | 大約 15 萬 | 沒問題 |
| 一份附上所有附件的厚重法律合約 | 大約 20 萬 | 可以 |
| 好幾本書,或一整個研究資料夾 | 75 萬以上 | 接近上限 |
給你個參照,像 GPT-5.5 這樣的模型能讀進將近一百萬個 token。幾年前,常見的還只是幾千。我們在很短的時間裡,就從「記得這一段」走到了「記得這一座小型圖書館」。
大記憶實際上能讓你做什麼
這裡才是好用的地方。大的上下文視窗,讓 AI 從一個聰明的自動完成,變成能對你一大疊自有資料進行推理的東西。
- 與其讀一份長文件,不如直接問它。 丟進一份 90 頁的報告,然後問「他們指出的三個風險是什麼,各在哪裡?」。如果你沒試過,這裡有一份如何跟 PDF 對話的逐步教學。
- 摘要時不會抓不到重點。 小視窗會逼 AI 一段一段摘要再縫起來,細節就是在那裡漏掉的。大視窗會先讀完整份,所以摘要才真正反映得出結尾。
- 一次比對好幾個檔案。 把一份合約的三個草稿貼上去,問問它們之間改了什麼。它能把三份並排擺著看。
- 讓一個長專案不跑掉。 在馬拉松式的規劃對話裡,更大的視窗代表它還記得你一個小時前下的決定。
對多數人來說,最誠實的好處就是第一點:你不再自己讀那份又長又無聊的東西,而是改成問它。
大的上下文視窗在哪裡還是不夠
更大不是魔法,在把重要的事交給它之前,值得先知道這些陷阱。
- 中段會變模糊。 模型最注意你給它的開頭和結尾。把一個關鍵數字埋在 500 頁內容的正中間,它真的可能會漏掉。
- 它不是永久記憶。 一關掉對話,視窗就清空了。下一次,除非你再貼一遍,AI 不會記得你的文件。
- 裝滿不等於讀懂。 把一整本書塞進視窗,跟掌握每個細微之處,是兩回事。當它空間不夠或抓不到重點,就可能開始用編造的內容把空白補起來。重要的部分一定要查證。
- 超大的輸入可能比較慢。 要一個模型嚼完一百萬個 token,比起一個快問快答,會花更久。
對上述幾乎所有問題,解法都很單純:把你在意的部分放在問題旁邊,並請 AI 把文件原文引用回來,讓你能核對。
現在哪些 AI 的空間最大
各大公司正在這件事上低調較勁。OpenAI、Anthropic 和 Google 的最新模型,如今都落在一百萬 token 上下,而 Google 已宣布一款專為兩百萬 token 打造的 Gemini 模型。像 Kimi 這類開放選項也在拉長上下文,而且往往價格更友善。
在日常使用上,確切數字其實沒你想的那麼重要。落在一百萬 token 上下的,幾乎已經涵蓋一般人會丟過去的任何文件。真正的問題是哪個模型讀得仔細、哪個讀得草率,而這要看任務。我們在 ChatGPT vs Gemini vs Claude 裡把熱門的幾款正面對決過。
要感受差別,最簡單的方法就是拿出你最長的文件,在同一個地方丟給兩三個模型試試。
常見問題
結語
上下文視窗只是 AI 的短期記憶,用 token 來計算,而最新的模型已經大到能吞下一整本書。實際的結論是:那份又長又無聊的文件,你不必再自己讀了。你可以把它交出去,然後發問。
只要記得:關掉對話視窗就會清空、超大檔案的中段可能會溜走,而真正重要的答案值得查證。這樣用,大記憶就是 AI 默默為你做的、最實用的事情之一。