8月8日、Simon Willison氏が「The Tokenpocalypse Is Here: Companies Are Scrambling To Stop Spending So Much on AI」と題した記事を公開した。Wiredや404 Mediaの報道を紹介・コメントするリンク集形式のこの記事では、企業がAI利用に伴うトークンコストの急増に直面している実態と、その背景にある構造的な問題が取り上げられている。

「Tokenpocalypse」とは何か — 大企業を直撃するコスト問題

タイトルに含まれる「Tokenpocalypse（トークン黙示録）」は、AI利用の拡大に比例してトークン消費コストが制御不能なレベルに膨れ上がっている状況を指す。WiredやFortuneなど複数のメディアが2025年末から2026年にかけて報じてきたテーマであり、AIへの投資対効果（ROI）が問われる中で、企業のAIコスト管理は2026年の経営課題として急速に注目を集めている。

Willison氏がとりわけ注目したのは、404 Mediaが6月24日付で報じた記事だ。Accentureの社内会議から流出したとされる音声記録を基に、同社内部でのトークン消費の実態を伝えている。Willison氏の記事はこの404 Mediaの報道を軸に構成されており、そこに彼自身の短いコメントが添えられる形になっている。

PDFをMarkdownに変換するだけで、トークンが激増する

404 Mediaの報道で核心となるのは、Accentureのエージェント型AI戦略リードであるJustice Kwak氏の発言だ。

「少なくとも社内データが示しているのは、トークン消費を主導しているのはエンジニアではない、ということです。大量に消費しているのは、（問題となる）そういった行動をとっている非エンジニアたちです」

ここで言う「そういった行動」とは何か。それを明かすのが、クライアントグループリードのStuart Henderson氏の発言だ。Henderson氏は冗談めかしてこう言った。「PDFを画像に変換して、さらにMarkdownに変換していないといいけど。それが大きなトークン食い虫の一つだと聞いている。PDFをMarkdownに変換するってことが、そうなの？」

これに対してKwak氏は、「それがまさにAccentureの社内データが示していることだ」と認めた。

つまり、PDFをいったん画像として読み込み、そこからMarkdownに変換するというワークフローが、莫大なトークンを消費しているという実態が、同社の内部データによって確認されたわけだ。

なお、これはAccentureの社内データに基づく発言の紹介であり、業界全体に同じ構造が成立することを示す統計的な調査ではない。ただし、同様のAIツール導入パターンは多くの大企業に共通しており、404 MediaやWiredが広くこのテーマを取り上げている背景からも、類似の傾向が他社でも起きていることは十分に考えられる。

なぜPDF→Markdownの変換がここまでコストを押し上げるのか

PDFからMarkdownへの変換コストが高い理由は、フォーマットの構造的な問題にある。PDFはそもそも「印刷物を忠実に再現する」ために設計されており、テキストの論理的な構造（見出し・段落・表）が機械的に解釈しにくい。

そのため多くのパイプラインでは、PDFをページ単位で画像としてレンダリングし、**マルチモーダルモデル（テキストと画像の両方を入力として扱えるAIモデル）に読み取らせてからテキスト化する**というステップを踏む。画像1ページあたりのトークン消費はテキスト直接入力と比べて桁違いに大きく、これが積み重なることでコストが急増する。

ここで言う「トークン」とは、AIモデルが処理する入力・出力テキストの最小単位であり、OpenAIの料金体系など多くのAPIサービスがトークン数に応じた従量課金を採用している。PDF画像のような情報密度の高いデータは、同じ内容をテキストで渡す場合と比べてトークン消費が数倍から数十倍に膨れることがある。

エンジニアはAPIの使い方やコスト効率をある程度意識して設計する。一方で、業務部門の社員がCopilotやChatGPTのようなAIツールを使う際、「とりあえずPDFを投げ込む」という操作を繰り返すと、裏側でのトークン消費は想像以上に大きくなる。コスト増の一因が非エンジニアの日常的な業務フローにあり得るという指摘は、AIツールの普及段階における見落としがちな盲点として注目に値する。

Willison氏の皮肉に込められた本質

Willison氏はこの404 Mediaの報道に短いが的確なコメントを添えている。

「Accentureが『PDFは情報伝達の手段として最悪だ』ということを理解したなら、ビジネス界全体にそのメッセージを広めてくれるかもしれない」

PDFというフォーマットへの批判は技術者の間では以前から根強い。しかし、コスト削減圧力というきわめて実務的な動機が、企業にPDFの非効率性を認識させる契機になりつつある、という構図は皮肉が効いている。

「慣習だから」で使われ続けてきたPDFワークフローが、AIコストという経済的なインセンティブによって見直されるとすれば、それはWillison氏が長年主張してきた「PDFをやめよう」というメッセージが、技術的な文脈ではなくビジネスの文脈でようやく届き始めた瞬間とも言えるかもしれない。

詳細はThe Tokenpocalypse Is Here: Companies Are Scrambling To Stop Spending So Much on AIを参照していただきたい。