2026年10月21日の朝、同じデータクラスに関する2つの物語が発生しました。それは、環境変数に存在する秘密です。UTCの11:39に、PyPIにてLiteLLM 1.107.0の毒入りバージョンが公開されました。これは、多くのAIエージェントやパースパイプラインで使用される人気の言語モデルへのゲートウェイです。同日、クラウドプラットフォームRailwayは、外部の者が顧客の環境変数ストレージにアクセスできた可能性があり、一部の顧客の暗号化された値にもアクセスできたと報告しました。あなたのスクレイパー、ボット、またはエージェントがPythonまたはPaaSで実行されている場合、何が漏洩したのか、どのように自己チェックを行うのか、そしてキー(ログインやプロキシのパスワードを含む)をどの順序で変更するかを理解しましょう。
LiteLLM 1.107.0で何が起こったのか
Datadog Security Labsによると、攻撃者はプロジェクトの3人のエンジニアから盗まれたGitHub CLIのOAuthトークンを使用しました。それを使って、LiteLLMのクローズドリリースワークフローを実行しましたが、偽のフォークBerri-AI/litellmから構築されました。これは、本物のBerriAI/litellmとハイフン1つの違いがあります。彼ら自身がその実行を確認し、痕跡を削除しましたが、ビルドの出所(provenance)の署名にはフォークの名前が残りました。
- 11:39 UTC — バージョン1.107.0がPyPIに公開されました;
- 13:20 UTC — PyPIがそれを隔離しました;
- 13:53 UTC — 感染したDockerイメージが削除されました。
ウィンドウは約2時間ですが、Datadogの推定によれば、このパッケージは週に約2300万回ダウンロードされています。感染したのは、macOS、Linux、Windows用の7つのwheelファイルだけでなく、GHCRおよびDocker Hubの公式イメージも含まれていました。その日、浮動タグlatest、main-latest、およびmain-stableは悪意のあるイメージを指していました。つまり、コンテナが「最新バージョン」を引き込むように再構築または再起動された場合、誰でも影響を受ける可能性がありました。
これは2026年におけるLiteLLMの2回目の事件です。3月にはバージョン1.82.7と1.82.8が侵害されました。Datadogによると、事件間の関連性は確認されていません。最後のクリーンバージョンは1.106.2です。
パッケージを削除するだけでは不十分な理由
攻撃の主な巧妙さは、Pythonの自動起動メカニズムです。パッケージと共に、site-packagesに3つのファイルが置かれました:cook.pth、cook.py、およびsitecustomize.py。拡張子が.pthのファイルとsitecustomizeモジュールは、インタープリタが起動するたびに実行されます。Endor Labsによると、cook.pthには正確に1行のコードimport cookがあり、これだけで、LiteLLMがどこにもインポートされていなくても、任意のPythonプロセスで秘密の収集器が作動しました。
- 収集器(cook.py)は、見つけたものをパッケージ化し、AES-256で暗号化し、RSA-4096のキーラッパーを使用して
www.litellm[.]dev/healthcheckにPOSTリクエストで送信しました。このドメインは本物に似せて作られています。 - バックドア(sitecustomize.py)は、1時間ごとにGitHubのファイルからサーバーのアドレスを読み取り、署名の確認なしにそこから送信されたコードを実行しました。Datadogによると、そのファイルにはテスト値のみが含まれており、2段階目は確認されていません。
- 持続性:
pip uninstall litellmはファイルを削除せず、pythonまたはpipの各実行で収集器が再起動します。したがって、研究者は感染したマシンをPython以外のツールでチェックすることを推奨しています。
収集器が何を探していたのか
ターゲットのリストは広範で、基本的にはプロセスが見るすべてです:
- すべての非空の環境変数、Linuxでは他のプロセスの環境も;
- .envファイル、CIの設定、DockerおよびKubernetes、サービスアカウントの秘密;
- AWS、GCP、Azureのクラウドキー、インスタンスのメタデータサービスを含む;
- SSH、GPG、TLSキー、Git、npm、PyPIのトークン、.netrcファイル;
- ChromiumおよびFirefoxブラウザの保存されたパスワードとクッキー;
- AIツールのキーとセッション:Claude、Codex、Gemini、Cursor、Copilotなど;
- LiteLLM Proxyが設定されている場合、モデルプロバイダーのキーを含むテーブルから最大500行;
- コマンドシェルの履歴。
分析にはHTTP_PROXYおよびHTTPS_PROXY変数の特別な言及はありません。しかし、収集器がすべての環境変数、.env、およびシェルの履歴を取得していたため、プロキシのクレデンシャルは自動的にキャッチされました。通常、そこに保管されています。http://login:password@host:portのような行がHTTPS_PROXY、.envパーサー、または履歴のcurlコマンドにあれば、それはクラウドキーと同じく秘密です。
Railway: コードからの漏洩ではなく、プラットフォームからの漏洩
Railwayは10月21日の発表で、顧客の環境変数を保存するシステムで異常な活動を発見したと述べています。現在のデータによれば、外部の者が暗号化された変数にアクセスできた可能性があり、一部には復号された内容にもアクセスできたとされています。デプロイは一時停止されました。会社は規模を明らかにしていませんが、「一部のユーザー」について言及し、影響を受けた人々には直接連絡すると約束していますが、すべての人に対して予防策を講じるよう勧めています:
- Railwayのすべての環境変数を変更し、APIキーを含める;
- プライベートレジストリの認証情報を変更する;
- サービスのログを異常な活動のために確認する。
会社は、この事件をプラットフォームサービスへの一連の攻撃と関連付けており、その目的はAI推論プロバイダーのキーにアクセスすることです。プロバイダーには警告が行われており、キーが取り消されています。10月23日の更新では、RailwayはGitHubを再接続し、CLIおよびCIのトークンを再作成することを追加で推奨しています。
2つの物語の共通点は簡単です:環境変数は金庫ではありません。これは、プロセス内の任意のコードが読み取ることができ、あなたがデプロイするすべてのプラットフォームが保持する便利な秘密のリストです。
自分が影響を受けたかどうかを確認する方法
- 依存関係のバージョンを探す。 10月21日の
litellm==1.107.0について、requirements.txt、poetry.lock、uv.lock、およびCIのログを確認してください。間接的な依存関係も考慮してください:LiteLLMはしばしばエージェントフレームワークを引き込むため、あなたが直接ではなく。 - site-packages内のファイルを探す。 cook.pthまたは不正なsitecustomize.pyの存在は直接的な兆候です。
findを使用して検索し、Pythonスクリプトではなく。 - イメージを照合する。 10月21日に
litellm/litellm:latestまたはmain-stableを引き込んだ場合、公開された指標とダイジェストを比較してください。 - /tmp内のマーカーを探す:
/tmp/.pc_once_72129118c59f5636c0bbおよび/tmp/remote_code_loader.lock。 - ネットワークログを確認する
litellm[.]devへのリクエストや/codepyで終わるパスを探す。 - Railway — メールとインシデントのステータスページを確認しますが、メールを待たないでください:キーを変更するという推奨はすべての人に関係します。
何かが見つかった場合、マシンをクリーンなイメージから再構築する方が、現場でクリーンアップするよりも良いですし、キーは別の確実にクリーンなデバイスから変更してください。
秘密を変更する順序
「すべて」を変更することは正しいですが、実際には数日かかることがあります。順序は損害の大きさと、キーがどれだけ早く利用されるかに基づいて選ぶべきです:
- クラウドおよび支払いキー — AWS/GCP/Azure、LLMプロバイダーのキー、LiteLLM Proxyのマスターキー。これらはすぐに「お金を稼ぐ」ことができます。
- Git、npm、PyPI、イメージレジストリおよびCIのトークン — これらを通じて攻撃が進み、あなたのユーザーにまで及びます。LiteLLMの歴史は、盗まれたCLIトークンから始まりました。
- データベースおよびSSHキー。
- プロキシのログインとパスワード。 他の人があなたのクレデンシャルを使ってあなたの支払ったトラフィックを消費し、あなたのIPからネットワークにアクセスします — その結果、バンやCAPTCHAがあなたのアカウントに届きます。
- ブラウザおよびAIツールのセッション — すべての場所でログアウトし、再度ログインします。
プロキシには簡単な初期信号があります:説明できないトラフィックの消費。ダッシュボードの残高が通常より早く減少するか、あなたのタスクが動作していない時間帯にリクエストの数が増える場合 — 誰かがクレデンシャルを使用しています。
漏洩が安く済むようにプロキシクレデンシャルを設定する方法
毒入りパッケージから完全に保護することはできませんが、漏洩が1つのタスクに影響を与え、全体のスタックには影響を与えないようにすることができます。
- 各タスクと環境に対して別々のプロキシを使用する。 本番用パーサー、ローカル開発、CIに1つのログインを使用しないでください。CIからキーが漏洩した場合、1つのプロキシをオフにするだけで済み、すべてを停止する必要はありません。ProxyCoveでは、購入した各プロキシが別々のログイン/パスワードペアであるため、そのような分離は何のコストもかかりません:価格監視のためにレジデンシャルプロキシ、大量の技術的リクエスト用にはデータセンタープロキシを使用します。
- HTTPS_PROXYのグローバルな行にクレデンシャルを置かないでください。 グローバル変数はすべてのプロセスとすべてのパッケージに見えます。必要なクライアントにのみプロキシを渡すか、パスワードを知っているローカルゲートウェイを立ち上げる方が安全です。これをgost、3proxy、またはSquidで行う方法については、プロキシ用のローカルゲートウェイに関する記事で説明しています。
- 秘密をシークレットマネージャーに保管する、リポジトリやシェルの履歴の.envには保管しないでください。一般的なルールは、私たちのガイドプロキシのクレデンシャルの安全な保管に関するガイドにあります。
- リスクの高い環境(CIやテストスタンドなど)で生きるプロキシには、少量のトラフィックの残高を保持してください:損害の上限は残高に等しいです。
ビルドで変更すべきこと
LiteLLMの影響を受けたほとんどの人は「悪い」コードのせいではなく、ビルドの習慣のせいで影響を受けました。以下のアドバイスの一部はDatadogやEndor Labsの分析からのものであり、一部は一般的なビルドの衛生です:
- ロックファイルにハッシュ付きのバージョンを固定する、イメージはlatestタグではなくダイジェストで;
- リリース日の依存関係を更新しない: 新しいバージョンを受け入れる前に短い遅延を設けることで、数時間のウィンドウでのほとんどの攻撃を排除できます;
- サードパーティパッケージで新しい.pthファイルやsitecustomize.pyの出現に注意する — 通常のライブラリでは稀です;
- CLIトークンを本番の鍵のように扱い、信頼できるリポジトリやブランチからのみリリースワークフローを許可する;
- 秘密の最小限で隔離されたコンテナでパーサーを実行する: 価格を収集するプロセスにはクラウドキーやSSHは必要ありません。
結論
LiteLLMとRailwayは、秘密が下から(あなたがインポートすらしていない依存関係を通じて)漏洩する側面と、上から(あなたが信頼したプラットフォームを通じて)漏洩する側面を示しました。10月21日にLiteLLMを使用してPython環境をインストールまたは再構築したり、Railwayにデプロイした場合は、今すぐキーを変更してください。クラウドとCIトークンから始め、プロキシのことも忘れないでください。将来的には、プロキシクレデンシャルをタスクや環境ごとに分けてください。そうすれば、次の漏洩は1つのログインを無効にするだけで済み、全体のパースを停止する必要はなくなります。
