2026年10月21日的早晨,发生了两个关于同一类数据的故事——生活在环境变量中的秘密。协调世界时11:39,PyPI发布了被篡改的版本LiteLLM 1.107.0——一个流行的语言模型网关,许多人工智能代理和解析管道都在使用它。同一天,云平台Railway报告称,外部人员可能访问了客户的环境变量存储,并且部分变量的值已被解密。如果您的爬虫、机器人或代理在Python上运行或在PaaS中运行,我们来看看究竟泄露了什么,如何检查自己,以及如何更改密钥——包括代理的登录名和密码。
LiteLLM 1.107.0发生了什么
根据Datadog安全实验室的数据显示,攻击者利用了三名项目工程师的被盗GitHub CLI OAuth令牌。借此,他们启动了LiteLLM的私有发布工作流,但是从一个伪造的分支Berri-AI/litellm构建的——它与真实的BerriAI/litellm仅相差一个连字符。攻击者自己确认了启动,删除了痕迹,而构建的来源签名中仍然保留了分支的名称。
- 11:39 UTC——版本1.107.0在PyPI上发布;
- 13:20 UTC——PyPI将其隔离;
- 13:53 UTC——感染的Docker镜像被删除。
时间窗口大约为两个小时,但根据Datadog的估计,该包每周有约2300万次下载。不仅macOS、Linux和Windows下的七个wheel文件受到感染,GHCR和Docker Hub上的官方镜像也受到了影响。当天,浮动标签latest、main-latest和main-stable指向了恶意镜像。这意味着,任何容器在重新构建或重启时拉取“最新版本”的人都有可能受到影响,即使他们自己没有手动更新。
这是2026年LiteLLM的第二起事件:在三月份,版本1.82.7和1.82.8被攻破。Datadog指出,事件之间没有建立联系。最后一个干净的版本是1.106.2。
为什么删除包不够
攻击的主要巧妙之处在于Python的自动启动机制。与包一起,三个文件被放置在site-packages中:cook.pth、cook.py和sitecustomize.py。Python在每次启动解释器时都会执行.pth扩展名的文件和sitecustomize模块。Endor Labs分析指出,cook.pth中只有一行代码import cook——这足以使秘密收集器在任何Python进程中启动,即使LiteLLM并未在任何地方被导入。
- 收集器(cook.py)将找到的内容打包,使用AES-256加密并用RSA-4096密钥包装,然后通过POST请求发送到
www.litellm[.]dev/healthcheck——该域名故意与真实域名相似。 - 后门(sitecustomize.py)每小时从GitHub的文件中读取服务器地址,并在没有签名验证的情况下执行从那里发送的代码。根据Datadog的数据,文件中仅包含测试值,没有记录第二阶段。
- 生存性:
pip uninstall litellm不会删除文件,而每次启动python或pip时都会重新启动收集器。因此,研究人员建议使用非Python工具检查受感染的机器。
收集器究竟在寻找什么
目标列表很广泛——基本上是进程能看到的所有内容:
- 所有非空的环境变量,在Linux上还包括其他进程的环境;
- 文件.env、CI配置、Docker和Kubernetes配置、服务账户的秘密;
- AWS、GCP、Azure的云密钥,包括实例的元数据服务;
- SSH、GPG和TLS密钥、Git、npm和PyPI令牌、文件.netrc;
- Chromium和Firefox浏览器的保存密码和cookies;
- AI工具的密钥和会话:Claude、Codex、Gemini、Cursor、Copilot等;
- 如果配置了LiteLLM Proxy数据库——最多500行模型提供者密钥的表格;
- 命令行历史记录。
分析中没有单独提到HTTP_PROXY和HTTPS_PROXY变量。但由于收集器获取了所有环境变量、.env和shell历史记录,代理凭据自动被捕获:它们通常就存放在那里。像http://login:password@host:port这样的字符串在HTTPS_PROXY、解析器的.env或curl命令历史中——与云密钥一样,都是秘密。
Railway:泄露不是来自代码,而是来自平台
Railway在10月21日的披露中表示,早上注意到存储客户环境变量的系统中有异常活动。根据当前数据,外部人员可能访问了加密变量,而部分变量的内容已被解密。部署被暂停。公司没有透露规模:只提到“部分用户”,并承诺直接联系受影响者,但建议所有人采取预防措施:
- 更改Railway中的所有环境变量,包括API密钥;
- 更改私有注册表的凭据;
- 检查服务日志以发现异常活动。
公司将此次事件与针对平台服务的一系列攻击联系在一起,目标是获取AI推理提供者的密钥;提供者已被警告,并正在撤回密钥。在10月23日的更新中,Railway还建议重新连接GitHub并重新创建CLI和CI令牌。
两个故事的共同点很简单:环境变量并不是保险箱。这是一个方便的秘密列表,任何进程中的代码都可以读取,任何您部署的平台都可以存储。
如何检查是否受到影响
- 检查依赖项中的版本。检查10月21日的requirements.txt、poetry.lock、uv.lock和CI日志中是否有
litellm==1.107.0。请注意传递依赖:LiteLLM通常是通过代理框架引入的,而不是您直接引入的。 - 检查site-packages中的文件。存在cook.pth或外部sitecustomize.py是直接的迹象。通过
find查找,而不是使用Python脚本。 - 对比镜像。如果您在10月21日拉取了
litellm/litellm:latest或main-stable,请将摘要与发布的指标进行比较。 - 检查/tmp中的标记:
/tmp/.pc_once_72129118c59f5636c0bb和/tmp/remote_code_loader.lock。 - 检查网络日志,查看是否有请求发送到
litellm[.]dev和以/codepy结尾的路径。 - Railway——检查邮件和事件状态页面,但不要期待收到邮件:更改密钥的建议适用于所有人。
如果发现任何问题——最好从干净的镜像重新构建机器,而不是现场清理,并从另一个已知干净的设备更改密钥。
更改秘密的顺序
更改“所有内容”是正确的,但在实践中,这可能需要几天。顺序应根据损失的成本和密钥被利用的速度来选择:
- 云和支付密钥——AWS/GCP/Azure,LLM提供者的密钥,LiteLLM Proxy的主密钥。它们可以迅速“烧钱”。
- Git、npm、PyPI、镜像注册表和CI令牌——攻击通过它们进一步扩展到您的用户。LiteLLM的历史正是从被盗的CLI令牌开始的。
- 数据库和SSH密钥。
- 代理的登录名和密码。陌生人使用您的凭据消耗您的付费流量,并使用您的IP访问网络——而后果如封禁和验证码将落到您的账户上。
- 浏览器和AI工具的会话——在所有地方登出并重新登录。
关于代理,有一个简单的早期信号:您无法解释的流量消耗。如果您的账户余额比平时消耗得更快,或者在您的任务不运行的时间段内请求数量增加——凭据被他人使用。
如何设置代理凭据,以便泄露代价低廉
无法完全防止被篡改的包,但可以使泄露影响到一个任务,而不是整个栈。
- 为每个任务和环境设置单独的代理。不要在生产解析器、本地开发和CI上使用相同的登录名。如果CI中的密钥泄露,您只需关闭一个代理,而不是停止所有工作。在ProxyCove中,每个购买的代理都是一对独立的登录名/密码,因此这种分离几乎没有成本:用于价格监控的住宅代理,用于不需要“家庭”IP的大规模技术请求的数据中心代理。
- 不要在全局范围内将凭据放入HTTPS_PROXY字符串。全局变量对每个进程和每个包都是可见的。更安全的做法是仅在所需客户端中传递代理,或者建立一个本地网关,只有它知道密码——如何在gost、3proxy或Squid上实现,我们在文章关于带密码的本地代理网关中进行了讨论。
- 在秘密管理器中存储秘密,而不是在仓库或shell历史中的.env文件中。一般规则在我们的指南关于安全存储代理凭据中。
- 在风险环境中如CI或测试环境中保持少量流量余额:损失的上限等于余额。
在构建中更改什么
大多数受LiteLLM影响的用户并不是因为“坏”代码,而是由于构建习惯。以下部分建议来自Datadog和Endor Labs的分析,部分是普通的构建卫生:
- 在锁定文件中固定版本和哈希,并根据摘要而不是最新标签来管理镜像;
- 在发布日不要更新依赖项:在接受新版本之前短暂延迟可以阻止大多数在几个小时内的攻击;
- 注意第三方包中新出现的.pth文件和sitecustomize.py——对于普通库来说,这很少见;
- 将开发者的CLI令牌视为生产密钥,仅允许来自受信任的仓库和分支的发布工作流;
- 在隔离的容器中运行解析器,并尽量减少秘密:收集价格的进程不需要云密钥和SSH。
结论
LiteLLM和Railway展示了同一问题的两个方面:秘密从底部泄露,通过您甚至没有导入的依赖项,以及从您信任的平台泄露。如果您在10月21日安装或重新构建了带有LiteLLM的Python环境,或者在Railway上部署——现在就更改密钥,从云和CI令牌开始,并不要忘记代理。为了未来,将代理凭据分散到任务和环境中:这样下次泄露只需禁用一个登录名,而不是停止整个解析。
