{"level":"error","msg":"[Claude](http://www.dlbhg.com/blog/apidog-all-in-one-collaborative-api-development-platform/) 429 in prod","count":188}
188 次限流,足夠讓 CI/CD 全線飄紅,也足夠讓 CTO 把“預(yù)算”二字寫進 OKR。
在 2025 年的今天,大模型不是稀缺品,穩(wěn)定調(diào)用才是。
這篇文章,不談“如何薅 Claude 羊毛”,只講“如何讓它在槍口下優(yōu)雅跳舞”。讀完你會得到:

一、先搞清 Claude 到底在限什么

RPM 5 8→20* 40→100* 自定義
TPM 25 k 40 k 200 k 自定義
并發(fā) 1 2 5 10+

帶星號的是 2025-07-15 后 “暗調(diào)” 的新數(shù)值,官方公告只發(fā)在狀態(tài)頁腳注,導(dǎo)致大量開發(fā)者誤以為仍是 20 RPM。

結(jié)論“代碼生成”被單獨分類,RPM/TPM 均再砍 30%。
因此,監(jiān)控必須精確到模型、到端點、到用戶


二、官方監(jiān)控三板斧:夠用,但不夠爽

1. Response Header 實時讀數(shù)

每次回包里都有:

anthropic-ratelimit-requests-limit: 20
anthropic-ratelimit-requests-remaining: 2
anthropic-ratelimit-tokens-limit: 40000
anthropic-ratelimit-tokens-remaining: 1680

curl -I 即可查看,但難持久化。

2. 控制臺面板

Anthropic Console → Usage → 按模型/Key 維度,延遲 5 min,適合事后審計,不適合實時告警。

3. Claude Code 內(nèi)建 /cost

在 VS Code 的 Claude Code 插件里敲 /cost,彈出浮窗顯示當(dāng)前會話 token & 費用。
缺點:僅限當(dāng)前 IDE 會話,CI 里無法調(diào)用。


三、把監(jiān)控寫進流水線:三段代碼 15 分鐘上線

3.1 輕量級計數(shù)器:利用 header 做滑動窗口

# pip install cachetools
from cachetools import TTLCache
import requests, time, os

CACHE = TTLCache(maxsize=10_000, ttl=60)# 60 s 窗口def call_claude(messages, model="claude-3-5-sonnet"):
    url = "https://api.anthropic.com/v1/messages"
    headers = {
        "x-api-key": os.getenv("CLAUDE_KEY"),
        "anthropic-version": "2023-06-01",
        "content-type": "application/json"
    }
    r = requests.post(url, json={"model": model, "messages": messages, "max_tokens": 1024}, headers=headers)# 記錄
    key = model
    CACHE[key] = CACHE.get(key, 0) + 1
    return r.json(), CACHE[key]

每 60 秒自動過期,足夠在 CI 里做瞬時流量熔斷

3.2 可視化大盤:Prometheus + Grafana

# pip install prometheus-client
from prometheus_client import Counter, Gauge, start_http_server
REQ_TOTAL = Counter('claude_req_total', 'total requests', ['status'])
REQ_LEFT  = Gauge('claude_rpm_left', 'remaining rpm')

def export_metrics(resp):
    limit = int(resp.headers.get("anthropic-ratelimit-requests-limit", 0))
    left  = int(resp.headers.get("anthropic-ratelimit-requests-remaining", 0))
    REQ_LEFT.set(left)
    REQ_TOTAL.labels(status=resp.status_code).inc()

啟動 start_http_server(8000),Grafana 模板文件已放在 Gist

3.3 多云熱備:laozhang.ai 代理 + 自動重路由

laozhang.ai 提供兼容 OpenAI 格式的中轉(zhuǎn),支持:

import openai
client = openai.OpenAI(
    api_key=os.getenv("LZ_API_KEY"),
    base_url="https://api.laozhang.ai/v1"
)
resp = client.chat.completions.create(
    model="claude-3-5-sonnet",
    messages=[{"role": "user", "content": "Hello"}],
    max_tokens=512
)

只需改一行 base_url,即可在 429 時無感遷移


四、限流預(yù)警與自愈:一條流程圖搞定


五、配額管理黑科技:官方?jīng)]寫的 4 個技巧

技巧 1:多 Key 輪詢 + 權(quán)重分流

把 3 個 Tier3 Key 放進 Redis List,每次 LPOP/RPUSH 循環(huán),單 Key 40 RPM → 總 120 RPM。

技巧 2:Prompt Cache 降本 40%

prompt 只計費一次。

{"role": "system", "content": "You are a senior Python engineer...", "cache_control": {"type": "ephemeral"}}

實測:長 context prompt 從 18 k tokens → 10 k tokens。

技巧 3:預(yù)測性擴容

線性回歸 預(yù)測未來 30 min 用量,提前調(diào)用 升級接口 提升 Tier,避免 429

技巧 4:自建“影子”監(jiān)控

把 5% 流量發(fā)到 laozhang.ai 做影子測試,對比延遲/成功率,提前發(fā)現(xiàn)官方網(wǎng)絡(luò)抖動


六、企業(yè)級儀表盤:一張圖看懂所有指標(biāo)

RPM 實時曲線 Prometheus 10 s 剩余 < 20%
Token/分鐘 Prometheus 10 s 剩余 < 1000
成本/小時 laozhang.ai 60 s 日預(yù)算 80%
成功率 Grafana Alertmanager 30 s < 99%

七、彩蛋:一鍵腳本 5 分鐘跑完

# 克隆倉庫
git clone https://github.com/mycorp/claude-monitor
cd claude-monitor
# 填 key
echo "CLAUDE_KEY=sk-ant-xxx" > .env
echo "LZ_API_KEY=lz-xxx" >> .env
# 啟動
docker-compose up -d
# 打開 http://localhost:3000 查看儀表盤

八、結(jié)語:讓限流成為“可觀測事件”而非“事故”

監(jiān)控 Claude 不是“錦上添花”,而是生產(chǎn)底線
把 header 讀數(shù)、Prometheus、多云熱備、預(yù)測擴容串成一條鏈,429 不再是深夜驚魂,而是一條可觀測、可自愈的指標(biāo)曲線。
下次告警響起時,你只需在 Slack 里回復(fù)一句:“擴容腳本已觸發(fā),5 分鐘后恢復(fù)。” 然后繼續(xù)睡覺。

熱門推薦
一個賬號試用1000+ API
助力AI無縫鏈接物理世界 · 無需多次注冊
3000+提示詞助力AI大模型
和專業(yè)工程師共享工作效率翻倍的秘密
返回頂部
上一篇
智能定價API:如何讓企業(yè)定價策略更精準(zhǔn)?
下一篇
開放API領(lǐng)域的領(lǐng)導(dǎo)者:冪簡集成
国内精品久久久久影院日本,日本中文字幕视频,99久久精品99999久久,又粗又大又黄又硬又爽毛片
中文字幕制服丝袜成人av| 热久久免费视频| 欧美成人激情免费网| 欧美性猛片aaaaaaa做受| 国产黄色成人av| 捆绑调教美女网站视频一区| 国产福利91精品| 国产在线精品免费| 国产麻豆精品视频| 欧美日韩在线播放一区| 日韩亚洲欧美中文三级| 欧美日韩一区成人| 欧美成人精品福利| 欧美极品美女视频| 国产精品久久精品日日| 日韩中文字幕1| aaa国产一区| 日韩欧美国产精品| 国产精品美女久久久久aⅴ | 精品av久久707| 亚洲电影欧美电影有声小说| 狠狠色狠狠色合久久伊人| 欧美性大战久久| 国产精品私人自拍| 国产尤物一区二区| 91麻豆精品国产| 亚洲国产综合视频在线观看| 94-欧美-setu| 一区二区三区在线免费观看| 一区二区三区日韩欧美精品| voyeur盗摄精品| 国产日韩欧美a| 国产suv一区二区三区88区| 日韩一级精品视频在线观看| 激情综合色丁香一区二区| 国产精品的网站| 97精品久久久午夜一区二区三区| 亚洲丝袜自拍清纯另类| 欧美一区二区不卡视频| 色综合色综合色综合| 国产制服丝袜一区| 性做久久久久久久免费看| 欧美老肥妇做.爰bbww| 一本到三区不卡视频| 成人一区二区在线观看| 最新中文字幕一区二区三区| 欧美一卡2卡3卡4卡| 欧美亚一区二区| 精品一区二区三区av| 视频在线观看国产精品| 成人av小说网| 精品国产电影一区二区| 全部av―极品视觉盛宴亚洲| 日本久久精品电影| 婷婷一区二区三区| 91精品国产一区二区| 亚洲免费看黄网站| 欧美久久一二三四区| a美女胸又www黄视频久久| 欧美精品视频www在线观看| 久久99精品国产麻豆不卡| 欧美一级高清片| 成人黄色综合网站| 激情综合五月天| av在线不卡电影| 国产精品影音先锋| 亚洲国产精品影院| 久久精品欧美一区二区三区麻豆| 成人污视频在线观看| 欧美另类z0zxhd电影| 中文字幕一区二区在线观看| 成人激情小说网站| 欧洲精品在线观看| 国产成人免费视频一区| 日韩精品成人一区二区在线| 国产色爱av资源综合区| 成人一区二区三区视频| 一区二区三区免费| 91精品国产aⅴ一区二区| 欧美日韩激情在线| 欧美日韩高清在线| 欧美日本不卡视频| 精品欧美乱码久久久久久1区2区| 自拍偷拍欧美精品| 精品系列免费在线观看| 日本在线观看不卡视频| 91丨九色丨蝌蚪丨老版| 成人性生交大片免费看在线播放 | 国产精品美女久久久久久久久 | 日本中文字幕一区二区视频 | 18涩涩午夜精品.www| 国产一区二区看久久| 精品国精品国产| 亚洲国产欧美日韩另类综合 | 91黄色免费版| 精品视频在线看| 日韩视频在线一区二区| 久久综合九色综合97_久久久| 精品久久国产97色综合| 最新国产成人在线观看| 91视频免费看| 91精品国产欧美一区二区18| 欧美一级欧美三级| 亚洲444eee在线观看| 欧美中文字幕久久| 亚洲免费观看高清完整版在线观看 | 国产91精品一区二区麻豆网站| 欧美经典一区二区| 欧美精品123区| 成人一区二区三区中文字幕| 亚洲三级免费电影| 欧美精品一区在线观看| 免费观看成人av| 一区二区三区久久| 国产色综合一区| 日韩欧美一区二区久久婷婷| 91视频国产资源| 国产一区二区福利| 亚洲午夜影视影院在线观看| 2024国产精品视频| 精品免费一区二区三区| 国产成人综合自拍| 日韩丝袜情趣美女图片| 欧美视频一区二区三区四区| 丁香婷婷综合色啪| 欧美精品一区二区蜜臀亚洲| 欧美视频一二三区| 国产在线麻豆精品观看| 奇米四色…亚洲| 免费欧美日韩国产三级电影| 日韩理论片一区二区| 一区二区三区视频在线观看| 一区二区三区不卡视频在线观看| 中文字幕欧美区| 亚洲免费在线视频一区 二区| 精品国产一区二区三区忘忧草| 欧美日韩成人高清| 欧美男男青年gay1069videost| 日本精品一区二区三区四区的功能| 国产高清亚洲一区| 成人h动漫精品一区二区| 成人aaaa免费全部观看| 91久久精品一区二区| 欧美日本一区二区三区四区| 精品在线免费观看| 99久久精品情趣| 在线视频一区二区免费| 91福利视频网站| 精品国产免费一区二区三区四区 | 日韩黄色免费电影| 国产欧美日韩在线看| 亚洲视频一二区| 奇米影视一区二区三区小说| 国产精品99久久久久| 精品一区二区av| 日韩一区二区三区在线| 中文字幕中文字幕中文字幕亚洲无线| 亚洲青青青在线视频| 国产乱子伦视频一区二区三区 | 国产成人在线看| 亚洲欧洲www| 26uuu久久综合| 日韩av一区二区在线影视| 91网址在线看| 国产精品久久久久久亚洲毛片| 天堂av在线一区| 欧美视频在线一区二区三区| 国产精品毛片久久久久久| 韩国女主播一区| 精品久久久久久久久久久久久久久 | 久久精品久久综合| 国产午夜一区二区三区| 成人黄色综合网站| 亚洲欧美一区二区三区极速播放| 成人毛片在线观看| 欧美成人国产一区二区| 色就色 综合激情| 亚洲午夜久久久| 91麻豆精品一区二区三区| 一区二区视频免费在线观看| 国产一区二区三区免费| 亚洲动漫第一页| 欧美成人高清电影在线| 99在线精品观看| 日韩电影在线免费| 国产欧美日韩综合| 欧美视频一区二区在线观看| 丁香啪啪综合成人亚洲小说| 亚洲成人777| 亚洲制服丝袜av| 国产精品剧情在线亚洲| 欧美日韩二区三区| 激情小说亚洲一区| 久热成人在线视频| 亚洲精品第1页| 中文字幕中文字幕在线一区| 国产蜜臀97一区二区三区| 91国内精品野花午夜精品| 国产午夜一区二区三区| 国产乱子伦视频一区二区三区 |