
Nexus API 的入門教程與使用指南
(友情提示:文章內(nèi)所有超鏈接均可直接點(diǎn)擊跳轉(zhuǎn)到官方文檔或開源倉庫。)
版本 | 分辨率 & 幀率 | 一致性時(shí)長 | 交互方式 | 開放程度 |
---|---|---|---|---|
Genie 1 | 256×256 / 10fps | 3–5 s | 僅鍵盤 | 論文+代碼 |
Genie 2 | 360p / 15fps | 10–20 s | 鍵盤+鼠標(biāo) | 受限 API |
Genie 3 | 720p / 24fps | > 180 s | 文本+圖像+手柄 | Early-Access API |
一句話總結(jié):Genie 3 把“世界模型”從實(shí)驗(yàn)室玩具變成了可生產(chǎn)、可商業(yè)化的“創(chuàng)世引擎”。
官方博客標(biāo)題毫不謙虛——“A new frontier for world models”。
層級(jí) | 協(xié)議/格式 | 關(guān)鍵字段 | 備注 |
---|---|---|---|
應(yīng)用層 | GeniePrompt 1.0 | prompt , seed , world_seed , max_frames , stream_mode=true |
官方文檔 |
消息層 | WebSocket over HTTP/3 | frame_id , delta_time , input_events |
支持二進(jìn)制 + JSON |
渲染層 | Custom GLB + Draco + Diffusion Texture | mesh_id , material_id , physics_state |
實(shí)時(shí)增量加載 |
傳輸層 | QUIC (UDP) | FEC + 0-RTT | 谷歌祖?zhèn)骱诳萍?/td> |
新增 /event
端點(diǎn),允許在運(yùn)行中 PATCH 世界狀態(tài):
POST /v1/worlds/{world_id}/event
{
"type": "weather_change",
"payload": { "condition": "blizzard", "intensity": 0.8 }
}
服務(wù)端返回 204,隨后通過 WebSocket 推送差異幀,延遲 < 40 ms。
camera_path=orbit
參數(shù)。 camera_pose
,服務(wù)端回推新的 6-DoF 幀,循環(huán)往復(fù)。輸入:幀 t 的 RGB+Depth+Segmentation → 2D Patch Embedding
位置編碼:3D RoPE(旋轉(zhuǎn)位置編碼)
自注意力:Factorized (Spatial × Temporal)
輸出:下一幀 latent
L_persistent = Σ|F_t - F_{t-k}
。pip install genie3-api
from genie3 import GenieClient
client = GenieClient(api_key="YOUR_KEY")
world = client.create(
prompt="cyberpunk alley with neon kanji signs",
fps=24,
duration=180
)
for frame in world.stream():
cv2.imshow('genie', frame)
npm i @deepmind/genie3
import { GenieSession } from '@deepmind/genie3';
const session = await GenieSession.connect({ apiKey });
session.on('frame', (buf) = > {
const blob = new Blob([buf], { type: 'image/jpeg' });
img.src = URL.createObjectURL(blob);
});
Genie3Streamer
到場景,填寫 API Key; 分辨率 | 模型 | 顯存占用 | 平均幀率 | 延遲 |
---|---|---|---|---|
720p | Genie 3-Small | 6.8 GB | 24 fps | 38 ms |
720p | Genie 3-Large | 12.4 GB | 18 fps | 52 ms |
1080p | Genie 3-Large | 18.1 GB | 11 fps | 71 ms |
官方推薦:8 Gen 2 TPUs + JAX 分布式推理可穩(wěn) 30 fps 1080p,但 Early-Access 暫不開放云算力。
官方透露 2026 年將發(fā)布 Genie 3.5:
屆時(shí),DeepMind 計(jì)劃推出 Genie Cloud 托管服務(wù),按秒計(jì)費(fèi),預(yù)估 1 小時(shí) 2.3 美元。
“如果宇宙是臺(tái)計(jì)算機(jī),那么 Genie 3 就是人類第一次拿到了 root 權(quán)限。”——某位不愿透露姓名的 DeepMind 工程師
從 720p@24fps 到未來 4K@60fps,從單端 Demo 到全球云渲染,Genie 3 讓我們離“所想即所得”的虛擬宇宙只差一次 HTTP 請(qǐng)求的距離。
現(xiàn)在就訪問 https://deepmind.google/discover/blog/genie-3-a-new-frontier-for-world-models/ 申請(qǐng) Early-Access,成為第一批創(chuàng)世者吧!
Nexus API 的入門教程與使用指南
HTTP API vs WebSocket API:選擇哪個(gè)來實(shí)現(xiàn)實(shí)時(shí)通信?
API 規(guī)范:設(shè)計(jì)與最佳實(shí)踐
16家頂尖API開發(fā)公司助力企業(yè)數(shù)字化轉(zhuǎn)型
如何獲取 RollToolsApi 開放平臺(tái) API Key 密鑰(分步指南)
WordPress REST API 內(nèi)容注入漏洞分析
什么是OpenAPI?
釋放Spring Boot API中數(shù)字簽名的強(qiáng)大功能
如何使用ChatGPT JavaScript API,3個(gè)簡單步驟
對(duì)比大模型API的內(nèi)容創(chuàng)意新穎性、情感共鳴力、商業(yè)轉(zhuǎn)化潛力
一鍵對(duì)比試用API 限時(shí)免費(fèi)