火山引擎實(shí)時(shí)音視頻（Volcengine Real Time Communication，veRTC）提供全球范圍內(nèi)高可靠、高并發(fā)、低延時(shí)的實(shí)時(shí)音視頻通信能力，實(shí)現(xiàn)多種類型的實(shí)時(shí)交流和互動(dòng)。通過(guò)在應(yīng)用中接入 veRTC SDK，并調(diào)用 veRTC 提供的 API，可以快速構(gòu)建：音視頻聊天、在線教育、直播連麥、視頻會(huì)議、游戲語(yǔ)音、云游戲、云端渲染等豐富場(chǎng)景功能，覆蓋互娛、教育、游戲、會(huì)議等各種行業(yè)需求。

基礎(chǔ)功能

1. 語(yǔ)音通話：支持 1v1 語(yǔ)音聊天和多人語(yǔ)音群聊，48kHz 全頻帶采樣，先進(jìn) 3A 處理算法，還原高音質(zhì)。
2. 視頻通話：支持 1v1 視頻聊天和多人視頻群聊，VR 最高支持 8K 高清畫質(zhì)，采用行業(yè)領(lǐng)先的編解碼算法策略
3. 互動(dòng)直播：?jiǎn)畏块g支持最多 1000 名主播，10 萬(wàn)名觀眾，首幀時(shí)長(zhǎng)中位數(shù) <300ms

進(jìn)階功能

1. 連麥互動(dòng)：支持主播與觀眾連麥、主播與主播連麥，上下麥切換體驗(yàn)平滑流暢。
2. 合流轉(zhuǎn)推：將多人 RTC 流進(jìn)行云端合流轉(zhuǎn)碼，支持合流、自定義布局，并推流到指定直播 CDN。
3. 伴音伴奏：將本地背景音、伴奏等同步發(fā)送給遠(yuǎn)端用戶。
4. 氛圍音：支持播放短小的氛圍音和音效文件，如笑聲、鼓掌、歡呼、尖叫等氛圍音效果。
5. 耳返：支持耳返監(jiān)聽(tīng)功能，支持調(diào)節(jié)耳返的音量，耳返延時(shí)低至 50ms。
6. AI 降噪：通過(guò) AI 算法有效抑制常見(jiàn)平穩(wěn)噪聲和非平穩(wěn)噪聲，為用戶提供超純凈音質(zhì)體驗(yàn)。
7. 推送多路流：支持同時(shí)發(fā)送高清大流和低清小流，接收端根據(jù)網(wǎng)絡(luò)自動(dòng)訂閱。
8. 超分：支持將低分辨率視頻超分成高分辨率視頻，提高視頻清晰度和畫質(zhì)。
9. 屏幕共享：將電腦桌面、窗口、指定區(qū)域分享給其他人，支持與攝像頭畫面同時(shí)顯示。
10. 自采集自渲染：支持自定義的視頻源和渲染器，可以更靈活地處理視頻。
11. 云端錄制：通過(guò) OpenAPI 發(fā)起錄制任務(wù)請(qǐng)求，veRTC 進(jìn)行音視頻錄制并上傳至客戶指定的存儲(chǔ)平臺(tái)

擴(kuò)展功能

1. 美顏特效：深度融合火山引擎 CV 功能，支持基礎(chǔ)美顏、高級(jí)美顏、濾鏡、貼紙等。
2. 空間音頻：一種能夠呈現(xiàn)聲源的空間方位的音頻技術(shù)，提高用戶音頻體驗(yàn)的沉浸感。
3. 范圍語(yǔ)音：一種音頻效果，開(kāi)啟此功能后，聲音的衰減系數(shù)隨距離聲源的距離變大而變大。
4. 美聲音效：設(shè)置變聲、混響、語(yǔ)音變調(diào)功能。
5. 曲庫(kù)管理：獲取歌曲列表、搜索歌曲、獲取熱歌榜單等。
6. 背景分割：支持通過(guò) AI 算法將人物與背景分割。
7. 添加視頻水印：為實(shí)時(shí)音視頻通信的視頻畫面添加自定義水印。
8. ASR 語(yǔ)音識(shí)別：采用業(yè)內(nèi)領(lǐng)先的端到端算法模型，準(zhǔn)確地將語(yǔ)音內(nèi)容轉(zhuǎn)寫成文字。
9. 發(fā)送和接收媒體補(bǔ)充增強(qiáng)信息(SEI)：SEI 信息跟隨音視頻幀發(fā)送，實(shí)現(xiàn) SEI 內(nèi)容與音視頻內(nèi)容精準(zhǔn)同步。
10. 內(nèi)容審核：支持音視頻敏感內(nèi)容審核功能，確保內(nèi)容安全。
11. AI 應(yīng)用：一站式的 AI 接入服務(wù)，支持表情識(shí)別、手勢(shì)識(shí)別、注意力識(shí)別、中英文開(kāi)口時(shí)長(zhǎng)等 AI 功能。

1. 音頻 3A 處理

業(yè)界領(lǐng)先的 3A 算法。實(shí)現(xiàn) 48kHz 高音質(zhì)全雙工的回聲消除。自動(dòng)噪聲抑制、自動(dòng)增益使用超低計(jì)算量機(jī)器學(xué)習(xí)算法，更低的功耗實(shí)現(xiàn)更好的效果。

2. 機(jī)型主動(dòng)適配

適配 40000+ 款不同的機(jī)型，根據(jù)設(shè)備的性能打分、覆蓋率等進(jìn)行差異化的視頻采集/編碼策略，實(shí)現(xiàn) RTC 硬編硬解的機(jī)型適配（按實(shí)際通話時(shí)長(zhǎng)計(jì)算）比例超過(guò) 90%。

3. 最佳畫質(zhì)

采用 H.265 編碼器，效率較 H.264 顯著提升。另外支持 Simulcast、SVC、ROI、自動(dòng)碼率等先進(jìn)編碼策略和超分、視頻降噪、暗光增強(qiáng)等先進(jìn)畫質(zhì)增強(qiáng)算法，可根據(jù)不同機(jī)型性能，下發(fā)不同檔位的視頻分辨率，移動(dòng)端最高支持 1080P，PC 端最高支持 4K，VR 最高支持 8K。

4. 高可用

支持單元化部署，分鐘級(jí)急速擴(kuò)容。同城雙機(jī)房，多線路冗余傳輸。符合 SLA 服務(wù)等級(jí)協(xié)議規(guī)定的指標(biāo)，服務(wù)可用性不低于 99.9%。

5. 低延時(shí)

基于優(yōu)質(zhì)全球傳輸網(wǎng)絡(luò)，全球端到端 400ms 延時(shí)達(dá)標(biāo)率 ≥ 99.5%，服務(wù)端平均延時(shí) < 50ms。

6. 弱網(wǎng)自適應(yīng)

應(yīng)用 FEC、ARQ、HARQ、自適應(yīng) Jitter Buffer、自適應(yīng)碼率下發(fā)等弱網(wǎng)策略，實(shí)現(xiàn) 50% 丟包無(wú)感知恢復(fù)，最高 80% 抗丟包能力。支持內(nèi)容自適應(yīng)編碼，可基于線上視頻清晰度的實(shí)時(shí)反饋來(lái)進(jìn)行自動(dòng)碼率調(diào)整，減輕網(wǎng)絡(luò)傳輸?shù)膲毫ΑＭ瑫r(shí)采用智能擁塞控制算法 VICC，能夠根據(jù)不同的網(wǎng)絡(luò)條件、業(yè)務(wù)偏好和碼率特征進(jìn)行自適應(yīng)調(diào)整，以提升各種復(fù)雜弱網(wǎng)下的帶寬利用率。

7. 性能動(dòng)態(tài)適配

支持智能流控協(xié)議，可以綜合考慮音視頻通話中每個(gè)訂閱者的個(gè)性化需求，在網(wǎng)絡(luò)情況、終端性能發(fā)生變化的時(shí)候，自動(dòng)調(diào)整音視頻流的配置，提升用戶體驗(yàn)。

8. 場(chǎng)景化策略

支持區(qū)分不同業(yè)務(wù)場(chǎng)景的參數(shù)配置下發(fā)，根據(jù)不同用戶規(guī)模、機(jī)型、地區(qū)、網(wǎng)絡(luò)模型采取不同的適配策略，滿足多樣化的高質(zhì)量音視頻體驗(yàn)需求。

9. 高效集成開(kāi)發(fā)

提供靈活規(guī)范的 API，支持一鍵配置業(yè)務(wù)最佳實(shí)踐，降低開(kāi)發(fā)者集成復(fù)雜度，提高開(kāi)發(fā)效率，平均 2 周內(nèi)即可上線。可裁剪的 SDK 包設(shè)計(jì)，CPU 內(nèi)存占用更低。適用于各種平臺(tái)，可以快速構(gòu)建多端應(yīng)用。

10. 超大規(guī)模互動(dòng)

行業(yè)首創(chuàng)單房間支持超千人同時(shí)開(kāi)麥，突破傳統(tǒng)實(shí)時(shí)音視頻上麥人數(shù)限制，互動(dòng)人數(shù)提升 20 倍以上，觀眾人數(shù)無(wú)上限。

11. 多樣化產(chǎn)品融合

與火山引擎平臺(tái)各核心產(chǎn)品深度融合，聯(lián)動(dòng)美顏特效、直播、點(diǎn)播、內(nèi)容審核、語(yǔ)音識(shí)別、AI 應(yīng)用等產(chǎn)品，為用戶提供各種實(shí)時(shí)音視頻場(chǎng)景下的全鏈路解決方案。

12. 安全合規(guī)

擁有完善的安全保護(hù)體系，可提供全鏈路音視頻加密、用戶業(yè)務(wù)數(shù)據(jù)隔離，且滿足 ISO 等信息安全標(biāo)準(zhǔn)以及 GDPR、CCPA 等跨境安全合規(guī)要求。

1. 在線KTV

排麥獨(dú)唱與實(shí)時(shí)互動(dòng)結(jié)合是當(dāng)前互娛社交領(lǐng)域的熱門玩法，用戶跟隨音樂(lè)演唱歌曲并與其他用戶進(jìn)行音視頻實(shí)時(shí)互動(dòng)，滿足了用戶才藝展示的需求，為用戶之間關(guān)系的構(gòu)建提供了玩法通道；通過(guò)排麥獨(dú)唱增加了房間內(nèi)互動(dòng)的樂(lè)趣，有助于提高用戶活躍度及用戶留存率。火山引擎提供實(shí)時(shí)音視頻通話、正版音樂(lè)曲庫(kù)、K歌音效處理等互動(dòng)K歌一站式解決方案，幫助開(kāi)發(fā)者無(wú)門檻搭建排麥獨(dú)唱場(chǎng)景。

2. 一起看直播

一起看直播是社交娛樂(lè)的新場(chǎng)景，通過(guò)實(shí)時(shí)音視頻互動(dòng)體驗(yàn)線下與朋友一起看直播的氛圍。房主創(chuàng)建一個(gè)線上實(shí)時(shí)互動(dòng)的房間，在房間內(nèi)播放直播視頻，邀請(qǐng)用戶一起邊看直播邊視頻聊天。火山引擎基于實(shí)時(shí)音視頻 SDK，提供抖音同款“一起看直播”解決方案。支持添加美顏特效、房間內(nèi)文字聊天，增強(qiáng)好友看播趣味互動(dòng)。

3. 游戲房

游戲房是泛娛樂(lè)社交領(lǐng)域的一種新玩法，例如情侶小游戲、聊天室小游戲等。主播或用戶在傳統(tǒng)的語(yǔ)音聊天室或語(yǔ)音通話的基礎(chǔ)上選擇不同的小游戲，例如五子棋、你畫我猜、猜拳等。通過(guò)小游戲可以增加用戶的停留時(shí)長(zhǎng)，創(chuàng)造更多的話題。對(duì)于聊天室場(chǎng)景，主播可以邀請(qǐng)麥下的觀眾與其一起玩小游戲，與他們實(shí)時(shí)互通。

4. 音視頻通話

音視頻通話是社交中一種最常見(jiàn)的基礎(chǔ)場(chǎng)景，在與陌生人之間通話時(shí)，更多地需要剔除角色的差異。通過(guò)輸入用戶 ID，創(chuàng)建并進(jìn)入一個(gè)線上實(shí)時(shí)互動(dòng)的房間，雙方可以在房間內(nèi)實(shí)時(shí)暢聊，同時(shí)支持添加美顏特效，為用戶打造一個(gè)穩(wěn)定、高質(zhì)量的音視頻聊天室。