火山引擎實(shí)時音視頻（Volcengine Real Time Communication，veRTC）提供全球范圍內(nèi)高可靠、高并發(fā)、低延時的實(shí)時音視頻通信能力，實(shí)現(xiàn)多種類型的實(shí)時交流和互動。通過在應(yīng)用中接入 veRTC SDK，并調(diào)用 veRTC 提供的 API，可以快速構(gòu)建：音視頻聊天、在線教育、直播連麥、視頻會議、游戲語音、云游戲、云端渲染等豐富場景功能，覆蓋互娛、教育、游戲、會議等各種行業(yè)需求。

基礎(chǔ)功能

1. 語音通話：支持 1v1 語音聊天和多人語音群聊，48kHz 全頻帶采樣，先進(jìn) 3A 處理算法，還原高音質(zhì)。
2. 視頻通話：支持 1v1 視頻聊天和多人視頻群聊，VR 最高支持 8K 高清畫質(zhì)，采用行業(yè)領(lǐng)先的編解碼算法策略
3. 互動直播：單房間支持最多 1000 名主播，10 萬名觀眾，首幀時長中位數(shù) <300ms

進(jìn)階功能

1. 連麥互動：支持主播與觀眾連麥、主播與主播連麥，上下麥切換體驗(yàn)平滑流暢。
2. 合流轉(zhuǎn)推：將多人 RTC 流進(jìn)行云端合流轉(zhuǎn)碼，支持合流、自定義布局，并推流到指定直播 CDN。
3. 伴音伴奏：將本地背景音、伴奏等同步發(fā)送給遠(yuǎn)端用戶。
4. 氛圍音：支持播放短小的氛圍音和音效文件，如笑聲、鼓掌、歡呼、尖叫等氛圍音效果。
5. 耳返：支持耳返監(jiān)聽功能，支持調(diào)節(jié)耳返的音量，耳返延時低至 50ms。
6. AI 降噪：通過 AI 算法有效抑制常見平穩(wěn)噪聲和非平穩(wěn)噪聲，為用戶提供超純凈音質(zhì)體驗(yàn)。
7. 推送多路流：支持同時發(fā)送高清大流和低清小流，接收端根據(jù)網(wǎng)絡(luò)自動訂閱。
8. 超分：支持將低分辨率視頻超分成高分辨率視頻，提高視頻清晰度和畫質(zhì)。
9. 屏幕共享：將電腦桌面、窗口、指定區(qū)域分享給其他人，支持與攝像頭畫面同時顯示。
10. 自采集自渲染：支持自定義的視頻源和渲染器，可以更靈活地處理視頻。
11. 云端錄制：通過 OpenAPI 發(fā)起錄制任務(wù)請求，veRTC 進(jìn)行音視頻錄制并上傳至客戶指定的存儲平臺

擴(kuò)展功能

1. 美顏特效：深度融合火山引擎 CV 功能，支持基礎(chǔ)美顏、高級美顏、濾鏡、貼紙等。
2. 空間音頻：一種能夠呈現(xiàn)聲源的空間方位的音頻技術(shù)，提高用戶音頻體驗(yàn)的沉浸感。
3. 范圍語音：一種音頻效果，開啟此功能后，聲音的衰減系數(shù)隨距離聲源的距離變大而變大。
4. 美聲音效：設(shè)置變聲、混響、語音變調(diào)功能。
5. 曲庫管理：獲取歌曲列表、搜索歌曲、獲取熱歌榜單等。
6. 背景分割：支持通過 AI 算法將人物與背景分割。
7. 添加視頻水?。簽閷?shí)時音視頻通信的視頻畫面添加自定義水印。
8. ASR 語音識別：采用業(yè)內(nèi)領(lǐng)先的端到端算法模型，準(zhǔn)確地將語音內(nèi)容轉(zhuǎn)寫成文字。
9. 發(fā)送和接收媒體補(bǔ)充增強(qiáng)信息(SEI)：SEI 信息跟隨音視頻幀發(fā)送，實(shí)現(xiàn) SEI 內(nèi)容與音視頻內(nèi)容精準(zhǔn)同步。
10. 內(nèi)容審核：支持音視頻敏感內(nèi)容審核功能，確保內(nèi)容安全。
11. AI 應(yīng)用：一站式的 AI 接入服務(wù)，支持表情識別、手勢識別、注意力識別、中英文開口時長等 AI 功能。

1. 音頻 3A 處理

業(yè)界領(lǐng)先的 3A 算法。實(shí)現(xiàn) 48kHz 高音質(zhì)全雙工的回聲消除。自動噪聲抑制、自動增益使用超低計算量機(jī)器學(xué)習(xí)算法，更低的功耗實(shí)現(xiàn)更好的效果。

2. 機(jī)型主動適配

適配 40000+ 款不同的機(jī)型，根據(jù)設(shè)備的性能打分、覆蓋率等進(jìn)行差異化的視頻采集/編碼策略，實(shí)現(xiàn) RTC 硬編硬解的機(jī)型適配（按實(shí)際通話時長計算）比例超過 90%。

3. 最佳畫質(zhì)

采用 H.265 編碼器，效率較 H.264 顯著提升。另外支持 Simulcast、SVC、ROI、自動碼率等先進(jìn)編碼策略和超分、視頻降噪、暗光增強(qiáng)等先進(jìn)畫質(zhì)增強(qiáng)算法，可根據(jù)不同機(jī)型性能，下發(fā)不同檔位的視頻分辨率，移動端最高支持 1080P，PC 端最高支持 4K，VR 最高支持 8K。

4. 高可用

支持單元化部署，分鐘級急速擴(kuò)容。同城雙機(jī)房，多線路冗余傳輸。符合 SLA 服務(wù)等級協(xié)議規(guī)定的指標(biāo)，服務(wù)可用性不低于 99.9%。

5. 低延時

基于優(yōu)質(zhì)全球傳輸網(wǎng)絡(luò)，全球端到端 400ms 延時達(dá)標(biāo)率 ≥ 99.5%，服務(wù)端平均延時 < 50ms。

6. 弱網(wǎng)自適應(yīng)

應(yīng)用 FEC、ARQ、HARQ、自適應(yīng) Jitter Buffer、自適應(yīng)碼率下發(fā)等弱網(wǎng)策略，實(shí)現(xiàn) 50% 丟包無感知恢復(fù)，最高 80% 抗丟包能力。支持內(nèi)容自適應(yīng)編碼，可基于線上視頻清晰度的實(shí)時反饋來進(jìn)行自動碼率調(diào)整，減輕網(wǎng)絡(luò)傳輸?shù)膲毫?。同時采用智能擁塞控制算法 VICC，能夠根據(jù)不同的網(wǎng)絡(luò)條件、業(yè)務(wù)偏好和碼率特征進(jìn)行自適應(yīng)調(diào)整，以提升各種復(fù)雜弱網(wǎng)下的帶寬利用率。

7. 性能動態(tài)適配

支持智能流控協(xié)議，可以綜合考慮音視頻通話中每個訂閱者的個性化需求，在網(wǎng)絡(luò)情況、終端性能發(fā)生變化的時候，自動調(diào)整音視頻流的配置，提升用戶體驗(yàn)。

8. 場景化策略

支持區(qū)分不同業(yè)務(wù)場景的參數(shù)配置下發(fā)，根據(jù)不同用戶規(guī)模、機(jī)型、地區(qū)、網(wǎng)絡(luò)模型采取不同的適配策略，滿足多樣化的高質(zhì)量音視頻體驗(yàn)需求。

9. 高效集成開發(fā)

提供靈活規(guī)范的 API，支持一鍵配置業(yè)務(wù)最佳實(shí)踐，降低開發(fā)者集成復(fù)雜度，提高開發(fā)效率，平均 2 周內(nèi)即可上線。可裁剪的 SDK 包設(shè)計，CPU 內(nèi)存占用更低。適用于各種平臺，可以快速構(gòu)建多端應(yīng)用。

11. 多樣化產(chǎn)品融合

與火山引擎平臺各核心產(chǎn)品深度融合，聯(lián)動美顏特效、直播、點(diǎn)播、內(nèi)容審核、語音識別、AI 應(yīng)用等產(chǎn)品，為用戶提供各種實(shí)時音視頻場景下的全鏈路解決方案。

12. 安全合規(guī)

擁有完善的安全保護(hù)體系，可提供全鏈路音視頻加密、用戶業(yè)務(wù)數(shù)據(jù)隔離，且滿足 ISO 等信息安全標(biāo)準(zhǔn)以及 GDPR、CCPA 等跨境安全合規(guī)要求。

1. 在線KTV

排麥獨(dú)唱與實(shí)時互動結(jié)合是當(dāng)前互娛社交領(lǐng)域的熱門玩法，用戶跟隨音樂演唱歌曲并與其他用戶進(jìn)行音視頻實(shí)時互動，滿足了用戶才藝展示的需求，為用戶之間關(guān)系的構(gòu)建提供了玩法通道；通過排麥獨(dú)唱增加了房間內(nèi)互動的樂趣，有助于提高用戶活躍度及用戶留存率?；鹕揭嫣峁?shí)時音視頻通話、正版音樂曲庫、K歌音效處理等互動K歌一站式解決方案，幫助開發(fā)者無門檻搭建排麥獨(dú)唱場景。

2. 一起看直播

一起看直播是社交娛樂的新場景，通過實(shí)時音視頻互動體驗(yàn)線下與朋友一起看直播的氛圍。房主創(chuàng)建一個線上實(shí)時互動的房間，在房間內(nèi)播放直播視頻，邀請用戶一起邊看直播邊視頻聊天。火山引擎基于實(shí)時音視頻 SDK，提供抖音同款“一起看直播”解決方案。支持添加美顏特效、房間內(nèi)文字聊天，增強(qiáng)好友看播趣味互動。

3. 游戲房

游戲房是泛娛樂社交領(lǐng)域的一種新玩法，例如情侶小游戲、聊天室小游戲等。主播或用戶在傳統(tǒng)的語音聊天室或語音通話的基礎(chǔ)上選擇不同的小游戲，例如五子棋、你畫我猜、猜拳等。通過小游戲可以增加用戶的停留時長，創(chuàng)造更多的話題。對于聊天室場景，主播可以邀請麥下的觀眾與其一起玩小游戲，與他們實(shí)時互通。

4. 音視頻通話

音視頻通話是社交中一種最常見的基礎(chǔ)場景，在與陌生人之間通話時，更多地需要剔除角色的差異。通過輸入用戶 ID，創(chuàng)建并進(jìn)入一個線上實(shí)時互動的房間，雙方可以在房間內(nèi)實(shí)時暢聊，同時支持添加美顏特效，為用戶打造一個穩(wěn)定、高質(zhì)量的音視頻聊天室。