技術(shù)背景

2015年，因應(yīng)急指揮項(xiàng)目需求，我們實(shí)現(xiàn)了RTMP推送音視頻采集推送（采集攝像頭和麥克風(fēng)數(shù)據(jù)）模塊，在我們做好了RTMP推送模塊后，苦于沒(méi)有一個(gè)滿足我們毫秒級(jí)延遲訴求的RTMP播放器，于是第一款低延遲的RTMP播放器，就這么誕生了。

隨著時(shí)間的推進(jìn)，大牛直播SDK（SmartMediaKit）已經(jīng)成為音視頻高穩(wěn)定、低延遲的代名詞，涵蓋跨平臺(tái)（Windows、Linux（x64_64架構(gòu)|aarch64）、Android、iOS）的實(shí)時(shí)RTMP推流、RTMP/RTSP直播播放(支持RTSP|RTMP H.265，Enhanced RTMP H.265)、GB28181設(shè)備接入、推送端播放端實(shí)時(shí)錄像、多路流媒體轉(zhuǎn)發(fā)(RTSP轉(zhuǎn)RTMP，RTMP轉(zhuǎn)RTMP，RTSP|RTMP轉(zhuǎn)GB28181)、音視頻導(dǎo)播、動(dòng)態(tài)視頻合成、音頻混音、一對(duì)一互動(dòng)直播、內(nèi)置輕量級(jí)RTSP服務(wù)、RTSP網(wǎng)關(guān)服務(wù)等，已然成為業(yè)內(nèi)為數(shù)不多的比快更快，真正穩(wěn)定可靠的超低延遲直播SDK(毫秒級(jí)延遲，低延遲模式下150~300ms)。

低延遲的音視頻直播技術(shù)解決方案適用于在線教育、智慧教室|無(wú)紙化推屏|會(huì)議、運(yùn)營(yíng)商視頻云平臺(tái)、執(zhí)法記錄、電力巡檢、智慧水利、智慧煤礦、管廊隧道、平衡操控、虛擬仿真實(shí)訓(xùn)教學(xué)、VR教育、云展會(huì)、金融雙錄、遠(yuǎn)程醫(yī)療、智能可視門(mén)禁對(duì)講、智慧安防、智能家居、物聯(lián)網(wǎng)、智能車載、傳統(tǒng)硬件領(lǐng)域、媒體移動(dòng)直播、應(yīng)急指揮調(diào)度(針對(duì)保險(xiǎn)、城管、交警、消防、公安等職能管理部門(mén)的單兵應(yīng)急執(zhí)法系統(tǒng))、遠(yuǎn)程專家診斷、可視化巡檢、(如電信/電力線路/鐵路沿線/水利設(shè)施/油田/消防設(shè)施巡檢)、移動(dòng)視頻安防監(jiān)控，企業(yè)內(nèi)訓(xùn)、監(jiān)控對(duì)接等場(chǎng)景。

技術(shù)特點(diǎn)

大牛直播SDK是一套功能強(qiáng)大的跨平臺(tái)流媒體內(nèi)核組件，具有以下特點(diǎn)和優(yōu)勢(shì)：

功能豐富：

• 多種數(shù)據(jù)采集與推送：支持多攝像頭、屏幕、麥克風(fēng)等數(shù)據(jù)采集與推送功能?？梢赃x擇攝像頭列表、設(shè)置攝像頭的分辨率和幀率等參數(shù)；對(duì)于屏幕采集，支持屏幕裁剪，可根據(jù)幀率和推送分辨率自動(dòng)推薦碼流，并且默認(rèn)幀率可調(diào)整。還支持外部 H.264 接口輸入等擴(kuò)展數(shù)據(jù)采集方式。
• 靈活的合成與疊加：支持?jǐn)z像頭和屏幕的多種合成與疊加模式，如攝像頭疊加到屏幕、屏幕疊加到攝像頭等，并支持實(shí)時(shí)關(guān)閉疊加層。此外，還能設(shè)置實(shí)時(shí)水印，包括文字水印、實(shí)時(shí)時(shí)間水印和圖片水印，以及設(shè)置透明度處理（遮蓋）等功能。
• 音頻處理全面：支持揚(yáng)聲器和麥克風(fēng)音頻混音輸出，可采集電腦輸出的音頻或麥克風(fēng)音頻。在音頻編碼方面，默認(rèn)是 AAC 編碼模式，如需碼率更低，也可選擇 SPEEX 編碼模式。同時(shí)具備音頻 “端點(diǎn)檢測(cè)（VAD）”、回音消除、噪音抑制、自動(dòng)增益控制等音頻處理功能。
• 推送與播放功能多樣：支持多種音視頻格式的推送，如 H.264、AAC、Speex、PCMA、PCMU 等。在播放方面，支持 RTMP、RTSP 直播播放，提供軟解碼、硬解碼設(shè)置，具有實(shí)時(shí)靜音、快照、view 旋轉(zhuǎn)、秒開(kāi)等功能，還支持多實(shí)例播放以及網(wǎng)絡(luò)狀態(tài)和 buffer 狀態(tài)等回調(diào)。
• 錄像與文件處理：支持 RTMP、RTSP 流錄制，音頻轉(zhuǎn) AAC 后錄制，以及只錄制音頻或視頻等模式，并且文件可自動(dòng)切分。支持設(shè)置錄像文件前綴、錄像文件大小、錄像文件是否增加日期和時(shí)間等。
• 內(nèi)置服務(wù)與設(shè)備接入：具有內(nèi)置輕量級(jí) RTSP 服務(wù)，支持對(duì)外提供 RTSP 服務(wù)，可同時(shí)開(kāi)啟多個(gè) service，提供小規(guī)模并發(fā)訪問(wèn)；還支持 GB28181 設(shè)備接入，可實(shí)現(xiàn)不具備國(guó)標(biāo)音視頻能力的 Android 終端通過(guò)平臺(tái)注冊(cè)接入到現(xiàn)有的 GB/T28181 服務(wù)。

技術(shù)優(yōu)勢(shì)明顯：

• 低延遲：能夠?qū)⒉シ叛舆t穩(wěn)定地控制在較低水平，在低延遲模式下可達(dá)到 150 - 300ms，這對(duì)于對(duì)實(shí)時(shí)性要求較高的直播、互動(dòng)等場(chǎng)景非常重要，能夠顯著提升用戶體驗(yàn)。
• 高穩(wěn)定性：可以長(zhǎng)時(shí)間穩(wěn)定運(yùn)行，減少因播放器故障導(dǎo)致的直播中斷等問(wèn)題，適用于需要長(zhǎng)時(shí)間持續(xù)運(yùn)行的應(yīng)用場(chǎng)景。
• 全自研框架與模塊化設(shè)計(jì)：采用全自研框架，具備高度可擴(kuò)展性與自適應(yīng)算法，資源占用低，靈活性強(qiáng)。開(kāi)發(fā)者可以根據(jù)自己的需求選擇功能模塊進(jìn)行組合使用。
• 多平臺(tái)支持：支持 Windows、Linux、Android、iOS 等多個(gè)平臺(tái)，滿足不同設(shè)備和應(yīng)用場(chǎng)景的需求。

應(yīng)用場(chǎng)景廣泛：

• 在線教育：教師可通過(guò)該 SDK 進(jìn)行實(shí)時(shí)授課，支持屏幕共享、文檔展示、PPT 講解等功能，實(shí)現(xiàn)遠(yuǎn)程協(xié)作和討論，還可用于教學(xué)視頻的實(shí)時(shí)錄制、回放和分享。
• 智慧安防：用于城市監(jiān)控、企業(yè)安防、智能家居等場(chǎng)景的實(shí)時(shí)視頻流傳輸和錄制，為應(yīng)急指揮調(diào)度工作提供低延遲、高穩(wěn)定性的直播服務(wù)。
• 媒體直播：適用于新聞直播、體育賽事直播、娛樂(lè)直播等移動(dòng)直播場(chǎng)景，以及演唱會(huì)、發(fā)布會(huì)、展覽等活動(dòng)的現(xiàn)場(chǎng)直播，支持遠(yuǎn)程觀眾與現(xiàn)場(chǎng)活動(dòng)的實(shí)時(shí)互動(dòng)。
• 遠(yuǎn)程醫(yī)療：醫(yī)生可進(jìn)行遠(yuǎn)程會(huì)診，與異地專家進(jìn)行實(shí)時(shí)視頻交流和病例討論，還支持手術(shù)過(guò)程的實(shí)時(shí)直播和錄制，為醫(yī)學(xué)教育和手術(shù)觀摩提供便捷途徑。
• 其他行業(yè)：如可視化購(gòu)物、遠(yuǎn)程專家診斷、可視化巡檢等場(chǎng)景也能得到很好的應(yīng)用。

近十年的技術(shù)積累，讓大牛直播SDK憑借其豐富的功能、優(yōu)秀的技術(shù)優(yōu)勢(shì)和廣泛的應(yīng)用場(chǎng)景，為開(kāi)發(fā)者提供了強(qiáng)大的流媒體解決方案，在直播、安防、教育、醫(yī)療等多個(gè)領(lǐng)域具有較高的應(yīng)用價(jià)值。

我們始終相信：Faster than “Fastest”，Smarter than “Smartest”，Stabler than “Stablest”。

厚積薄發(fā)，登上山頂，不是為了飽覽風(fēng)光，是為了尋找更高的山峰，從敬畏到顛覆，以匠人之心，專注、極致、智慧，志在成為業(yè)內(nèi)為數(shù)不多真正穩(wěn)定可靠的流媒體技術(shù)方案締造者。