視音頻數據處理入門:UDP-RTP協議解析

原作者雷霄驊,于前幾日去世,可惜,愿一路走好。
本文介紹網絡協議數據的處理程序。網絡協議數據在視頻播放器中的位置如下所示。


原理

MPEG-TS封裝格式數據打包為RTP/UDP協議然后發送出去的流程如下圖所示。圖中首先每7個MPEG-TS Packet打包為一個RTP,然后每個RTP再打包為一個UDP。其中打包RTP的方法就是在MPEG-TS數據前面加上RTP Header,而打包UDP的方法就是在RTP數據前面加上UDP Header。



有關MPEG-TS、RTP、UDP的知識不再詳細介紹,可以參考相關的文檔了解其中的細節信息。本文記錄的程序是一個收取流媒體的程序,因此本文程序的流程和上述發送MPEG-TS的流程正好是相反的。該程序可以通過Socket編程收取UDP包,解析其中的RTP包的信息,然后再解析RTP包中MPEG-TS Packet的信息。

代碼

整個程序位于simplest_udp_parser()函數中,如下所示

#include <stdio.h>  
#include <winsock2.h>  
  
#pragma comment(lib, "ws2_32.lib")   
  
#pragma pack(1)  
  
/* 
 * [memo] FFmpeg stream Command: 
 * ffmpeg -re -i sintel.ts -f mpegts udp://127.0.0.1:8880 
 * ffmpeg -re -i sintel.ts -f rtp_mpegts udp://127.0.0.1:8880 
 */  
  
typedef struct RTP_FIXED_HEADER{  
    /* byte 0 */  
    unsigned char csrc_len:4;       /* expect 0 */  
    unsigned char extension:1;      /* expect 1 */  
    unsigned char padding:1;        /* expect 0 */  
    unsigned char version:2;        /* expect 2 */  
    /* byte 1 */  
    unsigned char payload:7;  
    unsigned char marker:1;        /* expect 1 */  
    /* bytes 2, 3 */  
    unsigned short seq_no;              
    /* bytes 4-7 */  
    unsigned  long timestamp;          
    /* bytes 8-11 */  
    unsigned long ssrc;            /* stream number is used here. */  
} RTP_FIXED_HEADER;  
  
typedef struct MPEGTS_FIXED_HEADER {  
    unsigned sync_byte: 8;   
    unsigned transport_error_indicator: 1;   
    unsigned payload_unit_start_indicator: 1;  
    unsigned transport_priority: 1;   
    unsigned PID: 13;  
    unsigned scrambling_control: 2;  
    unsigned adaptation_field_exist: 2;  
    unsigned continuity_counter: 4;  
} MPEGTS_FIXED_HEADER;  
  
  
  
int simplest_udp_parser(int port)  
{  
    WSADATA wsaData;  
    WORD sockVersion = MAKEWORD(2,2);  
    int cnt=0;  
  
    //FILE *myout=fopen("output_log.txt","wb+");  
    FILE *myout=stdout;  
  
    FILE *fp1=fopen("output_dump.ts","wb+");  
  
    if(WSAStartup(sockVersion, &wsaData) != 0){  
        return 0;  
    }  
  
    SOCKET serSocket = socket(AF_INET, SOCK_DGRAM, IPPROTO_UDP);   
    if(serSocket == INVALID_SOCKET){  
        printf("socket error !");  
        return 0;  
    }  
  
    sockaddr_in serAddr;  
    serAddr.sin_family = AF_INET;  
    serAddr.sin_port = htons(port);  
    serAddr.sin_addr.S_un.S_addr = INADDR_ANY;  
    if(bind(serSocket, (sockaddr *)&serAddr, sizeof(serAddr)) == SOCKET_ERROR){  
        printf("bind error !");  
        closesocket(serSocket);  
        return 0;  
    }  
  
    sockaddr_in remoteAddr;  
    int nAddrLen = sizeof(remoteAddr);   
  
    //How to parse?  
    int parse_rtp=1;  
    int parse_mpegts=1;  
  
    printf("Listening on port %d\n",port);  
  
    char recvData[10000];    
    while (1){  
  
        int pktsize = recvfrom(serSocket, recvData, 10000, 0, (sockaddr *)&remoteAddr, &nAddrLen);  
        if (pktsize > 0){  
            //printf("Addr:%s\r\n",inet_ntoa(remoteAddr.sin_addr));  
            //printf("packet size:%d\r\n",pktsize);  
            //Parse RTP  
            //  
            if(parse_rtp!=0){  
                char payload_str[10]={0};  
                RTP_FIXED_HEADER rtp_header;  
                int rtp_header_size=sizeof(RTP_FIXED_HEADER);  
                //RTP Header  
                memcpy((void *)&rtp_header,recvData,rtp_header_size);  
  
                //RFC3551  
                char payload=rtp_header.payload;  
                switch(payload){  
                case 0:  
                case 1:  
                case 2:  
                case 3:  
                case 4:  
                case 5:  
                case 6:  
                case 7:  
                case 8:  
                case 9:  
                case 10:  
                case 11:  
                case 12:  
                case 13:  
                case 14:  
                case 15:  
                case 16:  
                case 17:  
                case 18: sprintf(payload_str,"Audio");break;  
                case 31: sprintf(payload_str,"H.261");break;  
                case 32: sprintf(payload_str,"MPV");break;  
                case 33: sprintf(payload_str,"MP2T");break;  
                case 34: sprintf(payload_str,"H.263");break;  
                case 96: sprintf(payload_str,"H.264");break;  
                default:sprintf(payload_str,"other");break;  
                }  
  
                unsigned int timestamp=ntohl(rtp_header.timestamp);  
                unsigned int seq_no=ntohs(rtp_header.seq_no);  
  
                fprintf(myout,"[RTP Pkt] %5d| %5s| %10u| %5d| %5d|\n",cnt,payload_str,timestamp,seq_no,pktsize);  
  
                //RTP Data  
                char *rtp_data=recvData+rtp_header_size;  
                int rtp_data_size=pktsize-rtp_header_size;  
                fwrite(rtp_data,rtp_data_size,1,fp1);  
  
                //Parse MPEGTS  
                if(parse_mpegts!=0&&payload==33){  
                    MPEGTS_FIXED_HEADER mpegts_header;  
                    for(int i=0;i<rtp_data_size;i=i+188){  
                        if(rtp_data[i]!=0x47)  
                            break;  
                        //MPEGTS Header  
                        //memcpy((void *)&mpegts_header,rtp_data+i,sizeof(MPEGTS_FIXED_HEADER));  
                        fprintf(myout,"   [MPEGTS Pkt]\n");  
                    }  
                }  
  
            }else{  
                fprintf(myout,"[UDP Pkt] %5d| %5d|\n",cnt,pktsize);  
                fwrite(recvData,pktsize,1,fp1);  
            }  
  
            cnt++;  
        }  
    }  
    closesocket(serSocket);   
    WSACleanup();  
    fclose(fp1);  
  
    return 0;  
}  
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,533評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,055評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,365評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,561評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,346評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,889評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,978評論 3 439
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,118評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,637評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,558評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,739評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,246評論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 43,980評論 3 346
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,362評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,619評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,347評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,702評論 2 370

推薦閱讀更多精彩內容