(Translated by https://www.hiragana.jp/)
GitHub - DDKK5/audio_video_streaming: 音视频流媒体权威资料整理，500+份文章，论文，视频，实践项目，协议，业界大神名单。
Skip to content
/ audio_video_streaming Public
forked from 0voice/audio_video_streaming

音おと视频流りゅう媒体ばいたい权威资料整理せいり，500+份文章ぶんしょう，论文，视频，实践项目，协议，业界大神だいじん名めい单。

0 stars 1.1k forks Branches Tags Activity
Star
Notifications You must be signed in to change notification settings

DDKK5/audio_video_streaming

BranchesTags
 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

370 Commits
article
article
 
 
books
books
 
 
case_interview
case_interview
 
 
paper
paper
 
 
practice_project
practice_project
 
 
protocol
protocol
 
 
video
video
 
 
README.md
README.md
 
 
WebRTC 零れい基き础开发者教程きょうてい（中ちゅう文ぶん）.pdf
WebRTC 零れい基き础开发者教程きょうてい（中ちゅう文ぶん）.pdf
 
 
音おと视频流りゅう媒体ばいたい开发知ち识归纳导图.png
音おと视频流りゅう媒体ばいたい开发知ち识归纳导图.png
 
 

Repository files navigation

【🔥🔥🔥热门、吃ども香こう】音おと视频流りゅう媒体ばいたい权威资料整理せいり，精せい选文章ぶんしょう，学がく术论文ぶん，大だい佬视频，实践项目，开源框かまち架か，协议，业界大神だいじん一いち览



💡 【最新さいしん更新こうしん】WebRTC零れい基き础开发者教程きょうてい(中ちゅう文ぶん)

📢【推荐收藏しゅうぞう】音おと视频流りゅう媒体ばいたい开发知ち识归纳导图

🏹【熟じゅく读兵法ほう，搞定面めん试】50道みち音おん视频经典面めん试题

👁️【不ふ想そう看み文字もじ，视频更さら直接ちょくせつ】国内こくない国外こくがい大だい佬教学がく视频

🗜【项目实战应用，日にち后きさき100%要用ようよう到いた】N个经典てん开源项目


📙 书籍

No. book nam author
1 FFmpeg从入门到精通せいつう 刘歧, 赵文杰
2 视频图像处理与あずか性能せいのう优化 梁りょう军, 贾海鹏
3 数字すうじ图像与あずか视频处理 卢官明あきら, 唐から贵进, 崔ちぇ子こ冠かんむり
4 数字すうじ音おん视频技わざ术及应用 陈光军
5 音おと视频开发进阶指南しなん：基もと于Android与あずかiOS平台ひらだい的てき实践 展てん晓凯, 魏ぎ晓红
6 视频编码全ぜん角度かくど详解：AVS_China、H.264_MPEG-4_PART10、HEVC、VP6、DIRAC、VC-1 刘歧, 赵文杰
7 FFMPEG - From Zero to Hero Nick, Ferrando
8 FFmpeg Basics 2012 Frantisek Korbel
9 Handbook on SDP for Multimedia Session Negotiations SIP and WebRTC IP Telephony Roy, Radhika Ranjan
10 Learning WebRTC Dan Ristic
11 Real-Time Communication with WebRTC Salvatore Loreto, Simon Pietro Romano

🌅 面めん试题

1. 为什么巨大だい的てき原始げんし视频可か以编码成很小的てき视频呢?这其中ちゅう的てき技わざ术是什么呢?
2. 怎么做到直播じきまき秒びょう开优化か？
3. 直方ちょくほう图在图像处理里さと面めん最さい重要じゅうよう的てき作用さよう是ぜ什么？
4. 数字すうじ图像滤波有ゆう哪些方法ほうほう？
5. 图像可か以提取的とりてき特とく征せい有ゆう哪些？
6. 衡量图像重じゅう建けん好こう坏的标准有ゆう哪些？怎样计算？
7. AAC和わPCM的てき区く别？
8. H264存そん储的两个形がた态？
9. FFMPEG：图片如何いか合成ごうせい视频？
10. 常つね见的音おん视频格式かくしき有ゆう哪些？
11. 请指出で“1080p”的てき意い义？
12. 请解释颜色しょく的てき本ほん质及其数字すうじ记录原理げんり，并说出で几个你所知道ともみち的てき色しょく域いき。
13. 请解释“矢や量りょう图”和かず“位い图”的いくわ区く别？
14. 请从“光ひかり圈けん”“快かい门速度そくど”“感光かんこう度ど”“白しろ平衡へいこう”“景けい深ふか”中ちゅう任にん选2个进行ぎょう叙述じょじゅつ？
15. 视频分量ぶんりょうYUV的てき意い义及数字すうじ化か格式かくしき？
16. 在ざいMPEG标准中ちゅう图像类型有ゆう哪些？
17. 列れつ举一些音频编解码常用的实现方案？
18. 请叙述じょじゅつMPEG视频基本きほん码流结构？
19. sps和わpps的てき区く别？
20. 请叙述じょじゅつAMR基本きほん码流结构？
21. 预测编码的てき基本きほん原理げんり是ぜ什么？
22. 说一说ffmpeg的てき数すう据すえ结构？
23. 说一说AVFormatContext 和わ AVInputFormat之の间的关系？
24. 说一说AVFormatContext, AVStream和わAVCodecContext之の间的关系？
25. 说一说视频拼接处理步骤？（细节处理，比ひ如分辨べん率りつ大小だいしょう不一ふいつ，时间处理等とう等とう）
26. NV21如何いか转换成なりI420？
27. DTS与あずかPTS共同きょうどう点てん？
28. 影かげ响视频清晰度的てき指ゆび标有哪些？
29. 编解码处理り时遇到いた什么困难？
30. 如何いか秒びょう开视频？什么是ぜ秒びょう开视频？
31. 如何いか降くだ低てい延のべ迟？如何いか保ほ证流畅性？如何いか解かい决卡顿？解かい决网络抖动？
32. 需要じゅよう把わ网络上じょう一段视频存储下来（比ひ如作为mp4 ), 请实现并说出方法ほうほう（第だい一个视频需要翻墙才能进）？
33. 需要じゅよう把わ网络上じょう一段语音存储下来（比ひ如作为mp3 ), 请实现并说出方法ほうほう？
34. 为什么要有ゆうYUV这种数すう据すえ出来でき？（YUV相しょう比ひRGB来らい说的优点）
35. H264/H265有ゆう什么区く别？
36. 视频或ある者もの音おん频传输，你会选择TCP协议还是UDP协议？为什么？
37. 平ひら时说的てき软解和わ硬かた解かい，具体ぐたい是ぜ什么？
38. 何なに为直播じきまき？何なに为点播？
39. 简述推流、拉ひしげ流りゅう的てき工作こうさく流りゅう程ほど？
40. 如何いか在ざい直播じきまき中ちゅうI帧间隔设置、与あずか帧率分ぶん辨べん率りつ选定？
41. 直播じきまき推流中ちゅう推I帧与推非I帧区别是什么？
42. 常つね见的直播じきまき协议有ゆう哪些？之これ间有什么区く别？
43. 点てん播中常つね见的数すう据すえ传输协议主要しゅよう有ゆう哪些？
44. RTMP、HLS协议各自かくじ的てき默だま认端口こう号ごう是ぜ？
45. 简述RTMP协议，如何いか封ふう装そうRTMP包つつみ？
46. m3u8构成是ぜ？直播じきまき中ちゅうm3u8、ts如何いか实时更新こうしん？
47. 何なに为音视频同どう步ふ，音おと视频同どう步ふ是ぜ什么标准？
48. 播放器き暂停、快かい进快退すさ、seek、逐帧、变速怎么实现？
49. 说说你平时在播放过程中ちゅう做的优化工作こうさく？
50. 你研究けんきゅう过哪些具体ぐたい的てき流りゅう媒体ばいたい服ふく务器，是ぜ否ひ做过二に次じ开发？
51. 什么是ぜGOP?
52. 音おと频测试的测试点てん,音おと频时延のべ如何いか测试?
53. 美び颜的实现原理げんり，具体ぐたい实现步ふ骤?
54. 如何いか直播じきまきAPP抓つめ包つつみ过来的てき文ぶん件けん，如何いか过滤上じょう行ぎょう，下した行ぎょう，总码率りつ？
55. 如何いか测试一个美颜挂件？
56. 为什么要用ようFLV？
57. 如何いか测试一个美颜挂件？
58. 平常へいじょう的てき视频格式かくしき？
59. 何なに为homebrew？你用它安装そう过什么？常用じょうよう命令めいれい有ゆう哪些？
60. RTMP、HLS协议各自かくじ的てき默だま认端口こう号ごう是ぜ？

📰 文章ぶんしょう

No. article
1 WebRTC 发送方かた码率预估实现解析かいせき
2 码率控ひかえ制せい基本きほん概念がいねん
3 Speex回かい声ごえ消しょう除じょ代だい码分析ぶんせき
4 房ぼう间声学がく原理げんり与あずかSchroeder混こん响算法ほう实现
5 H264系列けいれつ--压缩编码技わざ术
6 RTSP 媒体ばいたい协议流りゅう的てき录制方案ほうあん及其覆盖策略さくりゃく详解
7 建立こんりゅう连接之のICE框かまち架か
8 流ながれ媒体ばいたい协议介かい绍（rtp/rtcp/rtsp/rtmp/mms/hls）
9 音おと视频同どう步ふ原理げんり及实现
10 直播じきまき概念がいねん和わ流りゅう程ほど框かまち架か
11 CDN在ざい直播じきまき中ちゅう的てき运用
12 常つね见音视频编码格式かくしき
13 H.264官かん方かた软件JM源みなもと代だい码分析ぶんせき-编码器きlencod
14 H.264官かん方かた软件JM源みなもと代だい码分析ぶんせき-解かい码器ldecod
15 Android 音おん视频技わざ术
16 Web前ぜん端はしWebRTC攻略こうりゃく-媒体ばいたい协商与あずかSDP简析
17 基もと于FFmpeg的てきAVfilter的てき例れい子こ-纯净版ばん
18 WebRTC 传输安全あんぜん机つくえ制せい第だい二に话：深入ふかいり显出 SRTP 协议
19 WebRTC能のう给我带来什么？
20 视音频数据すえ处理：RGB、YUV像ぞう素数そすう据すえ处理
21 视音频数据すえ处理：PCM音おん频采样数据すえ处理
22 视音频数据すえ处理：H.264视频码流解析かいせき
23 视音频数据すえ处理：AAC音おん频码流りゅう解析かいせき
24 视音频数据すえ处理：FLV封ふう装そう格式かくしき解析かいせき
25 视音频数据すえ处理：UDP-RTP协议解析かいせき
26 如何いか生成せいせいmp4文ぶん件けん
27 ffmpeg滤镜的てき基本きほん使用しよう
28 webRTC是ぜ如何いか实现音おん视频的てき录制
29 音おと视频同どう步ふ算法さんぽう
30 房ぼう间声学がく原理げんり与あずかSchroeder混こん响算法ほう实现
31 一个频域语音降噪算法实现及改进方法
32 HEVC官かん方かた软件HM源みなもと代だい码分析ぶんせき-编码器きTAppEncoder
33 HEVC官かん方かた软件HM源みなもと代だい码分析ぶんせき-解かい码器TAppDecoder
34 音おと视频编解码常用じょうよう知ち识点
35 微ほろ信しん小しょう程ほど序じょ集成しゅうせい实时音おん视频通どおり话功能のう
36 视音频编解かい码技术零れい基き础学习方法ほう
37 RTSP协议学がく习
38 HEVC码流分析ぶんせき
39 H.264简单码流分析ぶんせき
40 MPEG2简单码流分析ぶんせき
41 视频码流分析ぶんせき工具こうぐ
42 H.264分析ぶんせき器き
43 FFmpeg架か构之IO模かたぎ块分析ぶんせき
44 (Video and Audio Data Processing)UDP-RTP协议解析かいせき
45 RTSP协议实例分析ぶんせき
46 RTSP协议之のTCP或あるUDP问题
47 ffplay工具こうぐ命令めいれい使用しよう技巧ぎこう
48 VLC RTSP网络串くし流りゅう播放失しつ败
49 RTMP协议详解
50 STUN 原理げんり理解りかい

🌐 开源框かまち架か

实时音おん视频开源项目

实时音おん视频应用共ども包括ほうかつ几个环节：采さい集しゅう、编码、前ぜん后きさき处理、传输、解かい码、缓冲、渲染等とう很多环节。每まい一いち个细分ぶん环节，还有更さら细分的てき技わざ术模块。
比ひ如，前ぜん后きさき处理环节有美ゆみ颜、滤镜、回かい声ごえ消しょう除じょ、噪声抑制よくせい等とう，采さい集しゅう有ゆう麦むぎ克かつ风阵列れつ等とう，编解码有VP8、VP9、H.264、H.265等とう。

采さい集しゅう->前ぜん处理编码->传输->解かい码后处理->渲染

实时音おん视频开源项目思おもえ维导图 音视频开源项目说明

编解码开源げん项目
project website introduce
WebRTC webrtc.org WebRTC实现了りょう基もと于网页的视频会かい议，标准是ぜWHATWG 协议，目的もくてき是ぜ通どおり过浏览器提供ていきょう简单的てきjavascript就可以达到实时通どおり讯（Real-Time Communications (RTC)）能力のうりょく。WebRTC提供ていきょう了りょう视频会かい议的核心かくしん技わざ术，包括ほうかつ音おん视频的てき采さい集しゅう、编解码、网络传输、显示等とう功こう能のう，并且还支持しじ跨またが平台ひらだい：windows，linux，mac，android。
x264 www.linuxfromscratch.org H.264是ぜITU（International Telecommunication Union，国くに际通信つうしん联盟）和かずMPEG（Motion Picture Experts Group，运动图像专家组）联合制定せいてい的てき视频编码标准。而x264是ぜ一いち个开源げん的てきH.264/MPEG-4 AVC视频编码函数かんすう库，是ぜ最さい好このみ的てき有ゆう损视频编码器之の一いち。
FFmpeg ffmpeg.org FFmpeg是ぜ一套可以用来记录、转换数すう字音じおん频、视频，并能将はた其转化か为流的てき开源计算机つくえ程ほど序じょ。采さい用ようLGPL或あるGPL许可证。它提供ていきょう了りょう录制、转换以及流りゅう化か音おと视频的てき完かん整せい解かい决方案あん。FFmpeg提供ていきょう了りょう编码、解かい码、转换、封ふう装そう等とう功こう能のう，以及剪裁、缩放、色いろ域いき等とう后きさき期き处理。
ijkplayer bilibili/ijkplayer ijkplayer 是ぜ一いち个基于 ffplay 的てき轻量级 Android/iOS 视频播放器き。实现了りょう跨またが平台ひらだい功いさお能のう，API易えき于集成しゅうせい；编译配置はいち可か裁さい剪，方便ほうべん控ひかえ制せい安あん装そう包つつみ大小だいしょう；支持しじ硬かた件けん加速かそく解かい码，更さら加か省しょう电；提供ていきょうAndroid平台ひらだい下か应用弹幕集成しゅうせい的てき解かい决方案あん。
JSMpeg jsmpeg.com JSMpeg is a Video Player written in JavaScript. It consists of an MPEG-TS Demuxer, WebAssembly MPEG1 Video & MP2 Audio Decoders, WebGL & Canvas2D Renderers and WebAudio Sound Output. JSMpeg can load static files via Ajax and allows low latency streaming (~50ms) via WebSocktes.
Opus opus.nlpl.eu Opus是ぜ一个有损声音编码的格式，由よしXiph.Org基金ききん会かい开发，之これ后きさき由よしIETF（互联网工程ほど任にん务组）进行标准化か，目め标是希望きぼう用よう单一格式包含声音和语音，取と代だいSpeex和わVorbis，且适用よう于网络上低てい延のべ迟的即そく时声音おん传输，标准格式かくしき定てい义于RFC 6716文ぶん件けん。Opus格式かくしき是ぜ一个开放格式，使用しよう上じょう没ぼつ有ゆう任にん何なん专利或ある限きり制せい。
live555 www.live555.com live555是ぜ一个为流媒体提供解决方案的跨平台的C++开源项目，它实现了标准流りゅう媒体ばいたい传输，是ぜ一个为流媒体提供解决方案的跨平台的C++开源项目，它实现了对标准じゅん流りゅう媒体ばいたい传输协议如RTP/RTCP、RTSP、SIP等とう的てき支持しじ。Live555实现了りょう对多种音视频编码格式かくしき的てき音おと视频数すう据すえ的てき流りゅう化か、接收せっしゅう和わ处理等とう支持しじ，包括ほうかつMPEG、H.263+ 、DV、JPEG视频和わ多た种音频编码。
服ふく务端开源项目
project website introduce
jitsi jitsi/jitsi Jitsi is an audio/video and chat communicator that supports protocols such as SIP, XMPP/Jabber, IRC and many other useful features.
JsSIP jssip.net JsSIP是ぜ一个简单易用的JavaScript库，它利用りようSIP和わWebRTC的てき最新さいしん发展，在任ざいにん何なん网站上じょう提供ていきょう全ぜん功こう能のう的てきSIP端点たんてん。通つう过JsSIP ，只ただ要よう几行代だい码，任にん何なん网站都と可か以通过音频，视频等とう获得实时通信つうしん功こう能のう。
SRS www.ossrs.net SRS定位ていい是ぜ运营级的互联网直播じきまき服ふく务器集しゅう群ぐん，追求ついきゅう更さら好このみ的てき概念がいねん完かん整せい性せい和わ最さい简单实现的てき代だい码。SRS提供ていきょう了りょう丰富的てき接せっ入方いりがた案あん将はたRTMP流りゅう接せっ入にゅうSRS，包括ほうかつ推送RTMP到いたSRS、推送RTSP/UDP/FLV到いたSRS、拉ひしげ取ど流ながれ到いたSRS。SRS还支持しじ将はた接せっ入いれ的てきRTMP流りゅう进行各かく种变换，譬たとえ如将RTMP流りゅう转码、流ながれ截图、转发给其他た服ふく务器、转封装そう成なるHTTP-FLV流りゅう、转封装そう成なるHLS、转封装そう成なるHDS、录制成なりFLV。SRS包含ほうがん支ささえ大だい规模集しゅう群ぐん如CDN业务的てき关键特性とくせい，譬たとえ如RTMP多た级集群ぐん、源みなもと站集群ぐん、VHOST虚きょ拟服务器、无中断ちゅうだん服ふく务Reload、HTTP-FLV集しゅう群ぐん、Kafka对接。此外，SRS还提供ていきょう丰富的てき应用接せっ口こう，包括ほうかつHTTP回かい调、安全あんぜん策略さくりゃくSecurity、HTTP API接せっ口こう、RTMP测速。
JRTPLIB j0r1/JRTPLIB jrtplib是ぜ一いち个基于C++、面めん向こう对象的てきRTP封ふう装そう库, jrtplib支持しじ定てい义于RFC3550中ちゅう的てきRTP协议，它使得とく发送和わ接收せっしゅうRTP报文变得异常简单，用よう户不用よう担心SSRC冲突，也不用よう考こう虑如何なん传输RTCP数すう据すえ，因いん为RTCP功こう能のう完全かんぜん在ざい内部ないぶ实现。
OPAL opalvoip Open Phone Abstraction Library (OPAL) is a C++ multi-platform, multi-protocol library for Fax, Video & Voice over IP and other networks. Also included is the Portable Tool Library (PTLib) which is a C++ multi-platform abstraction library.
Kurento www.kurento.org Kurento 是ぜ一いち个WebRTC流りゅう媒体ばいたい服ふく务器以及一いち些客户端API，开发WWW及智能ちのう手しゅ机つくえ平台ひらだい的てき高だか级视频应用よう就变得どく更さら加か容易ようい。可か以利用りようKurento开发的てき应用类型包括ほうかつ，视频会かい议，音おと视频广播，音おと视频录制、转码等とう。
Janus janus.conf.meetecho.com Janus 是ぜ由よしMeetecho设计和わ开发的てき开源、通用つうよう的てき基もと于SFU架か构的WebRTC流りゅう媒体ばいたい服ふく务器，它支持しじ在ざいLinux的てき服ふく务器或あるMacOS上じょう的てき机つくえ器き进行编译和わ安あん装そう。
质量传输开源项目
project website introduce
callstats.io callstats Callstats.io致力于监控ひかえ和わ管理かんりWebRTC应用中ちゅう的てき音おと频和视频通どおり话性能せいのう。提供ていきょうJavascript客きゃく户端库，可か以监测浏览器终端性能せいのう，从而帮助服ふく务供应商准じゅん确定位い那な些媒体ばいたい质量较低的てき终端用よう户，并进行ぎょう性能せいのう问题的てき诊断。该信息いき主要しゅよう是ぜ用よう于产品ひん经理和わ工程こうてい师来提ひさげ高だか客きゃく户体验质量りょう，主しゅ动解决潜在せんざい的てき瓶びん颈障碍しょうがい。
Meetecho meetecho/janus-gateway Meetecho Janus是ぜMeetecho公司こうし的てき一いち款WebRTC（网页即そく时通信つうしん）服ふく务器。
Agora agora.io 声こえ网Agora提供ていきょう了りょう一套简单而强大的SDK,开发者しゃ可か以利用りよう其中的てき资源在任ざいにん何なん手て机つくえ或ある电脑应用中ちゅう加入かにゅう高だか清きよし语音和わ视频通どおり讯功能のう。
视频前ぜん后きさき处理开源项目
音おと频
project website introduce
soundtouch soundtouch SoundTouch是ぜ一个开源的音频处理库，主要しゅよう实现包含ほうがん变速、变调、变速同どう时变调等三さん个 功こう能のう模も块，能のう够对媒体ばいたい流りゅう实时操作そうさ，也能对音频文件けん操作そうさ。采さい用よう32位い浮点或ある者もの16位い定点ていてん，支持しじ单声道どう或ある者もの双そう声こえ道どう，采さい样率范围为8k~48k。
视频
project website introduce
SeetaFace6 SeetaFace6Open SeetaFace6是ぜ中ちゅう科か视拓最新さいしん开源的てき商しょう业正式しき版本はんぽん。包含ほうがん人じん脸识别的基本きほん部分ぶぶん，如人脸检测、关键点てん定位ていい、人ひと脸识别。同どう时增加ぞうか了りょう活かつ体たい检测、质量评估、年とし龄性别估计。并且响应时事，开放了りょう口こう罩检测以及戴口こう罩的人じん脸识别模型がた。
GPUImage2 GPUImage2 GPUImage是ぜ个功能のう十じゅう分ふん强大きょうだい、又また十分易用的图像处理库。提供ていきょう各かく种各样的图像处理滤镜，并且支持しじ照あきら相しょう机つくえ和わ摄像机つくえ的てき实时滤镜。
open nsfw open_nsfw open nsfw是ぜ雅みやび虎とら开源项目caffeonspark，使用しよう深度しんど学がく习训练得到いたcaffe模型もけい。nsfw翻こぼし译为不可ふか在ざい工作こうさく中ちゅう看み的てき图片。主要しゅよう是ぜ针对黄き图的，恐怖きょうふ，血腥ちなまぐさ图片不能ふのう识别。
PaddleGAN PaddleGAN PaddleGAN是ぜ百度飞桨团队开源的对抗网络工具箱，提供ていきょう了りょう视频超ちょう分ぶん、插帧、上うえ色しょく等とう高だか质量深度しんど学がく习能力りょく。

其他音おん视频开源项目

project website introduce
Speex xiph.org Speex是ぜ一套主要针对语音的开源免费，无专利保かかぼ护的音おん频压缩格式しき。
FLAC xiph.org FLAC中ちゅう文ぶん可か解かい释为无损音おん频压缩编码。FLAC是ぜ一套著名的自由音频压缩编码，其特点てん是ぜ无损压缩。不同ふどう于其他た有ゆう损压缩编码如MP3及AAC，它不会かい破やぶ坏任何なん原はら有ゆう的てき音おと频信息いき，所以ゆえん可か以还原音げんおん乐光盘音质。
Xvid xvidmovies Xvid是ぜ一个开放源代码的MPEG-4视频编解码器，它是基もと于OpenDivX而编写うつし的てき。
Lagarith lags.leetcode.net Lagarith，是ぜ一いち种由Ben Greenwood所しょ撰せん写うつし的てき影かげ片へん编解码器（video codec）。
Thor wwww.thor.com Thor是ぜ思おもえ科か开源的てき视频编码解かい码器，Thor拥有适当复杂度ど的てき高だか压缩率りつ视频编码解かい码器，使用しよう众所周知しゅうち的てき motion-compensated 预测的てき混合こんごう视频编码方法ほうほう和わ变换编码。

🧿 视频

国外こくがい大神だいじん

No. title
1 如何いか使用しようFFMPEG将はたMP4视频文ぶん件けん转换为GIF
2 FFMPEG Introduction & Examples
3 Live Streaming with Nginx and FFmpeg
4 Ep2 Ffmpeg Nginx & Nginx-Rtmp-Module Streaming to Server
5 Streaming an IP Camera to a Web Browser using FFmpeg
6 Easy Screencasting and Webcamming with ffmpeg in Linux
7 Streaming an IP Camera to a Web Browser using FFmpeg
8 FFMPEG Advanced Techniques Pt2 - Filtergraphs & Timeline
9 Convert HEVCh265 mkv video to AVCh264 mp4 with ffmpeg
10 How to add soft subtitles( srt subrip) to mp4 video using ffmpeg
11 FFmpeg Processing multiple video files by using.bat file
12 Opensource Multimedia Framework -- FFmpeg
13 rtsp streaming node js ip camera jsmpeg
14 H.265 RTSP Streaming to VLC + NewTek NDI Integration
15 IP camera stream using RTSP and openCV python
16 NAT Traversal & RTSP
17 Simple client et serveur de Streaming RTSP MJPEG(JAVA SE)
18 Build Your First WebRTC Video Chat App
19 P2P Video Chat with JavaScript/WebRTC
20 Building a WebRTC app - LIVE
21 Zoom vs WebRTC
22 Architectures for a kickass WebRTC application
23 (REACT NATIVE) - integrate webRTC
24 How to build Serverless Video Chat App using Firebase and WebRTC in React
25 Implementation Lessons using WebRTC in Asterisk

国内こくない大だい佬

No. title 地ち址し
26 windows ffmpeg命令めいれい行ぎょう环境搭建 点てん击学习
27 FFMPEG如何いか查询命令めいれい帮助文ぶん档 点てん击学习
28 ffmpeg音おん视频处理流りゅう程ほど 点てん击学习
29 ffmpeg命令めいれい分ぶん类查询 点てん击学习
30 ffplay播放控ひかえ制せい 点てん击学习
31 ffplay命令めいれい选项(上うえ) 点てん击学习
32 ffplay命令めいれい选项(下した) 点てん击学习
33 ffplay命令めいれい播放媒体ばいたい 点てん击学习
34 ffplay简单过滤器き 点てん击学习
35 ffmpeg命令めいれい参さん数すう说明 点てん击学习
36 ffmpeg命令めいれい提ひっさげ取ど音おと视频数すう据すえ 点てん击学习
37 ffmpeg命令めいれい提ひっさげ取ど像ぞう素もと格式かくしき和わPCM数すう据すえ 点てん击学习
38 ffmpeg命令めいれい转封装そう 点てん击学习
39 fmpeg命令めいれい裁さい剪和合わごう并视频 点てん击学习
40 fmpeg命令めいれい图片与あずか视频互转 点てん击学习
41 ffmpeg命令めいれい视频录制 点てん击学习
42 ffmpeg命令めいれい直播じきまき(上うえ) 点てん击学习
43 ffmpeg命令めいれい直播じきまき(下した) 点てん击学习
44 ffmpeg过滤器き-裁たっ剪 点てん击学习
45 ffmpeg过滤器き-文字もじ水すい印しるし 点てん击学习
46 ffmpeg过滤器き-图片水すい印しるし 点てん击学习
47 ffmpeg过滤器き-画が中ちゅう画が 点てん击学习
48 ffmpeg过滤器き-多た宫格 点てん击学习
49 SRS流りゅう媒体ばいたい服ふく务器实战(上うえ) 点てん击学习
50 SRS流りゅう媒体ばいたい服ふく务器实战(下した) 点てん击学习
51 音おと视频开发-ffplay.iikplayer、vlc的てき播放器き设计实现 点てん击学习
52 音おと视频成なり长之路ろ-进阶三さん部ぶ曲きょく 点てん击学习
53 为什么直播じきまき领域也要搞WebRTC-srs4.0 点てん击学习
54 腾讯课堂直播じきまき如何いか做到低てい延のべ迟 点てん击学习
55 rtmp2webrtc提出ていしゅつ问题-灵魂拷问 点てん击学习

🍀 paper

ffmpeg

No. Title Company
1 《From Laptop to Lambda:Outsourcing Everyday Jobs to Thousands of Transient Functional Containers》 斯坦福ぶく大学だいがく
2 《SUSTAINABILITY THROUGH COMMUNITY ffmprovisr and the Case for Collaborative Knowledge Transfer》 华盛顿州立しゅうりつ大学だいがく
3 《Companion Paper for “MiniView Layout for Bandwidth-Efficient 360-Degree Video”》 俄にわか亥い俄にわか州立しゅうりつ大学だいがく
4 《Research on Audio/Video Codec Based on Android》 北京ぺきん大学だいがく
5 《Fuzzing Error Handling Code using Context-Sensitive Software Fault Injection》 清きよし华大学がく
6 《Evaluating Fuzz Testing》 德とく克かつ萨斯州しゅう大学だいがく
7 《lntel QuickSync Video and FFmpeg》 Intel
aac
No. Title Company
8 《TalkingBoogie: Collaborative Mobile AAC System for Non-verbal Children with Developmental Disabilities and Their Caregivers》 首くび尔国立こくりつ大学だいがく
9 《The Performance Of The AAC Pumpcell Circuits At The Gold Fields Limited Driefontein And Kloof Operations》
ffplay
No. Title Company
10 《Sustainability through Community ffmprovisr and the Case for Collaborative Knowledge Transfer》 华盛顿大学がく
11 《Desarrollo de una Aplicación Cliente/Servidor para un Wall View en base a la Plataforma – Cruzada Opensource – FFMPEG (Colección de Software Libre que puede Grabar, Convertir y hacer Streaming de Audio y Vídeo)》
12 《Salsify: Low-Latency Network Video Through Tighter Integration Between a Video Codec and a Transport Protocol》 斯坦福ぶく大学だいがく
H264
No. Title Company
13 《Performance Comparison of H.265/MPEG-HEVC, VP9, and H.264/MPEG-AVC Encoders》
14 《3D range geometry video compression with the H.264 codec》 爱荷华州立しゅうりつ大学だいがく
15 《PERFORMANCE EVALUATION OF H.265/MPEG-HEVC, VP9 AND H.264/MPEG AVC VIDEO CODING》
16 《Hardware Architecture Design of an H.264/AVC Video Codec》 国立こくりつ台湾たいわん大学だいがく
17 《Evaluacióndelrendimiento paralelo en el nivelmacro bloque del decodificadorH.264enuna arquitecturamultiprocesador cc­NUMA》
18 《Machine Learning Approach to Detect Tampering in H.264 Video》
19 《Overview of the H.264/AVC Video Coding Standard》
20 《FAST SHOT DETECTION FOR HIGH QUALITY LOW DELAY H.264 VIDEO CODING》
21 《H.264 vs H.265》
22 《H.264 Video Frame Size estimation》 瑞みず典てん隆德たかのり大学だいがく
23 《The H.264/MPEG4 Advanced Video Coding Standard and its Applications》
24 《Real-time H264/AVC encoder based on enhanced frame level parallelism for smart multicore DSP camera》
25 《Visibility of individual packet loss on H.264 encoded video stream – A user study on the impact of packet loss on perceived video quality》
26 《Effective Compression of Range Data Streams for Remote Robot Operations using H.264》
27 《Parallel Scalability of H.264》 巴ともえ塞ふさが罗那超ちょう级计算さん中心ちゅうしん
28 《The H.264/AVC Advanced Video Coding Standard: Overview and Introduction to the Fidelity Range Extensions》
29 《Customizing Wide-SIMD Architectures for H.264》
30 《The H.264/MPEG4 Advanced Video Coding Standard and its Applications》

流ながれ媒体ばいたい

RTSP
No. Title Company
31 《DREAM – A Data Streaming Application Using RTP/RTSP in a Local Area Network》
32 《The Architecture of an Integrated RTSP, RTP and SDP Library》
33 《Secure IPsec based offload architectures for mobile data : architecture description and performance evaluation》
34 《WebRTC for peer-to-peer streaming from an IP camera》
35 《A High Q&S RTSP Server’s Architecture and Implementation Based On Android》
36 《基もと于 gst-rtsp-server 的てき网络摄像机つくえ设计与实现》 北京ぺきん邮电大学だいがく计算机つくえ学院がくいん
37 《A Caching and Streaming Framework for Multimedia》
38 《A Survey on open Source Protocols SIP, RTP, RTCP, RTSP, H.264 for Video Conferencing System》
39 《A Multimedia Semantic Model for RTSP-Based Multimedia Presentation Systems》
40 《AN ARCHITECTURE FOR STREAMING CONTROL IN DISTRIBUTED MULTIMEDIA SYSTEMS》
41 《Multimedia and streaming traffic analysis》
42 《RTP,RTCP, and RTSP — Internet Protocols for Real-Time Multimedia Communication》
43 《Secure Real-Time Streaming Protocol (RTSP) for Hierarchical Proxy Caching》 香港ほんこん大学だいがく
44 《RTSP Live Streaming》
45 《Kria K26 SOM:The Ideal Platform for Vision AI at the Edge》
46 《Streaming Video over the Internet:Approaches and Directions》
rtmp
No. Title Company
47 《Live Delivery of Neurosurgical Operating Theatre Experience in Virtual Reality》
48 《Virtual Office Design For The Effectiveness Of Web_based Office Administration Works》
49 《Advancing User Quality of Experience in 360-degree Video Streaming》
50 《Extended User Control over Multichannel Content Delivered over the Web》
51 《A First Characterization of Anycast Traffic from Passive Traces》
52 《ELECTRICAL DISTRIBUTION NETWORKS STATE ESTIMATION》
53 《Cloud Ingest of Live Video – An open approach to RIST, SRT and retransmission protocols》
54 《E3: MANAGEMENT OF TRAFFIC DURING CONSTRUCTION》
55 《CAPTURING AND REPLAYING STREAMING MEDIA IN A WEB ARCHIVE – A BRITISH LIBRARY CASE STUDY》
56 《360° Innovations for Panoramic Video Streaming》
57 《Understanding Video Management Planes》
58 《Anatomy of a Personalized Livestreaming System》
59 《360-Degree Video Streaming: A Survey of the State of the Art》
HLS
No. Title Company
60 《A Survey and Evaluation of FPGA High-Level Synthesis Tools》
61 《Centrifuge: Evaluating full-system HLS-generated heterogeneous-accelerator SoCs using FPGA-Acceleration》
62 《ThunderGP: HLS-based Graph Processing Framework on FPGAs》
63 《HL5: A 32-bit RISC-V Processor Designed with High-Level Synthesis》

🧾 协议

HTTP

No. Title link
1 Hypertext Transfer Protocol -- HTTP/1.1 rfc2068.txt.pdf
2 An Extension to HTTP : Digest Access Authentication rfc2069.txt.pdf
3 Simple Hit-Metering and Usage-Limiting for HTTP rfc2227.txt.pdf
4 HTTP Extensions for Distributed Authoring -- WEBDAV rfc2518.txt.pdf
5 Internet X.509 Public Key Infrastructure Operational Protocols: FTP and HTTP rfc2585.txt.pdf
6 Upgrading to TLS Within HTTP/1.1 rfc2817.txt.pdf

RTP

No. Title link
7 RTP: A Transport Protocol for Real-Time Applications rfc1889.txt.pdf
8 RTP Profile for Audio and Video Conferences with Minimal Control rfc1890.txt.pdf
9 RTP Payload Format of Sun's CellB Video Encoding rfc2029.txt.pdf
10 RTP Payload Format for JPEG-compressed Video rfc2035.txt.pdf
11 RTP Payload Format for MPEG1/MPEG2 Video rfc2038.txt.pdf
12 RTP Payload for Redundant Audio Data rfc2198.txt.pdf
13 RTP Payload Format for MPEG1/MPEG2 Video rfc2250.txt.pdf
14 RTP Payload Format for the 1998 Version of ITU-T Rec. H.263 Video (H.263+) rfc2429.txt.pdf
15 RTP Payload Format for BT.656 Video Encoding rfc2431.txt.pdf
16 RTP Payload Format for JPEG-compressed Video rfc2435.txt.pdf
17 Compressing IP/UDP/RTP Headers for Low-Speed Serial Links rfc2508.txt.pdf
18 An RTP Payload Format for Generic Forward Error Correction rfc2733.txt.pdf
19 RTP Payload for Text Conversation rfc2793.txt.pdf
20 RTP Payload for DTMF Digits, Telephony Tones and Telephony Signals rfc2833.txt.pdf
21 RTP Payload Format for Real-Time Pointers rfc2862.txt.pdf
22 RTP Payload Format for MPEG-4 Audio/Visual Streams rfc3016.txt.pdf
23 RTP Payload Format for ITU-T Recommendation G.722.1 rfc3047.txt.pdf

RTSP

No. Title link
24 Real Time Streaming Protocol (RTSP) rfc2326.txt.pdf
25 Key Management Extensions for Session Description Protocol (SDP) and Real Time Streaming Protocol (RTSP) rfc4567.txt.pdf
26 A Network Address Translator (NAT) Traversal Mechanism for Media Controlled by the Real-Time Streaming Protocol (RTSP) rfc7825.txt.pdf
27 Real-Time Streaming Protocol Version 2.0 rfc7826.txt.pdf
28 SDP: Session Description Protocol rfc8866.pdf

TCP

No. Title link
29 Protocol standard for a NetBIOS service on a TCP/UDP transport: Concepts and methods rfc1001.pdf
30 Protocol standard for a NetBIOS service on a TCP/UDP transport: Detailed specifications rfc1002.pdf
31 Transmission Control Protocol rfc793.pdf

UDP

No. Title link
32 Protocol standard for a NetBIOS service on a TCP/UDP transport: Concepts and methods rfc1001.pdf
33 Protocol standard for a NetBIOS service on a TCP/UDP transport: Detailed specifications rfc1002.pdf
34 SNMPv2 Management Information Base for the User Datagram Protocol using SMIv2 rfc2013.pdf
35 TCP and UDP over IPv6 Jumbograms rfc2147.pdf
36 Compressing IP/UDP/RTP Headers for Low-Speed Serial Links rfc2508.pdf
37 STUN - Simple Traversal of User Datagram Protocol (UDP) Through Network Address Translators (NATs) rfc3489.pdf
38 Mobile IP Traversal of Network Address Translation (NAT) Devices rfc3519.pdf
39 The Lightweight User Datagram Protocol (UDP-Lite) rfc3828.pdf
40 UDP Encapsulation of IPsec ESP Packets rfc3948.pdf
41 RObust Header Compression (ROHC): Profiles for User Datagram Protocol (UDP) Lite rfc4019.pdf
42 Management Information Base for the User Datagram Protocol (UDP) rfc4113.pdf
43 User Datagram Protocol rfc768.pdf

Gopher

No. Title link
44 The gopher URI Scheme rfc4266.pdf

SDP

No. Title link
45 SDP: Session Description Protocol rfc2327.pdf
46 The PINT Service Protocol: Extensions to SIP and SDP for IP Access to Telephone Call Services rfc2848.pdf
47 Carrying Label Information in BGP-4 rfc3107.pdf
48 An Offer/Answer Model with Session Description Protocol (SDP) rfc3264.pdf
49 Support for IPv6 in Session Description Protocol (SDP) rfc3266.pdf
50 Grouping of Media Lines in the Session Description Protocol (SDP) rfc3388.pdf
51 Session Description Protocol (SDP) Simple Capability Declaration rfc3407.pdf
52 The Session Initiation Protocol (SIP) and Session Description Protocol (SDP) Static Dictionary for Signaling Compression (SigComp) rfc3485.pdf
53 Mapping of Media Streams to Resource Reservation Flows rfc3524.pdf
54 Session Description Protocol (SDP) Bandwidth Modifiers for RTP Control Protocol (RTCP) Bandwidth rfc3556.pdf
55 RTP Control Protocol Extended Reports (RTCP XR) rfc3611.pdf
56 A Transport Independent Bandwidth Modifier for the Session Description Protocol (SDP) rfc3890.pdf
57 The Alternative Network Address Types (ANAT) Semantics for the Session Description Protocol (SDP) Grouping Framework rfc4091.pdf
58 TCP-Based Media Transport in the Session Description Protocol (SDP) rfc4145.pdf
59 RTP Payload Format for BroadVoice Speech Codecs rfc4298.pdf
60 SDP: Session Description Protocol rfc4566.pdf
61 Key Management Extensions for Session Description Protocol (SDP) and Real Time Streaming Protocol (RTSP) rfc4567.txt.pdf

Connection

No. Title link
62 The PPP OSI Network Layer Control Protocol (OSINLCP) rfc1242.txt.pdf

RTCP

No. Title link
63 RTP: A Transport Protocol for Real-Time Applications rfc1889.txt.pdf
64 Session Description Protocol (SDP) Bandwidth Modifiers for RTP Control Protocol (RTCP) Bandwidth rfc3556.txt.pdf
65 Real Time Control Protocol (RTCP) attribute in Session Description Protocol (SDP) rfc3605.txt.pdf
66 RTP Control Protocol Extended Reports (RTCP XR) rfc3611.txt.pdf
67 Framing Real-time Transport Protocol (RTP) and RTP Control Protocol (RTCP) Packets over Connection-Oriented Transport rfc4571.txt.pdf
68 Extended RTP Profile for Real-time Transport Control Protocol (RTCP)-Based Feedback (RTP/AVPF) rfc4585.txt.pdf
69 RTP Retransmission Payload Format rfc4588.txt.pdf
70 Extended Secure RTP Profile for Real-time Transport Control Protocol (RTCP)-Based Feedback (RTP/SAVPF) rfc5124.txt.pdf
71 Support for Reduced-Size Real-Time Transport Control Protocol (RTCP): Opportunities and Consequences rfc5506.txt.pdf
72 Post-Repair Loss RLE Report Block Type for RTP Control Protocol (RTCP) Extended Reports (XRs) rfc5725.txt.pdf
73 RTP Control Protocol (RTCP) Extensions for Single-Source Multicast Sessions with Unicast Feedback rfc5760.txt.pdf
74 Datagram Transport Layer Security (DTLS) Extension to Establish Keys for the Secure Real-time Transport Protocol (SRTP) rfc5764.txt.pdf
75 Session Initiation Protocol Event Package for Voice Quality Reporting rfc6035.txt.pdf
76 Rapid Synchronisation of RTP Flows rfc6051.txt.pdf
77 RTP Control Protocol (RTCP) Port for Source-Specific Multicast (SSM) Sessions rfc6128.txt.pdf
78 Guidelines for Choosing RTP Control Protocol (RTCP) Canonical Names (CNAMEs) rfc6222.txt.pdf
79 Application Mechanism for Keeping Alive the NAT Mappings Associated with RTP / RTP Control Protocol (RTCP) Flows rfc6263.txt.pdf
80 Multicast Acquisition Report Block Type for RTP Control Protocol (RTCP) Extended Reports (XRs) rfc6332.txt.pdf
81 RTP Control Protocol (RTCP) Extension for a Third-Party Loss Report rfc6642.txt.pdf

🥌 实践项目

音おと视频通どおり话项目め

实现了りょう多た人ひと语音/多た人ひと视频项目， 房ぼう间号Id一致いっち，用よう户Id不一致ふいっち，即そく可か实现多た人じん语音/多た人ひと视频。

Android/iOS 视频播放器き

ijkplayer 是ぜ一いち个基于 ffplay 的てき轻量级 Android/iOS 视频播放器き。实现了りょう跨またが平台ひらだい功いさお能のう，API易えき于集成しゅうせい；编译配置はいち可か裁さい剪，方便ほうべん控ひかえ制せい安あん装そう包つつみ大小だいしょう；支持しじ硬かた件けん加速かそく解かい码，更さら加か省しょう电；提供ていきょうAndroid平台ひらだい下か应用弹幕集成しゅうせい的てき解かい决方案あん。

仿网易えき云うん音おん乐安卓たく版ばん客きゃく户端

仿网易えき云うん音おん乐 安やす卓たく版ばん，netease android，音おと乐播放器き 在ざい线 下か载。

Timber

Timber是ぜ一个设计漂亮，功こう能のう完かん善ぜん，Material Design风格的てき音おと乐播放器き。

WebRTC入にゅう门项目め

WebRTC初はつ学者がくしゃ的てき启动演えんじ示しめせ，包括ほうかつ一いち个基于Socket.IO的てき简单信号しんごう服ふく务器，以及一些客户端演示Web/Android/IOS/Windows平台ひらだい。
WebRTC入にゅう门项目め部署ぶしょ步ふ骤

getStats

使用しようWebRTC getstats APL返かえし回かい对等连接状じょう态的微小びしょうJavaScript库，如带宽使用しよう、数かず据すえ包つつみ丢失、本地ほんじ)远程IP地ち址し和わ端はし口こう、连接类型等とう。

MPlayer

跨またが平台ひらだい的てき视频播放器き,可か在ざいLinux和わ其他类Unix系けい统、Windows及Mac OS X系けい统使用しよう。

KxMovie

IOS平台ひらだい基はじめ于FFMPEG播放器き

Vitamio

Android/IOS平台ひらだい上うえ的てき多た媒体ばいたい框かまち架か，带有硬かた件けん加速かそく解かい码和渲染.

YUV2RGB

YUV转RGB.

TSDemux

将はたTS流りゅう解かい码为PES或あるES.(下しも载这个源码需要じゅようFQ)

VLC

跨またが平台ひらだい的てき视频播放器き。现在也有やゆう安あん卓たく版本はんぽん。也可以作为流媒体ばいたい服ふく务器。

FFDshow

免めん费的编解码软件けん，基き于windows平台ひらだい。原因げんいん就是directshow就是微ほろ软开发的，只ただ能のう用よう于windows平台ひらだい。

PlayerSDK(Android平台ひらだい)

这是一个专注音视频播放器的库,目前もくぜん还在不断ふだん优化中ちゅう。

VideoDownloader(Android平台ひらだい)

视频下か载SDK功こう能のう。

MediaSDK(Android平台ひらだい)

这是一个专注音视频边下边播的库。

PaddlePaddle-DeepSpeech

夜よる雨あめ飘零大だい佬撰写うつし的てき基もと于《Baidu's Deep Speech 2 paper》论文深度しんど学がく习语音おん识别实战项目。

NDK_OpenGLES_3_0

Android OpenGLES 3.0 开发系けい统性学がく习教程きょうてい。

OpenGLCamera2

Android OpenGL Camera 2.0 实现 30 种滤镜和抖音特效とっこう。

AnalysisAVP

音おと视频学がく习，相そう关文件けん格式かくしき/协议分析ぶんせき，框かまち架か学がく习等。yuv h264 aac flv mp4 rtmp；libyuv x264 openh264 faac faad2 fdk-aac librtmp ffmpeg sdl2 webrtc


🤝 鸣谢

为了让我们的repo内容ないよう更さら加か的てき丰富，更さら加か的てき专业。欢迎大家たいか贡献patch，希望きぼう大家たいか在ざいissue里さと面めん出で谋划策さく，我わが们期待きたい你的加入かにゅう。


零れい领工作こうさく

实时提供ていきょう，每まい周しゅう发布北京ぺきん，上海しゃんはい，广州，深ふか圳，杭州こうしゅう，南京なんきん，合ごう肥こえ，武たけ汉，长沙，重じゅう庆，成都せいと，西安しーあん，厦门的てきc/c++，golang方向ほうこう的てき招聘しょうへい岗位信しん息いき。 包含ほうがん校こう招，社しゃ招，实习岗位， 面めん经，八はち股また，简历

零领工作

About

音おと视频流りゅう媒体ばいたい权威资料整理せいり，500+份文章ぶんしょう，论文，视频，实践项目，协议，业界大神だいじん名めい单。

Resources

Readme
Activity

Stars

0 stars

Watchers

0 watching

Forks

0 forks
Report repository

Releases

No releases published

Packages

No packages published