Avdio in video razvoj in učenje

 Najprej domnevamo, da nekdo nima ničesar v avdio in video in se ni nikoli naučil nobenega znanja, povezanega z digitalno obdelavo signala. Matematična osnova je v bistvu srednješolska, vendar pozna razvoj C / C ++, vsaj seznanjanje in odpravljanje napak IDE pod določeno platformo.

Osredotočite se na dva odprtokodna projekta ffmpeg in webRTC, predvsem na video del ffmpeg in zvočni del webRTC.

Najprej, začnite z video dekodiranjem. Ta je najpreprostejši. Osnovna koda za klicanje ffmpeg video dekodiranja je le približno 100 vrstic. Video dekodiranje mora razumeti samo h.264, 80% + prizorov je v tej obliki kodiranja, razumeti osnovne H.264 sps pps NAL in druge koncepte formatov datotek, razumeti princip YUV slikovne oblike in razumeti pretvorbo YUV v RGB , Tako da lahko upodabljate slike, dosežete lahko preprost video predvajalnik. (V bistvu v prvi fazi)

Če želite izvedeti več o kodiranju videa, je priporočljivo začeti z x264, preprost klic kodirne kode x264 je manj kot 100 vrstic. Kodiranje je bolj zapleteno kot dekodiranje, saj za dekodiranje ni treba konfigurirati nobenih parametrov, kodiranje pa ima veliko število parametrov, ki jih je treba konfigurirati. Na začetku le razumite nekaj osnovnih konceptov, kot so hitrost sličic, običajne metode nadzora pretoka ABR CRF, GOP, I / B Kaj pomeni / P Frame. (Spet seznanjen s kodiranjem X264)

Kodek zvočnega dela je podoben videu. V začetni fazi morate le razumeti dva kodirnika EAAC + in Silk, razumeti koncepte zvočnega kanala, hitrost vzorčenja itd. In razumeti format datoteke Wave. Lahko preprost predvajalnik zvoka. (Naredite avdio predvajalnik)

Kompleksni del zvoka ni kodek, temveč zvočni učinek. Oglejte si modul za obdelavo zvoka v webRTC in razumejte naslednje koncepte: odpravljanje zvoka NS, odpravljanje odmeva AEC, zaznavanje tihosti VAD, samodejni nadzor ojačanja AGC in vgrajeni webRTC. Čeprav algoritem ni najboljši, lahko reši 90% + težav in se ga splača naučiti. (Naučite se obdelave zvoka webrtc)

Ko sem se tega naučil, moram razmisliti o vprašanju, ali želim izbrati inženirsko pot ali algoritmično pot. Če gre za algoritemsko pot, se moram naučiti matematike. Za digitalno obdelavo signala se skriva veliko število osnovnih matematičnih teorij. Če gre za inženirsko pot, se morate naučiti medplatformnega razvoja, naučiti se zbiranja, predvajanja in obdelave zvoka in videa na več platformah ter se naučiti optimizacije montažnega jezika na več platformah. (Povezano s platformo)

Avdio in video sta zelo globoko področje in učenja ne boste nikoli končali v življenju, vendar ima to področje to prednost, da je hitrost posodabljanja znanja razmeroma počasna, naučenih stvari ni enostavno odpraviti in kopičenje izkušenj je zelo pomembno.v

Naš drugi izdelek:

Profesionalni sistem za zaščito pred strelo za Tower	Profesionalni paket opreme FM radijskih postaj	FM oddajnik FMUSER FU-1000C 1000 W z avdio vhodnim vmesnikom USB
FMUSER 200W paket za radijsko oddajanje	Hotelska IPTV rešitev	FMUSER FSN-1000T V5.0 1KW FM radijski oddajnik