Cum am folosit Whisper AI pentru a face subtitrări pentru orice film (gratuit și offline)

Nu toate produsele AI sunt supraevaluate; există unele cu adevărat utile, de la scrierea e-mailului la editarea fotografiilor, la rularea agenților AI și multe altele.

Am testat în mod constant diverse instrumente AI, m-am înscris pentru altele noi, am încercat software beta și le-am evaluat față de concurenții existenți pentru a le evalua performanța.

În timp ce navigăm în această lume AI, este responsabilitatea noastră să oferim instrumente AI utile care beneficiază cu adevărat cititorii noștri, și am făcut acest lucru. Ghidul nostru recent al agenților AI este unul dintre aceștia, oferind 8 agenți AI utili care pot fi benefici pentru utilizatorii obișnuiți.

Whisper este un astfel de instrument care vă permite să transcrieți audio în text; are, de asemenea, capabilități utile, cum ar fi subtitrări, și poate chiar genera subtitrări. În timp ce majoritatea platformelor oferă acum subtitrări, totuși, există încă o mulțime de emisiuni care nu au subtitrări, ceea ce le face extrem de greu de înțeles și adesea duce la nevizionarea. În plus, datorită dublării, majoritatea studiourilor lansează emisiuni cu opțiuni limitate de limbă.

Cum să generați subtitrări și subtitrări pentru orice videoclip folosind Whisper AI

Pentru aceasta, folosesc Whisper, un instrument gratuit de transcriere audio de la OpenAI disponibil atât pentru Mac, cât și pentru Windows. Acceptă mai multe limbi și poate chiar traduce în alte limbi. Poate transcrie text, poate genera text din audio și îl poate converti în alte limbi; cel mai important, poate genera subtitrări și subtitrări din orice limbă și chiar le poate traduce în engleză.

Cerințe preliminare pentru a instala și utiliza Whisper pe Mac, Windows și Linux

Puteți rula Whisper AI în cloud și local pe Mac. Deoarece discutăm despre o opțiune gratuită, rularea acesteia local pe dispozitivul dvs. este singura opțiune gratuită disponibilă. Dar înainte de asta, iată cerințele preliminare pentru ca fiecare platformă să o ruleze local pe dispozitivul tău.

Windows

• Python 3.8+
• PyTorch 1.10.1+
• ffmpeg

Mac

• Python 3.8+
• PyTorch 1.10.1+
• ffmpeg Linux

• Python 3.8+
• PyTorch 1.10.1+
• ffmpeg

Cum să instalați Whisper AI local pe dispozitivul dvs

Instalarea Whisper este ușoară și necesită trei pași, în funcție de dispozitivul dvs. Am enumerat metoda atât pentru Windows, cât și pentru macOS. Puteți urma pașii pentru a instala Whisper local pe dispozitivul dvs. fără probleme. Dacă ești gata, să începem.

Pasul 1: Instalați Python pe dispozitiv

Dacă aveți deja instalat Python pe dispozitiv, puteți sări peste acest pas. Dacă nu, accesați: https://www.python.org/ și instalați-l pe dispozitiv.

Odată instalat, utilizați următoarea comandă pentru a verifica dacă este instalat pe dispozitivul dvs.

Deschideți promptul de comandă (Windows) sau terminalul (Mac/Linux) și tastați următoarea comandă: versiunea python.

Dacă arată versiunea Python, ceva de genul acesta, Python 3.12.0, înseamnă că este instalat cu succes pe dispozitivul tău. Dacă nu vedeți acest lucru, urmați din nou procesul.

Dacă aveți o versiune mai veche de Python, o puteți actualiza folosind următoarele comenzi pe Windows, Mac și Linux.

• Windows: python -m pip install –upgrade pip
• MacOS: python3 -m pip install –upgrade pip
• Linux: sudo apt install python3.12

Pasul 2: Acum, instalați Whisper

Apoi, instalați Whisper pe dispozitiv. Deschideți terminalul de pe dispozitiv și utilizați această comandă.

• Windows: pip install -u openai-whisper
• MacOS: pip install -u openai-whisper. Dacă vedeți vreo eroare, utilizați această comandă: python3 -m pip install –user -U openai-whisper
• Linux: pip install -u openai-whisper

Așteptați până când toate fișierele sunt descărcate cu succes. Odată finalizat, veți vedea un mesaj similar cu „Descărcat cu succes”.

Puteți utiliza această comandă pentru a verifica dacă este instalată corect pe dispozitivul dvs.

Comanda: șoaptă – ajutor

Pasul 3: Apoi, instalați software-ul FFmpeg.

Apoi, instalați ffmpeg (necesar pentru audio) pentru a procesa fișierele audio de pe dispozitiv.

Pe Mac:

Puteți folosi Homebrew pentru a-l instala pe Mac folosind această comandă simplă: brew install ffmpeg

Dacă nu aveți Homebrew pe Mac:

Pasul 1: Deschideți Terminalul pe Mac

Pasul 2: Lipiți această comandă și apăsați Enter: /bin/bash -c „$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)”

Pasul 3: Introduceți parola și așteptați până când toate fișierele sunt descărcate.

Înrudit: Cum să instalați Homebrew pe macOS

Pasul 4: Utilizați această comandă pentru a verifica dacă Brew a fost instalat corect pe dispozitivul dvs. Puteți folosi această comandă: brew –version

Instalați software-ul ffmpeg

Pasul 1: Deschideți Terminalul și utilizați această comandă: brew install ffmpeg

Pasul 2: Așteptați până când toate fișierele necesare au fost descărcate.

Pasul 3: Utilizați această comandă pentru a verifica dacă a fost instalată cu succes pe dispozitivul dvs.: ffmpeg -version

Pentru Windows:

Pasul 1: Accesați https://ffmpeg.org/download.html și descărcați fișierul Windows.

Pasul 2: Extrageți-l și instalați-l pe dispozitiv ca orice alt software.

Pasul 3: Apoi, verificați dacă totul este instalat corect pe dispozitivul dvs. Deschideți terminalul de pe dispozitiv și introduceți următoarea comandă: „ajutor în șoaptă”. Dacă vedeți opțiuni, înseamnă că aplicația este instalată corect pe dispozitivul dvs.

Cum se generează subtitrări pentru videoclipuri

Pasul 1: Deschideți terminalul de pe dispozitiv și accesați folderul în care se află fișierul video. În acest caz, fișierul meu video se află pe desktopul meu. Puteți folosi următoarele comenzi pentru a naviga la folderul fișierului video.

• Windows: cd Desktop
• MacOS: cd ~/Desktop

Pasul 2: Transcrie fișierele audio și video. Iată lista formatelor de fișiere acceptate de Whisper.

Pasul 3: Acum, transcrie, selectează fișierul video folosind această comandă: șoaptă (adaugă aici numele fișierului video sau audio) –model turbo –sarcina transcrie

exemplu: whisper video.mp4 –model turbo –sarcina transcrie

Pasul 3: În funcție de selecția dvs. de model, un model nou poate fi descărcat. Așa că așteptați până când se termină descărcarea. Iată diferitele modele Whisper din care poți alege. Cu cât modelul este mai mic, cu atât precizia este mai mică.

Cu toate acestea, dacă dispozitivul dvs. nu este puternic, vă recomand să utilizați modelul mic sau de bază, deoarece rularea modelelor mari vă poate consuma toate resursele sistemului. Dacă aveți fișiere media mai mari și doriți o precizie ridicată, puteți rula Whisper pe Google Colab. Iată tutorialul video despre cum se face.

Pasul 4: Acum sunt generate subtitrări. Puteți găsi următoarele fișiere în folderul video specificat anterior.

• video. transcriere text simplu txt
• video. format de subtitrare web vtt
• video. srt format comun de subtitrare (pentru YouTube, VLC etc.)

Pasul 5: Deschideți fișierul pentru a vedea subtitrări. Acum accesați folderul în care se află videoclipurile dvs. și deschideți fișierul care spune video.srt

Pasul 6 (Opțional): Dacă videoclipul nu este în engleză, îl puteți traduce în engleză folosind următoarea comandă.

Comandă: șoaptă (numele fișierului video sau audio) –model mediu –limbă (introduceți limba dvs. aici) –sarcina de traducere

Exemplu: whisper video.mp4 –model mediu –limba japoneză –sarcină traducere

Pasul 7: Acum, reveniți la destinația în care se află fișierul video. De acolo, puteți vedea fișierul video.SRT, care conține subtitrări în engleză pentru videoclipul pe care l-ați folosit.

Cum să utilizați subtitrările pentru videoclip

Puteți importa subtitrări pe orice player media terță parte și puteți reda videoclipul cu subtitrări. VLC este cel mai bun player media terță parte disponibil atât pentru Windows, cât și pentru macOS. Iată cum să îl utilizați pentru a viziona filme cu subtitrări pe care le-ați generat folosind Whisper.

Descărcați VLC media player (gratuit)

• Pentru Windows
• Pentru macOS

Pasul 1: Odată descărcat, instalați VLC media player pe dispozitiv.

Pasul 2: Deschideți VLC Player pe Windows și navigați la fila Playlist, apoi faceți clic pe Open Media.

Pasul 3: De aici, apăsați pe Răsfoire și selectați fișierul video și activați Adăugare fișier de subtitrare, selectați fișierul de subtitrare pe care l-ați generat folosind Whisper AI și faceți clic pe Deschidere.

Pasul 4: Gata, sunt generate subtitrări pentru videoclip.

Gânduri finale

De-a lungul anilor, aceste limitări m-au frustrat. Cu toate acestea, VLC a anunțat subtitrări generate de AI care funcționează în timp real, dar încă nu sunt disponibile pentru utilizatorii obișnuiți. Și și mai îngrijorător, a fost ultima lor postare pe Twitter, așa că îmi pierd speranța până îmi dau seama de Whisper.

Acesta este modul în care puteți genera subtitrări pentru orice videoclip, inclusiv pentru filme de lungă durată, în funcție de resursele dispozitivului dvs. Dacă dispozitivul dvs. nu este puternic, puteți rula Whisper AI pe Google Colab. Nu doar generați subtitrări, le puteți traduce și în alte limbi, așa cum se arată în videoclipul de mai jos. Sper că veți găsi acest ghid de ajutor. M-am asigurat că fiecare pas este detaliat pentru a face acest ghid prietenos pentru începători. Dacă mai aveți probleme în timp ce configurați sau rulați Whisper AI local pe dispozitivul dvs. Puteți comenta mai jos.

Întrebări frecvente despre generarea de subtitrări folosind Whisper AI

1. Pot folosi Whisper pentru a adăuga automat subtitrări la videoclipurile pe YouTube pe care le încărc?

Nu, trebuie să generați subtitrări dacă videoclipul este stocat local pe dispozitivul dvs. și apoi să îl încărcați pe YouTube când încărcați videoclipul. Nu adaugă automat subtitrări la videoclipurile YouTube pe care le încărcați.

2. Funcționează Whisper offline după instalare?

Da, odată ce modelul necesar este descărcat, acesta funcționează offline, eliminând necesitatea unei conexiuni la internet.

3. Cum pot accelera transcrierea pe dispozitive mai vechi sau de ultimă generație?

Pentru a accelera transcrierea, trebuie să utilizați modele mici. De asemenea, puteți comprima fișierele video mari în altele mai mici pentru a accelera acest proces. Pentru a comprima fișiere, puteți folosi următoarea comandă în terminal: ffmpeg -i video. mp4 -q: a 0 -map a audio. mp3

4. Poate Whisper detecta automat difuzoarele sau dialogurile separate?

Nu, momentan Whisper nu poate detecta automat difuzoare sau dialoguri separate; trebuie să utilizați instrumente separate, cum ar fi Pyannote, pentru a obține fișiere audio separate, audio Pyannote sau WhisperX

5. Subtitrările generate de șoaptă sunt corecte pentru vorbirea zgomotoasă sau accentuată?

Da, este unul dintre cele mai bune modele de transcriere. Precizia depinde și de modelul pe care îl utilizați; modelele mari generează în general o precizie mai bună; cu toate acestea, pot dura mai mult timp și necesită resurse puternice pentru a rula.