AI ווידעא דאַבינג וואָס פֿאָלגט נאָך דעם בילד
קולות, סאָונד-עפֿעקטן און מוזיק פֿון איין באַשרײַבונג
די meisten AI קול-געצייג לייענען טעקסט אין אַ ליידיקן ראַום אַרײַן און לאָזן אײַך עס צופּאַסן צום מאָנטאַזש. Seed Audio 1.5 קוקט אויף דער ווידעא. באַשרײַבט ווער רעדט, וואָס ער זאָגט, ווי דער ראַום קלינגט און וואָס די מוזיק טוט, און עס גיט צוריק איין סאָונדטרעק, אָפּגעמאָסטן לויט וואָס מען זעט אויפֿן עקראַן.
איר שרײַבט די ווערטער. דער מאָדעל שפּילט זיי אויס, מיט עפֿעקטן און מוזיק, אין טאַקט מיטן בילד.
דרײַ וועגן צו דאַבן
ByteDance דאָקומענטירט דרײַ ווידעא-מאָדעס. קלײַבט לויט וויפֿל קאָנטראָל איר דאַרפֿט איבערן קול.
ווידעא און אַ באַשרײַבונג
דער מאָדעל לייענט די סצענע און לייגט אונטער קולות לויט אײַער טעקסט: די ווערטער, דעם טיפּ קול, די עפֿעקטן און דעם מוזיק-הינטערגרונט.
ווידעא, באַשרײַבונג און אַ קול
לייגט צו אַ רעפֿערענץ-קליפּ, און די ווערטער ווערן גערעדט מיט יענעם קול. די ווידעא באַשטימט דעם טײַמינג, די רעפֿערענץ באַשטימט דעם טימבער.
איבערזעצן וואָס איז שוין דאָ
אויב אין דער ווידעא איז שוין דאָ רעדע אויף ענגליש אָדער כינעזיש, זעצט זי אַנשטאָט דעם איבער און האַלט דעם אייגענעם קול פֿונעם רעדנער.
וווּ דאַבינג לוינט זיך
AI-געגענערירטע ווידעא-מאַטעריאַל
קליפּס פֿון ווידעא-מאָדעלן קומען אָפֿט אָן שטום אָדער מיט אַ געראָטענעם סאָונדטרעק. דאַבט זיי מיט דעם דיאַלאָג און דער אַטמאָספֿער וואָס די סצענע דאַרף טאַקע.
שלעכטער אָרט-קלאַנג
ByteDance נאָמט אויס פֿאַרבעסערונג פֿון נידעריק-קוואַליטעטיקן קלאַנג ווי אַן אָנווענדונג: שפּילט די סצענע איבער ריין, אַנשטאָט זיך צו קעמפֿן מיטן ראַש.
קורצע דראַמעס און סעריעס
האַלט דעם קול פֿון אַ כאַראַקטער דער זעלביקער פֿון עפּיזאָד צו עפּיזאָד דורך נוצן דעם זעלבן רעפֿערענץ-קליפּ.
רעקלאַמעס און פּראָמאָס
מאָסט אָפּ דעם וווילע-קול, דעם קלאַנג פֿונעם פּראָדוקט און דעם מוזיק-אַקצענט ביזן פֿריימ, און דערנאָך ענדערט די שפּראַך פֿאַרן קומענדיקן mאַרק.
ווי אַזוי צו דאַבן אַ ווידעא מיט Seed Audio 1.5
גרייט צו דעם מאָנטאַזש
MP4 אָדער MOV, פֿון 4 ביז 360 סעקונדעס, 480p ביז 1080p, ביז 200 MB. דאַבט דעם פֿינאַלן מאָנטאַזש: אויב דער שניט ענדערט זיך, ענדערט זיך דער טײַמינג.
שרײַבט וואָס מען הערט
ווערטער אין ציטירצייכנס, אַ קורצע באַשרײַבונג פֿון יעדן קול, דערנאָך די עפֿעקטן און די מוזיק. דער מאָדעל דערפֿינדט ניט קיין דיאַלאָג, דעריבער אַלץ וואָס דאַרף געזאָגט ווערן געהערט אין דעם פּראָמפּט.
פֿיקסירט דעם טײַמינג וווּ עס איז וויכטיק
ניצט טײַמסטעמפּלען ווי [2.0s:6.5s] פֿאַר ווערטער און עפֿעקטן וואָס מוזן טרעפֿן אויף אַ שניט. דאָס איבעריקע לאָזט איבער צום מאָדעל.
לייגט צו אַ קול-רעפֿערענץ ווען נויטיק
ביז זעקס קליפּס פֿון 2 ביז 30 סעקונדעס יעדער. ניצט דעם זעלבן קליפּ יעדעס מאָל ווען אַ כאַראַקטער רעדט.
בײַשפּילן פֿון פּראָמפּטן
דער פּראָמפּט-גיד פֿון ByteDance רעקאָמענדירט: וואָס מען הערט, ווי עס קלינגט, און וואָס טאָר ניט זײַן. די פּראָמפּטן בלײַבן אויף ענגליש.
צוויי מענטשן אויף אַ רעגנדיקער גאַס
Outdoor street at night, steady rain on umbrellas and a passing car on wet asphalt. A young woman with a clear British voice, exasperated then laughing, says: “I cannot believe I let you talk me into this.” A man with a warm baritone, apologetic but smiling, answers: “I said it might rain. I did not say the sky would take it personally.” No music.
יעדער רעדנער באַקומט אַן איין-שורה באַשרײַבונג און אַן עמאָציע פֿאַרן ווארט.
אַ פּראָדוקט-אויפֿנאַמע מיט גענויעם טײַמינג
[0.0s:15.0s] Light electronic music under the whole clip. [0.4s:1.0s] A crisp click as the lid opens. [1.5s:5.0s] A confident adult male voice, General American accent, says: “Built for the days that do not end at five.” [12.0s:15.0s] The music lifts and resolves.
טײַמסטעמפּלען האַלטן דעם קליק אויפֿן פֿריימ ווען דער דעקל עפֿנט זיך.
איידער איר הייבט אָן
- דער מאָדעל שרײַבט ניט דעם סקריפּט. אַ ווידעא אָן באַשרײַבונג אין פּראָמפּט באַקומט קיין געפּלאַנטן דיאַלאָג ניט.
- ער מאַכט נאָר קלאַנג. די מויל-באַוועגונג אויפֿן עקראַן ווערט ניט געביטן, דעריבער אַרבעט דיאַלאָג בעסער אויף ברייטע אויפֿנאַמען, הינטערקעפּ, דערציילונג און אַנימאַציע.
- איין בקשה גיט ביז 6 מינוט קלאַנג; לענגערע פֿילמען דאַבט סצענע נאָך סצענע.
- ניצט קול-רעפֿערענצן נאָר מיט דער דערלויבעניש פֿונעם רעדנער.
אָפֿטע פֿראַגעס וועגן AI ווידעא דאַבינג
קען Seed Audio 1.5 איבערזעצן אָדער דאַבן אַ ווידעא אויף ייִדיש?
נאָך ניט. ייִדיש איז ניט צווישן די 30 שפּראַכן וואָס Seed Audio 1.5 רעדט ביים לאַנצירן. ווידעאָס אויף ענגליש אָדער כינעזיש קען מען אָבער איבערזעצן אויף שפּראַכן וואָס לעזער פֿון ייִדיש דאַרפֿן אָפֿט אויך, למשל רוסיש, דײַטש, פֿראַנצויזיש אָדער שפּאַניש.
וואָס איז AI ווידעא דאַבינג?
דאָס איז ווען מען גענערירט דעם סאָונדטרעק פֿון אַ ווידעא מיט AI: דיאַלאָג, וווילע-קול, סאָונד-עפֿעקטן און מוזיק, אָפּגעמאָסטן לויט וואָס עס טוט זיך אויפֿן עקראַן. מיט Seed Audio 1.5 באַשרײַבט איר דעם קלאַנג, און דער מאָדעל שאַפֿט אים אין איין דורכגאַנג.
שרײַבט Seed Audio 1.5 פֿאַר מיר דעם דיאַלאָג?
ניין. ByteDance זאָגט קלאָר אַז עס דאַבט ניט אויטאָמאַטיש. איר גיט די ווערטער און אַ באַשרײַבונג פֿונעם קלאַנג; דער מאָדעל שפּילט זיי אויס און מאָסט זיי אָפּ.
קען מען דאַבן מיט אַ באַשטימטן קול?
יאָ. לייגט צו אַ רעפֿערענץ-קליפּ פֿון 2 ביז 30 סעקונדעס, און די ווערטער ווערן גערעדט מיט יענעם קול, בשעת די ווידעא קאָנטראָלירט דעם טײַמינג. ביז זעקס רעפֿערענצן קען מען נוצן אין איין בקשה.
קען איך דאַבן אויף אַנדערע שפּראַכן חוץ ענגליש?
יאָ. Seed Audio 1.5 רעדט 30 שפּראַכן, פֿון יאַפּאַניש און קאָרעיִש ביז פּויליש, טערקיש און הינדי.
ווי אַזוי איז דאַבינג אַנדערש פֿון ווידעא-איבערזעצונג?
דאַבינג שאַפֿט אַ נײַעם סאָונדטרעק לויט אײַער באַשרײַבונג. ווידעא-איבערזעצונג נעמט רעדע וואָס איז שוין דאָ אויף ענגליש אָדער כינעזיש און לייגט איר אונטער אַ קול אויף אַן אַנדער שפּראַך, מיטן זעלבן קול.
פֿאַרבונדן
גיט אײַער סצענע דעם קלאַנג וואָס זי דאַרף
שרײַבט די ווערטער, באַשרײַבט דעם ראַום, און לאָזט דאָס בילד באַשטימען דעם טײַמינג.
דאַבט אַ ווידעא