משנה קול

רכיב משנה קול מחליף את הקול בהקלטה, או בסרטון שלם עם דיבור, בקול אחר. הרכיב ממיר דיבור לדיבור עם ElevenLabs, כך שהרגש, הקצב והתזמון המקוריים נשמרים, ורק הקול משתנה. כשמחברים אודיו, מקבלים בחזרה אודיו, וכשמחברים סרטון, מקבלים בחזרה את אותו סרטון עם הקול החדש.

מתי להשתמש

• החלפת הקול בסרטון של דובר מול המצלמה או בסרטון עם סנכרון שפתיים, בשלב אחד.
• החלפת הקול בהקלטה בקול של המותג שלכם או של דמות.
• הסתרת הזהות של דובר, תוך שמירה על ההגשה הטבעית.
• הפיכת הקלטת טיוטה גולמית לקריינות מלוטשת.
• שימוש בקול קריין אחד בהקלטות של אנשים שונים.

לשיחה עם כמה דוברים שכל אחד מהם צריך קול חדש, השתמשו ברכיב משנה קול Pro.

התחלה מהירה

קלטים ופלטים

כששני הקלטים מחוברים, הווידאו גובר והרכיב מתעלם מקלט האודיו.

הקובץ קובע את המצב, לא הקלט. הרכיב בודק מה באמת יש בקובץ. קובץ של אודיו בלבד בקלט וידאו, כמו הקלטה קולית שנשמרה כ-.m4a, רץ כאודיו ומחזיר אודיו. כשמחברים סרטון לקלט אודיו, הרכיב מחלץ את הסאונד שלו ומטפל בו כאודיו.

הגדרות

מודלים

השאירו את המודל Multilingual v2, אלא אם אתם רוצים להשוות תוצאות. ElevenLabs ממליץ עליו גם להקלטות באנגלית, שבהן הוא לרוב טוב יותר מ-English v2, והוא נדרש להקלטות בשפות אחרות.

החלפת הקול בסרטון שלם

חברו לקלט וידאו כל סרטון עם דיבור: קליפ שנוצר, קובץ שהעליתם או שוט עם סנכרון שפתיים. ואז הרכיב:

1. מחלץ את רצועת האודיו מהקליפ.
2. ממיר את הדיבור לקול שבחרתם.
3. מציב את הקול החדש על הסרטון המקורי, ומחזיר את הסרטון ואת רצועת הקול החדשה.

כך רכיב אחד מחליף שרשרת של ארבעה רכיבים: סרטון, רכיב חילוץ אודיו, החלפת קול ורכיב מיזוג וידאו ואודיו.

לסרטון צריכה להיות רצועת אודיו. רוב המודלים של טקסט לווידאו ושל תמונה לווידאו יוצרים וידאו שקט. רק מודלים שיוצרים סאונד, כמו VEO 3.1 ו-Kling 3.0, נותנים לרכיב דיבור להמיר. כשהקליפ שלכם שקט, חברו אודיו ישירות.

שמרו את המוזיקה או הסירו אותה. כשהתיבה הסרת רעשי רקע לא מסומנת, המוזיקה ואפקטי הקול שבקליפ נשארים מתחת לקול החדש. סמנו אותה כשאתם רוצים רק את הקול.

טיפים

• התחילו מברירות המחדל. יציבות של 0.5 ודמיון של 0.75 מתאימים לרוב ההקלטות. דמיון גבוה יותר מקרב את התוצאה לקול היעד, אבל היא עלולה להישמע פחות טבעית.
• השאירו את ההגדרה הדגשת סגנון על 0. העלו אותה רק כשהקול החדש צריך להדגיש יותר את הדרמה של המקור.
• נקו קודם את המקור. הקלטות באיכות ירודה מעבירות את הבעיות שלהן לתוצאה. העבירו קודם אודיו רועש דרך רכיב מחלץ קול.
• העדיפו קליפים עם הרבה דיבור. מוזיקה חזקה מתחת לדיאלוג עלולה לדלוף להמרה. סמנו את התיבה הסרת רעשי רקע כשאין לכם צורך במוזיקה.
• בשינויים גדולים נשמרות פחות דקויות. ככל שקול המקור וקול היעד רחוקים יותר זה מזה, למשל קול גברי עמוק שהופך לקול נשי קליל, כך עלולים להופיע יותר ארטיפקטים.

פתרון בעיות

ההרצה נכשלת עם ההודעה "This video has no audio track to revoice" (בסרטון הזה אין רצועת אודיו להחלפת קול). הקליפ שקט. השתמשו בקליפ עם דיבור, או חברו הקלטה לקלט אודיו.

התוצאה נשמעת רובוטית. הורידו את הערך של דמיון כדי לתת למודל יותר חופש, או בחרו קול יעד שקרוב יותר לקול של הדובר המקורי.

דרך ה-API

הנתיב POST /v1/voice-changer מקבל את voiceId ואת audioUrl או את videoUrl, ובנוסף את הפרמטרים האופציונליים model, stability, similarityBoost, style, useSpeakerBoost, seed ו-removeBackgroundNoise. השדה sourceHasVideo בתוצאה מציין אם ההרצה הייתה במצב וידאו או במצב אודיו. כלי ה-MCP הוא voice_changer. ראו את דף ה-API קול ומדיה.