דמיינו שאתם מדברים עם זר, אבל במקום קול רובוטי מהטלפון הנייד שלכם, אתם שומעים תרגום שוטף ישירות באוזניה. יתר על כן, עם האינטונציה וגוון הקול של הדובר המקורי. מתרגם גוגל השיקה זה עתה טכנולוגיה שתשבור באופן סופי את מחסומי השפה. תרגום מכונה בגוגל חוגג השנה עשרים שנה להיווסדו, והחברה מתגאה בכך שמוצריה מתרגמים כעת למעלה מטריליון מילים בחודש. audio מודל Gemini 3.5 Live Translate שואפת לקחת את כל התחום לשלב הבא. שכחו מתרגום טקסט מסורתי ומהקונספט המביך של לומר משפט, לחכות שהוא יעובד ואז להשמיע את התוצאה. גוגל מתקדמת לעבר תרגום סימולטני חלק, מהסוג שאנו מכירים ממקצוענים.
המודל החדש יכול לתרגם שפה מדוברת כמעט בזמן אמת, ביותר מ-70 שפות. בניגוד לפתרונות ישנים יותר, הוא אינו ממתין שהדובר יסיים לדבר. הוא מתרגם באופן רציף, נשאר מאחורי הדובר למשך מספר שניות בלבד, תוך שמירה על האינטונציה, הקצב והגובה שלו. התרגום המתקבל פשוט נשמע כמו הדובר המקורי. החידוש המרכזי הוא יצירת דיבור רציפה. המודל מאזן באופן כל הזמן בצורה חכמה בין המתנה להקשר נוסף (ובכך לשפר את איכות התרגום) או תרגום מיידי ולהישאר בקצב הדובר. התוצאה היא דיבור שוטף ללא הפסקות לא טבעיות. בנוסף, אין צורך להגדיר את השפה באופן ידני. המודל מזהה למעלה מ-70 שפות בכוחות עצמו ויכול להתמודד בקלות עם שיחות רב-לשוניות או סביבות רועשות.
במצב "האזנה" החדש, פשוט מחזיקים את הטלפון קרוב לאוזן, כאילו מדברים עם מישהו בטלפון. לאחר מכן ניתן לשמוע את התרגום באופן דיסקרטי ישירות מהמקלט של הטלפון, מה שמשנה לחלוטין את הדינמיקה של תקשורת אישית בסביבה זרה. אין עוד צורך להחזיק את היד כשהצג מול פניו של אדם זר. התכונה החדשה תוכנס בהדרגה לשיחות וידאו ב... גוגל פגישהתרגום הדיבור יגיע לשם תחילה כחלק מבדיקות פרטיות עבור לקוחות עסקיים נבחרים של Google Workspace, כאשר גוגל מבטיחה פריסה רחבה יותר בהמשך השנה. המודל זמין למפתחים דרך Gemini API חי. בין הראשונים לבדוק אותו נמצאת, למשל, פלטפורמת התחבורה האסייתית Grab לתקשורת בין נהגים לנוסעים - מעל 10 מיליון שיחות קוליות מתבצעות מדי חודש באמצעות האפליקציה שלה בלבד. הנהלת הפלטפורמה משבחת בעיקר את זיהוי השפה האוטומטי ואת זמן ההשהיה הנמוך ביותר.
טכנולוגיה שיכולה לדבר שפה זרה בקולך היא, כמובן, חרב פיפיות. כדי למנוע את התפשטותם של דיפפייקס ודיסאינפורמציה, כל האודיו שנוצר על ידי המודל נושא סימן מים דיגיטלי בלתי נשמע בשם SynthID. זה מאפשר זיהוי תוכן אמין באמצעות בינה מלאכותית בעתיד. עם צעד זה, גוגל מחזקת משמעותית את היתרון התחרותי שלה. Apple הימר לאחרונה על תרגום חי ב Airפודך וסמסונג דוחפות באופן מאסיבי את מתורגמן הבינה המלאכותית שלהן ישירות לטלפונים שלהן. Galaxyעם זאת, המוצר החדש של גוגל עובד בצורה מושלמת עם צ'כית וסלובקית, ואיכות התרגום היא מהשורה הראשונה לפי הבדיקות הראשונות שלנו. יצרני מתרגמי חומרה חד-תכליתיים יתקשו יותר ויותר.
איך להפעיל את הפונקציה באופן מיידי?
- עדכן את אפליקציית Google Translate בחנות האפליקציות (Google Play / App Store).
- לאחר פתיחת האפליקציה, הקישו על סמל "שיחות".
- בחר את הפריט החדש "האזנה" ולחץ על "התחל".
- שימו את הטלפון לאוזן ותתחילו להקשיב.chat הסביבה.
לפי בדיקות העריכה הראשונות שלנו, התכונה עובדת בצורה אמינה מאוד ומחקה את קולות הדוברים המקוריים בצורה נאמנה באופן מפתיע. מה דעתכם על חידוש המדע הבדיוני הזה? שתפו אותנו בדיון.
ובעולם הזה Siri לא דובר צ'כית. עצוב
אני מסכים, זה מגוחך.
ופיקסל שרק צוחק
ניסיתי סרט דרום קוריאני בשפת המקור. הרגשתי כאילו חזרתי לימים של קלטות וידאו ודיבוב מהיר.
ואיך הצלחת לגרום לזה לעבוד? אני רואה את ההצעה שם אבל אני לא מצליח ללחוץ עליה (היא באפור כמו בתמונה במאמר). תודה על כל עצה 😉👍🏻
כנראה בגלל שלא היו לך אוזניות מחוברות. ותוודא שהאפליקציה מעודכנת, היא לא הייתה שם באייפד הישן והיא כן אחרי העדכון.
ובין אם הבנת את התוכן ובין אם לא, זה מה שחשוב, חופשי ומיידי, ואתה מבין. שלמות אינה בחינם.
זהו זה... זה תרגם את המילים, זה איכשהו התאים לכתוביות, אבל בהתמקדות בקול אחר, ובכן, זה לא היה בדיוק אותו דבר. אלא, שכל אחד ינסה את זה בעצמו וישפוט. זה יתפתח עם הזמן. לדוגמה, נטפליקס ואחרים יהפכו API כלשהו לזמין/ייצרו בינה מלאכותית שתפרש.
אני לא יודע מה אני עושה לא נכון, אבל התפריט שם, אבל אני לא יכול לבחור אותו 🤷♂️ הוא "אפור" בדיוק כמו בתמונות בכתבה, אז אני לא יודע? האם הוא זמין או לא?!
אני בודק את זה וזה נכשל הרבה בזמן שאני משחק ב-Far Cry 6, לפעמים זה לא מתרגם כלום, לפעמים זה אומר את זה תוך דקה ולפעמים זה חותך וחוזר על מילה אחת 30 פעמים, וזה מטורף. אבל אני מבין שיש מוזיקה ואפקטים, אני צריך להשתיק הכל ולא...chat רק קול, וזה יהיה משעמם. אבל ביוטיוב, שבו אדם אחד מדבר בצורה ברורה ולא נבלע במוזיקה, התוצאה די טובה.
זה לא ממש עבד לי, אבל ניסיתי את זה רק לרגע.
אבל מה יהיה טוב אם הוא יקלט את הצליל מהטלפון. ציפיתי לשיחה מאוסטריה והגרמנית שלי נוראית. למרבה המזל, צ'כי התקשר ותרגם את זה לזרים. ההוראות להשמיע את הטלפון בקול רם ואז המתרגם לא עובדות, הטלפון כנראה מוגדר להתעלם מהצליל מהטלפון (זו בעיה טכנית, זה גורם לשריקה או הד).