עוד אווטאר בזמן אמת. וזה נראה כאילו זה טוב.

עוד אווטאר בזמן אמת. וזה נראה כאילו זה טוב.

Nuance Labs מוציאה לאור דגם אודיו-ויזואלי דופלקס מלא נופלקס ו-אוואטר של אמה

הסטארט-אפ האמריקאי Nuance Labs, שהוקם על ידי חוקרי אפל לשעבר, פתח את המודל האורקולי הבסיסי נופלקס 1.0 והשיק לרשות הציבור את אווטאר הווידאו האינטראקטיבי אמה, המסוגל לנהל דיאלוג טבעי עם אדם בזמן אמת ישירות בדפדפן.

רוב האווטרים הדיגיטליים הקיימים בנויים על עיקרון מכשיר הקשר: הסאונד מתומלל באמצעות STT, מועבר ל-LLM, מושמע באמצעות TTS, ולאחר מכן דגם נפרד מפעיל תנועות שפתיים.

חיבור זה יוצר עיכוב של 1.5-3 שניות, עקב כך האווטאר קופא במבט זגוגי, ממתין לסוף התור.

נופלקס מבטל את השכבה הזו על ידי שילוב של תפיסה ויצירת אודיו ווידאו לרשת נוירונית אחת מקצה לקצה: המערכת קוראת ברציפות את הטון, הפסקות ותנודות בקולו של בן השיח ומזרימה באופן סינכרוני הבעות פנים ודיבור מציאותיים.

ההבדל העיקרי בין אווטאר אמה מבוסס נופלקס הוא היכולת להקשיב ולהגיב בו זמנית. הדגם מסוגל להנהן, לחייך, לתת אותות של הקשבה פעילה ("אה-הא", "אני רואה") ולשנות הבעות פנים ישירות בזמן שהמשתמש מדבר, מבלי לחכות להפסקה.

במבחן העיוור של Nuance Labs על מדגם של 1,785 שאלות מבחן, נופלקס התאימה למהירות התגובה של אדם חי ב-89% מהזמן.

באופן מפתיע, אמה זמינה ללא רישום או חשבונות ישירות באינטרנט, והחברה פתחה גישה ראשונית ל-נופלקס Live API למפתחים.

ההשקה מלווה במסנני אבטחה שיווקיים: ההופעה ברישיון שחקנית אמיתית, זרמים מסומנים בסימני מים חובה, ושיבוט ישיר של פנים וקולות של צדדים שלישיים נחסם בהחלט.

אפליקציה.nuancelabs.ai