A humanoid robot and artificial intelligence
מאגר ידע

איך רובוט דמוי אדם מדבר עם אנשים: זיהוי דיבור, בינה מלאכותית והקול של הרובוט

איך רובוט דמוי אדם שומע, מבין ועונה: מיקרופונים, זיהוי דיבור, מודל שפה, קול, מהירות התגובה, רעש באירועים וחובת השקיפות לפי ה-AI Act האירופי.

צוות MERA Roboticsעודכן: 21 בנובמבר 20265 דקות קריאהAzərbaycancaShqipBahasa MelayuМакедонскиBosanskiSrpskiالعربيةTiếng Việtहिन्दीDanskBahasa Indonesia日本語中文TürkçeEestiSuomiMagyarSlovenčinaΕλληνικάHrvatskiČeštinaSlovenščinaLatviešuNorskLietuvių한국어RomânăБългарскиSvenskaPortuguêsItalianoEspañolFrançaisNederlands

בקצרה

רובוט דמוי אדם מדבר דרך שרשרת של תוכנות: מיקרופונים קולטים את הקול, זיהוי דיבור הופך אותו לטקסט, מודל שפה כותב תשובה שמתאימה לפרסונה ולידע על האירוע, וסינתזת דיבור משמיעה אותה. איכות השיחה תלויה בתוכנה, בידע שהוכן מראש ובאקוסטיקה של המקום, ולא ברובוט לבדו.

תוכן הענייניםאיך עובדת שיחה עם רובוט דמוי אדם, שלב אחר שלב?מה רובוט דמוי אדם שומע, ואיך הוא מתמודד עם רעש?איך רובוט דמוי אדם יודע מה לומר?למה מהירות התגובה של רובוט כל כך חשובה?בכמה שפות ובאיזה קול רובוט דמוי אדם יכול לדבר?צריך לומר לאנשים שהם מדברים עם בינה מלאכותית?מה לבדוק לפני אירוע עם רובוט מדבר?איך בוחרים שותף לשיחות של רובוט דמוי אדם?

רובוט דמוי אדם מדבר עם אנשים דרך שרשרת של תוכנות: מיקרופונים קולטים את הקול, זיהוי דיבור הופך אותו לטקסט, מודל שפה כותב תשובה שמתאימה לפרסונה של הרובוט ולמה שהוא יודע על האירוע, וסינתזת דיבור הופכת את התשובה לקול שיוצא מהרמקול. הרובוט עצמו (למשל Unitree G1) מספק את ה"אוזניים", את ה"פה" ואת התנועה, ואיכות השיחה תלויה בתוכנה ובמידה שבה היא הוכנה למקום מסוים.

איך עובדת שיחה עם רובוט דמוי אדם, שלב אחר שלב?

שיחה עם רובוט דמוי אדם עוברת חמישה שלבים שחוזרים בכל חילופי דברים:

שלב מה קורה במה תלויה האיכות
הקשבה המיקרופונים של הרובוט (או מיקרופון חיצוני) קולטים את הקול רעש, מרחק מהדובר, הד בחלל
זיהוי תור המערכת מחליטה מתי אדם התחיל לדבר ומתי סיים הגדרות רגישות, רחש ברקע
זיהוי דיבור הדיבור הופך לטקסט שפה, מבטא, שמות פרטיים, קולות של ילדים
תשובה מודל שפה כותב את התשובה לפי הפרסונה והידע איכות תיאור הפרסונה ומאגר הידע, כללי הנושאים
קול ותנועה סינתזת דיבור, רמקול, מחוות קול שמותאם לשפה, עוצמה, מערכת ההגברה באולם

חוליה חלשה במקום כלשהו שוברת את כל השרשרת. התקלה הנפוצה ביותר באירועים היא לא "בינה מלאכותית טיפשה", אלא רובוט שלא שמע נכון את השאלה ברעש של הקהל, ואז ענה בצורה נכונה על משהו שאף אחד לא שאל.

Unitree G1 and Go2 robots on a trade show stand (Japan Mobility Show 2025)
Unitree G1 and Go2 robots on a trade show stand (Japan Mobility Show 2025), צילום: RuinDig/Yuki Uchida, CC BY 4.0

מה רובוט דמוי אדם שומע, ואיך הוא מתמודד עם רעש?

רובוט דמוי אדם שומע דרך מערך המיקרופונים המובנה שלו, ובמקום רועש מיקרופון נוסף קרוב לפה של הדובר עובד לעיתים קרובות טוב יותר. לפי היצרן, ל-Unitree G1 יש מערך של כמה מיקרופונים ורמקול מובנה קטן (המפרט של Unitree G1). זה מספיק לשיחה במשרד, באולם תצוגה או בדוכן שקט.

בתערוכה, בערב גאלה או בפסטיבל המצב משתנה: מוזיקה, הגברה מהבמה ועשרות שיחות במקביל מגיעות לאותם מיקרופונים. מה שעוזר בפועל:

  • שהאורח יתקרב לרובוט וידבר אליו ישירות, ולא מהצד,
  • מיקרופון ידני או כיווני לאורחים על הבמה ובפאנלים,
  • הצבת הדוכן הרחק מהרמקולים של הבמה,
  • מסירת שמות פרטיים למערכת מראש (מותג, מוצרים, שמות דוברים), כדי שזיהוי הדיבור לא ישבש אותם,
  • בדיקה במקום עצמו, ולא רק במשרד.

אותו דבר נכון לגבי הקול שיוצא מהרובוט: הרמקול המובנה מספיק לשיחה אחד על אחד, אבל בהופעה על במה הקול של הרובוט צריך לעבור למערכת ההגברה של האולם.

איך רובוט דמוי אדם יודע מה לומר?

את התשובות של רובוט דמוי אדם כותב מודל שפה שמקבל תיאור של הפרסונה, ידע על האירוע וכללים לגבי מה שאסור לרובוט לומר. המודל מכיר שפה ואת העולם באופן כללי, אבל הוא לא יודע כלום על תוכנית הכנס, על המוצרים של הלקוח או על המקום של המלתחה. את הידע הזה צריך להכין.

חבילת הכנה טובה כוללת:

  • פרסונה: שם, אופי, סגנון דיבור, אורך התשובות,
  • ידע: תוכנית, דוברים, ההצעה, תשובות לשאלות טיפוסיות של אורחים,
  • גבולות: נושאים אסורים, איך לסרב, מה לעשות עם שאלות על פוליטיקה או על מתחרים,
  • תסריט: ברכה, הזמנה להצטלם, העברת האורח לאדם בדוכן.

כך עובדת MERA Robotics: את מה שהרובוט אומר מכינים לכל אירוע בנפרד, בפרופיל אירוע עם ידע על הלקוח ועל התוכנית, ולרובוט יכולה להיות זהות מותג משלו עם שם, אופי וידע על ההצעה.

יש מערכות שמשלבות את השיחה עם תמונת המצלמה. אז הרובוט מזהה חפץ שמולו, למשל דגם של מוצר בתצוגה, ומתייחס אליו בשיחה. זה שימושי באולמות תצוגה ובדוכנים, שבהם אורחים שואלים "ומה זה?".

למה מהירות התגובה של רובוט כל כך חשובה?

מהירות התגובה של רובוט דמוי אדם קובעת אם השיחה מרגישה טבעית, כי אנשים רגילים למרווחים קצרים מאוד בין תורות דיבור. מחקר שהשווה בין שפות רבות ופורסם ב-PNAS מצא שבכל השפות המרווח הנפוץ בין סוף התור של אחד לתחילת התשובה של השני הוא שבריר שנייה (Stivers et al., PNAS).

אף שרשרת של זיהוי דיבור, מודל שפה וסינתזת דיבור לא עונה מהר כמו אדם, ולכן מערכות רובוטיות מפצות על כך בדרך שבה הן מנהלות את השיחה:

  • התשובה מתחילה להתנגן עוד לפני שהיא נוצרה עד הסוף,
  • תשובות קצרות במקום מונולוגים ארוכים,
  • מחווה או תנועת ראש מיד אחרי השאלה, כדי שהאורח יידע שהרובוט מקשיב,
  • אפשרות לקטוע את הרובוט באמצע משפט.

הבעיה השנייה היא הרגע שבו הרובוט מחליט שהאדם סיים. מוקדם מדי, והרובוט נכנס לדברים בכל הפסקת מחשבה. מאוחר מדי, והאורחים מחכים בשקט. את ההגדרה הזאת כדאי להתאים לקהל: ילדים ואנשים שמדברים בשפה זרה עוצרים לזמן ארוך יותר.

בכמה שפות ובאיזה קול רובוט דמוי אדם יכול לדבר?

מספר השפות ובחירת הקול תלויים בתוכנת השיחה של הרובוט דמוי האדם, ולא בחומרה שלו. MERA OS, מערכת השיחה ש-MERA Robotics פיתחה, מנהלת שיחות ביותר מ-70 שפות, בהן פולנית ואנגלית, בקול שמותאם לכל שפה ובמבטא של דובר ילידי. באירוע בינלאומי הרובוט יכול לברך אורח אחד באנגלית ולשוחח עם הבא בפולנית. את שפות השיחה לאירוע מסוים קובעים ובודקים מראש.

כשבוחרים קול, בדקו:

  • האם הוא מתאים לפרסונה (גיל, מזג, מותג),
  • האם הוא נשמע טבעי בשפה הזאת ולא כמו תרגום מאנגלית,
  • איך הוא הוגה את השמות הפרטיים של הלקוח,
  • האם קצב הדיבור נשאר מובן ברעש.

צריך לומר לאנשים שהם מדברים עם בינה מלאכותית?

באיחוד האירופי כן: החובה ליידע אנשים שהם מדברים עם בינה מלאכותית נובעת מסעיף השקיפות של ה-AI Act, שחל מ-2 באוגוסט 2026. הוא מחייב לתכנן מערכות בינה מלאכותית שנועדו לתקשר ישירות עם אנשים כך שאותם אנשים יידעו שהם מתקשרים עם מערכת בינה מלאכותית, אלא אם זה ברור מאליו (AI Act, חובות שקיפות, AI Act, כניסה לתוקף). המידע צריך להיות ברור ולהימסר לכל המאוחר באינטראקציה הראשונה.

ברובוט דמוי אדם בדרך כלל ברור שמכונה מדברת. ובכל זאת, משפט אחד בברכה של הרובוט או שלט בדוכן הם פתרון פשוט שמסיר כל ספק, גם באירועים מחוץ לאיחוד. הנתונים הם שאלה נפרדת: אם השיחות מוקלטות או נשמרות ביומן, האורחים צריכים לדעת.

מה לבדוק לפני אירוע עם רובוט מדבר?

לפני אירוע עם רובוט דמוי אדם מדבר, בדקו שבעה דברים:

  1. בדיקת שיחה במקום עצמו או ברעש דומה.
  2. רשימת שמות פרטיים שהרובוט צריך לזהות ולהגות נכון.
  3. פרסונה ואורך תשובות שהלקוח אישר.
  4. רשימת נושאים אסורים, ואיך הרובוט מסרב.
  5. תוכנית במה: מיקרופון לאורח, חיבור למערכת ההגברה.
  6. הודעה לאורחים שהם מדברים עם בינה מלאכותית.
  7. מפעיל במקום שיכול לקחת את השיחה, להחליף שפה או לעצור את הרובוט.

את הדגמים הזמינים לאירועים תמצאו בקטלוג הרובוטים להשכרה ולמכירה.

איך בוחרים שותף לשיחות של רובוט דמוי אדם?

את השותף לשיחות של רובוט דמוי אדם בוחנים לפי קריטריונים שאפשר לבדוק לפני החתימה:

  • תוכנת שיחה משלו, ולא אפליקציה נוקשה אחת של היצרן,
  • מספר השפות ועד כמה הקול נשמע טבעי בשפה שלכם,
  • פרסונה וידע שהוכנו לאירוע שלכם, ולא צ׳אטבוט כללי,
  • מפעילים במקום שמגיבים כשמשהו משתבש,
  • דגמי רובוטים שזמינים להשכרה או לרכישה,
  • ניסיון באירועים בארץ ובחו״ל.

שאלות נפוצות

רובוט דמוי אדם מבין מה אומרים לו?

רובוט דמוי אדם הופך דיבור לטקסט, ומודל שפה מפרש את המשמעות וכותב תשובה. הוא מבין שאלות בשפה טבעית, אבל ידע על אירוע, הצעה או תוכנית מסוימים צריך להכין מראש.

למה רובוט עונה לפעמים לא לעניין?

בדרך כלל כי הוא לא שמע נכון את השאלה ברעש: זיהוי הדיבור רשם מילים אחרות, והמודל ענה נכון על שאלה שתומללה בטעות. דיבור מקרוב, מיקרופון לאורח ומסירת שמות פרטיים למערכת מראש עוזרים.

רובוט דמוי אדם יכול לדבר בכמה שפות באותו אירוע?

כן, אם תוכנת השיחה תומכת בזה. MERA OS, המערכת של MERA Robotics, מנהלת שיחות ביותר מ-70 שפות, בהן פולנית ואנגלית, בקול שמותאם לכל שפה. את השפות לאירוע מסוים כדאי לבדוק מראש בשיחת ניסיון.

צריך לומר לאורחים שהם מדברים עם בינה מלאכותית?

באיחוד האירופי סעיף השקיפות של ה-AI Act, שחל מ-2 באוגוסט 2026, מחייב ליידע אנשים שמתקשרים ישירות עם מערכת בינה מלאכותית, אלא אם זה ברור מאליו. ברובוט דמוי אדם בדרך כלל מספיקים משפט אחד בברכה או שלט בדוכן, וזו פרקטיקה טובה גם מחוץ לאיחוד.

מקורות

  1. Unitree G1: manufacturer specifications
  2. Stivers et al. (2009), Universals and cultural variation in turn-taking in conversation, PNAS
  3. EU AI Act, Article 50: transparency obligations
  4. EU AI Act, Article 113: entry into force and application
מדריך מעשי

איך בוחרים תוכנת שיחה לרובוט דמוי אדם?

  1. תאימות לדגם הרובוט שלכם ולגרסת התוכנה שלו.
  2. שפות וקולות: בכמה שפות המערכת משוחחת, והאם הקול מתאים לכל שפה?
  3. ידע ופרסונה: איך מזינים ידע על האירוע או על המותג, ואיך מגדירים את האופי של הרובוט.
  4. שליטה: האם מפעיל יכול לקחת לידיו את השיחה, את התנועה ואת המחוות, למשל מאפליקציה בטלפון?
  5. בקרת תוכן: איך מגבילים נושאים ותשובות שחורגים מהידע שהוכן מראש.
  6. רישיון ותמיכה: מה כולל הרישיון ומי אחראי לעדכונים.

את העמוד הזה מפרסמת MERA Robotics, חברה שמעניקה רישיונות ל-MERA OS, תוכנת שיחה לרובוטים דמויי אדם.

המבחר שלנו

רובוטים להשכרה ולמכירה

כל קטלוג הרובוטים (באנגלית) →

יצירת קשר

בואו נדבר על האירוע שלכם

תארו בקצרה מה אתם צריכים. נחזור אליכם עם המלצה על רובוט ועל תרחיש ועם הצעת מחיר.

אנחנו משתמשים בפרטים מהטופס רק כדי להשיב לפנייה שלכם.

מאגר ידע

קראו גם

בדיקת זמינות