דיוק תמלול בעברית: מה מודדים, מה משפיע, ואיך בודקים

דיוק של תמלול אוטומטי נמדד בשיעור שגיאות המילים (WER): כמה מילים הוחלפו, נמחקו או נוספו ביחס לתמליל אנושי מדויק, על ערכת בדיקה ידועה. מספר בלי ערכת בדיקה, בלי תאריך ובלי שיטה אינו אומר כלום, ולכן העמוד הזה מסביר איך המדידה עובדת, מה בהקלטה שלכם מעלה ומוריד את הדיוק, איך עברית מיט (IvreetMeet) בודק כל גרסה של המודל לפני שהיא מגיעה אליכם, ואיפה רואים את המדד הציבורי.

איך מודדים דיוק, ולמה זה מסובך בעברית

• ערכת בדיקה: הקלטות עם תמליל אנושי מדויק. ערכה ציבורית מאפשרת לכולם למדוד באותם תנאים; ערכה פנימית משקפת את המקרה שחשוב לכם (פגישות).
• נרמול: לפני ההשוואה מאחדים פיסוק, כתיב מלא וחסר ואותיות; בלי זה שתי מערכות עם אותו תמליל יקבלו ציון שונה.
• רווח בר-סמך: הפרש קטן בין שתי מערכות עשוי להיות רעש מדידה; מדידה רצינית מציינת את הטווח.
• אותה שיטה לכולם: משווים מערכות רק כשכולן נמדדו על אותה ערכה, עם אותו נרמול, באותו תאריך.

מה בהקלטה מעלה ומוריד את הדיוק

עוד על הקלטה: תמלול הקלטות ארוכות, תמלול שיחות, תמלול עברית ואנגלית מעורבות.

איך IvreetMeet בודק כל גרסה של המודל

• מול הגרסה הקודמת, על אותן הקלטות: גרסה חדשה מחליפה את הקודמת רק אם היא טועה פחות על אותן הקלטות של פגישות אמיתיות, עם רווח בר-סמך.
• מדד ציבורי: התוצאות על ערכות הבדיקה הציבוריות לעברית שרישיונן מתיר פרסום, לצד מערכות אחרות שנמדדו באותה שיטה, בעמוד מדד דיוק תמלול בעברית.
• בדיקה מקצה לקצה לפני החלפה: הקלטה אמיתית של פגישה עוברת את כל המערכת, כולל הפרדת דוברים, על החומרה שבייצור.
• מה לא מפורסם: פרטי המודל והתשתית. מה שכן: המדד, השיטה והתאריך.

איך מקליטים כדי שהדיוק יהיה גבוה

• מיקרופון קרוב לדוברים. טלפון על השולחן באמצע החדר עדיף על טלפון בכיס; מיקרופון שולחני עדיף על שניהם.
• חדר שקט וסגור. מזגן רועש, רחוב פתוח ומכונת קפה הם הגורם הראשון לשגיאות.
• אחד מדבר בכל פעם. דיבור חופף הוא המקרה הקשה לכל מערכת, אנושית או אוטומטית.
• שמות ומספרים בבירור. אלה המקומות שבהם תמלול אוטומטי טועה הכי הרבה; כדאי גם לכתוב אותם בהנחיות לסיכום.
• איכות קובץ סבירה. אין צורך ב-WAV כבד; M4A או MP3 באיכות רגילה מספיקים. הקלטת טלפון דחוסה מאוד תישמע גרוע גם לאדם.

איך זה עובד

1. 1מעלים את ההקלטה. שמע או וידאו, עד 500MB, מהמחשב או מהטלפון. אפשר לצרף הנחיות לסיכום: מי המשתתפים, מה מטרת ההקלטה, על מה להתמקד.
2. 2מקבלים תמליל לפי דוברים. כל קטע מסומן בדובר שלו ובזמן שלו. נותנים שמות לדוברים פעם אחת, מתקנים מה שצריך, ומחפשים בתוך הטקסט.
3. 3מקבלים סיכום. עיקרי הדברים, ההחלטות והמשימות, בעברית, מתוך התמליל המלא. לא מרוצים מהדגש? כותבים הנחיה ומבקשים סיכום מחדש.
4. 4מייצאים ומשתפים. Word, PDF, PowerPoint, Excel, טקסט, Markdown, כתוביות SRT או VTT (בתוכנית החינמית: PDF), או קישור שיתוף למי שלא היה בהקלטה.

מה קורה עם ההקלטה

• לא לאימון. הקלטות של משתמשים רשומים אינן משמשות לאימון מודלים, ואיננו מוכרים מידע אישי.
• ההקלטה לא נשלחת לספקי מודלי השפה. רק הטקסט לסיכום, בניתוב שאינו שומר את התוכן.
• ההקלטות נשמרות בישראל, מוצפנות, ונמחקות כשמוחקים את הפגישה או את החשבון. פירוט במדיניות הפרטיות ובעמוד אבטחת המידע.

כמה זה עולה

התוכנית החינמית כוללת עד 7 הקלטות ו-120 דקות בחודש קלנדרי לארגון, עם תמלול לפי דוברים, סיכום, ייצוא PDF ושיתוף בקישור, בלי כרטיס אשראי. Pro עולה ₪99 לחודש (₪79 לחודש בתשלום שנתי) ופותח עד 70 שעות תמלול בחודש; Business, ₪299 למשתמש לחודש, פותח עד 200 שעות. ביטול בכל עת. פירוט במחירים ובתמלול בעברית בחינם.