1. ISCOL 2008 עיבוד שפות טבעיות וטכנולוגיה מסייעת - תקשורת תומכת וחליפית * יעל נצר אוניברסיטת בן גוריון בנגב Natural Language Processing and Augmentative and Alternative Communication* * ובקיצור : NLP-AAC

2. ISCOL 2008 המטרה בכלי NLP ניתן לעשות שימוש אחר ויצירתי. החשיבות גדולה – טכנולוגיה מסייעת כיעד – טכנולוגיה מסייעת כתוצר לוואי של המחקר המימוש קשה יותר... – מיעוט משתמשים ( מחקר למען יחיד ?) – משתמשים עם צרכים ייחודיים ומגוונים ( אין משתמש " טיפוסי ") – מיעוט משאבים – קושי בהערכת התוצאות Evaluation

3. ISCOL 2008 מתוך שלא לשמה בא לשמה בחינת ביצועי המנתח המורפולוגי או שלמות ה - tagset ניבוי מילים בעברית

4. ISCOL 2008 מתוך שלא לשמה בא לשמה דקדוק ליצירת שפות טבעיות, – יצירה רב לשונית מערכת ליצירת משפטים בשפה טבעית מתוך קלט סמלים בלוחות תקשורת. ועוד ושלא לשמה מערכת ( למשל דיבור מסמלים ) שיועדה למטרות תת " ח יכולה לשמש גם בבית חולים ( למתאשפזים שאינם דוברים את השפה המקומית )

5. ISCOL 2008 תקשורת תומכת וחליפית ( תת " ח ) פרקטיקה ומחקר מגוון אמצעים חלופיים או כאלו התומכים בתקשורת מילולית לקויה ומאפשרים קיום תקשורת תפקודית לאנשים המתקשים בכך. ללא עזרים : שפת סימנים, ג ' סטות לוחות תקשורת ( בתמונות, איורים, סמלים, אותיות ומילים ), עזרים בעלי פלט קולי, מחשבים ועוד. במושג תת " ח נכללים גם מגוון עזרי נגישות : מגוון מתגים חיבורים והתקנים למתגים ולעזרים אחרים ממשקי הפעלה : מקלדות מיוחדות, תחליפי עכבר ועוד “Breathing is the only prerequisite that is relevant to communication”

6. ISCOL 2008 היבטים של התקן תקשורת אמצעי בחירה – ישירה או סריקה – טכנולוגיה ( עפעוף, תנועות עיניים / ראש, מתגים ) – סידור סמלים על מקלדת ( אופטימיזציה ), כמות סמלים, דינאמי / סטטי שפת הקלט – סמלים ברמות שקיפות שונות ( מאותיות, מילים, סמלים וצילומים ) אמצעי הפלט – פלט קולי : – דיגיטלי, אנלוגי – טקסטואלי – שותף לשיחה במערכות מבוססות - תוכנה : שיטת העיבוד

7. ISCOL 2008

8. קצב תקשורת הבעיה המרכזית : זמן תקשורת אדם ממוצע – 150-200 מילים לדקה משתמש תת " ח < 15 מילים לדקה המטרה העיקרית : האצת זמן יצירת ההודעה – ההִמרור trade-off הוא בין : – מהירות כוח הבעה עומס קוגנטיבי

9. ISCOL 2008 NLP-AAC בקהילת המחקר Workshop in ACL – Madrid 1997 Journal of Natural Language Engineering 4 (1). Special Issue on NLP for communication aids חיפוש באנתולוגיה של ACL http://aclweb.org/anthology- new/ :http://aclweb.org/anthology- new/ עשרות בודדות מאוד (20-30 כולל ה -workshop) לאורך ה " היסטוריה " ??? המטרה – Workshop in ACL – 2010 ( ארגון עם Kathy McCoy מ -Delaware ו -Annalu Waller מ -Dundee.)

10. ISCOL 2008 תחומי מחקר עיקריים תקשורת תומכת וחליפית : ניבוי מילים Word Prediction יצירת הודעות מרצף סמלים Message Generation פישוט טקסט Text Simplification מעבדי תמלילים לאנשים עם דיסלקציה דיבור מותאם, דיבור עם אינטנוציה Intonation נגישות - תוכנות הקראה לעוורים או למתקשים בקריאה.

11. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר

12. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר ט

13. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב

14. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה....

15. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה שרתם

16. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה שרת

17. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה שר

18. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה ש

19. ISCOL 2008 ניבוי מילים Word Prediction שלום ובוקר טוב, מה שלומכם

20. ISCOL 2008 ניבוי מילים Word prediction למה זה משמש ? –Non AAC: Translators [Hovy..], interactive machine translation, voice recognition –Hand-held Devices –Enhancing communication rate –People with Dyslexia שיטות מחקר ופיתוח : – מודל שפה – מתייגים ( חלקי דיבר ) – קולוקציות – ניתוח תחבירי – סמנטיקה –Word completion from Google et al.? עברית : [Netzer et al. 2008] - ???

21. ISCOL 2008 יצירת טקסט מקלט טלגרפי המורה אכלה אגס המורה אכל אגס המורה תאכל אגס מורה אכל את האגס * מורה אכל עם אגס * מורה אכלה באגס teacher to_eat pear

22. ISCOL 2008 יצירת הודעות הקלט : רצף של סמלים ( או מילים – טקסט טלגרפי ) הפלט : מבע בשפה טבעית מערכת " קלאסית " ליצירת טקסט מורכבת מ - – מתכנן התוכן –( מה לאמר ) NLP-AAC: אדם – מממש תחבירי ( איך לאמר : בחירה לקסיקלית, מימוש תחבירי ) דרכים לעיבוד : – תרגום –Bliss-to-English translation system [Waller & Jack 2002] – ניתוח ויצירה –BlissTalk [Hunnicutt 1986] –PVI [Valliant 1995] –COMPANSION [Mccoy 1997] –CoGeneration [Copestake 1997] –Bliss/Makaton to Greek [Karberis and Kouroupetroglou, 2002] – כתיבת סמנטית –[Netzer and Elhadad 2006]

23. ISCOL 2008 פישוט טקסט Text simplification Keith Johnson is the Makah Tribe Spokesman, and he comments, ”We made history today”. Keith Johnson is the Makah Tribe Spokesman. He said, ”We made history today” [Sarah E. Petersen and Mari Ostendorf. Text Simplification for Language Learners: A Corpus Analysis. Speech and Language Technology for Education (SLaTE) 2007.]

24. ISCOL 2008 פישוט טקסט למה משמש ? – ניתוח תחבירי : הפחתת רב - משמעות מבנית – איכות תרגום אוטומטי – אחזור מידע : אחזור חלקי משפטים רלוונטיים – תמצות אוטומטי –Text entailment –"Simplified language" לבניית מדריכים – טקסט קריא לבעלי לקויות או לאנשים עם אפזיה. מחקר : –FSG –Dependency grammars –Analysis and re-generation עברית ?

25. ISCOL 2008 ב - Dundee אשר בסקוטלנד עושים דברים מעניינים יצירת משחקי מילים ( puns ) בצורה אוטומטית להגברת המודעות האוריינית של ילדים עם צרכי תקשורת מורכבים. – שימוש בתבניות (What do you call a ______ _____) –What do you call a frog road? A main toad. – שימוש ב -WordNet ובמילונים פונטים לזיהוי יחסי קרבה / הפכים [O’Mara,D., Waller, A., Manurung, R., Ritchie, G., Pain, H., Black, R. (2006) ] Development of a phonic based speech synthesiser for children with complex communication needs

26. ISCOL 2008 סמלי בליס –- שפת תקשורת

27. ISCOL 2008 סמלי בליס - מצביעים ו - indicators

28. ISCOL 2008

31. ייצוג סמלים ייצוג מפורש של המבנה הפנימי של סמלי בליס נותן לנו מידע על הקשרים הסמנטיים בין המושגים שהסמלים מייצגים. דוגמא : לקסיקון בליס מקוון ( עם יואב גולדברג ) בסיס נתונים המכיל את כל הסמלים כל שדה מכיל מידע על הרכיבים ואפיים : –Atom –Superimposed symbol –Sequence of symbols

32. ISCOL 2008 לקסיקון בליס דוגמא המשך מחקר : – מימוש לוח דינאמי – הטייה מורפולוגית על פי ה - indicator. – שחזור משמעות הסמל מתוך רכיביו –" המלצות " לסמלים חדשים

33. ISCOL 2008 סיכום ל - NLP ול - AAC הרבה מן המשותף – יצירה / הבנה של שפה לקסיקונים שינויים " קטנים " בייעוד יכולים לשמש ולסייע לצרכים מיוחדים תחום מעניין, מגוון ומתגמל " מִקְצֵה שָׁלֹשׁ שָׁנִים תּוֹצִיא אֶת כָּל מַעְשַׂר תְּבוּאָתְךָ בַּשָּׁנָה הַהִיא וְהִנַּחְתָּ בִּשְׁעָרֶיךָ "

34. ISCOL 2008 תודה Thank you