ChatGPT ממציא מקורות: למה זה קורה, כמה זה נפוץ, ואיך בודקים שמקור באמת קיים
למה ChatGPT וצ'אטים אחרים ממציאים מאמרים והפניות שנראים אמיתיים, מה המחקר מצא על שיעור ההפניות המומצאות, ארבעת סוגי הטעויות, וצ'קליסט של חמש דקות לאימות כל מקור לפני שהוא נכנס לעבודה.
חלק מהסדרה: בינה מלאכותית בכתיבה אקדמית: המדריך המלא לשימוש נכון ב-ChatGPT בעבודה סמינריונית ובתזה
הסטודנט מבקש מ-ChatGPT "חמישה מאמרים על חרדת מבחנים", ומקבל רשימה מושלמת: מחברים אמיתיים בתחום, כתבי עת אמיתיים, שנים סבירות, אפילו DOI. רק שחלק מהמאמרים לא קיימים. זו הטעות שהכי מהר הופכת עבודה טובה לתיק משמעת - ואחת הקלות ביותר למנוע.
למה זה קורה?
מודל שפה לא "מחפש" מאמרים - הוא מנבא את הטקסט הסביר הבא. הוא ראה מיליוני הפניות, ולכן הוא יודע איך הפניה נראית: שם של חוקר מוכר בתחום, כותרת בסגנון הנכון, כתב עת מתאים. התוצאה היא הפניה שנראית אמינה לגמרי - אבל נבנתה מחלקים, לא נשלפה ממאגר.
כמה זה נפוץ?
במחקר שפורסם ב-Scientific Reports, החוקרים ביקשו מ-ChatGPT לכתוב סקירות ספרות קצרות ב-42 נושאים, ובדקו 636 הפניות. 55% מההפניות של GPT-3.5 ו-18% מאלה של GPT-4 היו מומצאות לגמרי. וגם בין ההפניות האמיתיות, 43% (GPT-3.5) ו-24% (GPT-4) כללו טעויות מהותיות - שנה, כתב עת, עמודים או מחברים שגויים (Walters & Wilder, 2023).
מודלים חדשים טובים יותר, וכלים עם חיפוש ברשת טועים פחות - אבל אף מחקר לא מצא שיעור אפס. ואת זה מספיק מקור אחד כדי לשבור.
ארבעה סוגי טעויות - מהבולטת למסוכנת
- מאמר שלא קיים בכלל - הכי קל לתפוס: חיפוש אחד.
- מאמר אמיתי, פרטים שגויים - שנה, כתב עת או DOI לא נכונים. נראה כמו רשלנות ב-APA.
- מחבר אמיתי, מאמר שלו לא קיים - קשה יותר: החוקר באמת עוסק בנושא.
- מאמר אמיתי - אבל הטענה לא נמצאת בו. הכי מסוכן, וקורה גם בכלים מבוססי מאגר: המאמר קיים, אבל לא אומר את מה שה-AI ייחס לו. רק קריאה תופסת את זה.
צ'קליסט אימות: חמש דקות לכל מקור
- חפשו את הכותרת המדויקת במירכאות ב-Google Scholar או בקטלוג הספרייה. אין תוצאה? כנראה שהמקור לא קיים.
- בדקו את ה-DOI: הדביקו אותו ב-doi.org. הוא מוביל לאותו מאמר, עם אותם מחברים ואותה כותרת?
- השוו את הפרטים: שנה, כתב עת, כרך, עמודים - מול דף המאמר באתר כתב העת.
- קראו לפחות את התקציר - ואם הטענה מרכזית בעבודה, את החלק הרלוונטי. האם המאמר אומר את מה שאתם כותבים בשמו?
- הכניסו לרשימה רק מה שעבר את כל הבדיקות, ורק מתוך המאמר עצמו - לא מתוך הטקסט של ה-AI.
איך משתמשים ב-AI בלי ליפול
- בקשו מילות חיפוש, לא מקורות: "אילו מונחים באנגלית כדאי לחפש על הנושא?" - ואז חפשו בעצמכם.
- השתמשו בכלים מבוססי מאגר (Semantic Scholar, Elicit, Consensus) - המאמרים בהם קיימים. ראו כלי AI למחקר אקדמי.
- עבדו על מאמרים שבחרתם: העלו אותם לכלי כמו NotebookLM, ושאלו רק עליהם.
- אל תעתיקו הפניה מצ'אט - ייצאו אותה מ-Google Scholar או מ-Zotero, ובדקו מול תבניות APA.
כבר הגשתם טיוטה עם מקורות מ-ChatGPT?
עברו עכשיו על כל הרשימה עם הצ'קליסט. מקור שלא נמצא - מוציאים, ומחליפים במקור אמיתי שאומר דבר דומה (או מוחקים את הטענה). אם הטיוטה כבר אצל המנחה - עדיף לפנות ראשונים ולהגיד שמצאתם טעויות ותיקנתם, מאשר שיגלו את זה בשבילכם.
שאלות נפוצות
האם ChatGPT ממציא מקורות? כן, עדיין - פחות מבעבר, אבל לא אפס. כל הפניה שמגיעה מצ'אט חייבת אימות.
איך בודקים אם מאמר קיים? חיפוש הכותרת המדויקת ב-Google Scholar, ובדיקת ה-DOI ב-doi.org. אם שניהם לא מובילים לאותו מאמר - הוא כנראה לא קיים.
האם גם Elicit ו-Consensus טועים? המאמרים בהם אמיתיים, אבל הסיכום או החילוץ יכולים לייחס למאמר משהו שלא כתוב בו. קראו את המקור לפני שמצטטים.
מה קורה אם מגישים מקור מומצא? במרבית המוסדות זה נחשב לפגיעה ביושרה אקדמית, גם אם לא הייתה כוונה - בבר-אילן, למשל, הסטודנט אחראי במפורש גם לשגיאות שמקורן ב-AI.
רוצים שמישהו יעבור על רשימת המקורות? אנחנו מאמתים כל מקור - קיום, פרטים, ושהוא אכן אומר את מה שמיוחס לו - ומתאימים ל-APA. קבלו הצעת מחיר. ולמדריך המלא על עבודה נכונה עם AI: בינה מלאכותית בכתיבה אקדמית.
מקור
- Walters, W. H., & Wilder, E. I. (2023). Fabrication and errors in the bibliographic citations generated by ChatGPT. Scientific Reports, 13, Article 14045. https://doi.org/10.1038/s41598-023-41032-5
ספרו לנו מה צריך, ונחזור עם מומחה באיתור מקורות וסקירת ספרות והצעת מחיר.
עודכן לאחרונה: