llms.txt: מה זה, למי זה עוזר, ואיך כותבים אחד לאתר עברי
מה זה llms.txt? llms.txt הוא קובץ טקסט בשורש האתר שמסכם למודלי שפה מה יש באתר: מי העסק, מה ההגדרות החשובות, ואילו עמודים מרכזיים. ההצעה פורסמה בספטמבר 2024 על ידי Jeremy Howard מ-Answer.AI. זה לא תקן רשמי, ואין מנוע גדול שהתחייב להשתמש בו, אבל הוא זול להכנה ולא מזיק.
למה בכלל צריך קובץ כזה?
מודלי שפה שקוראים אתר בזמן אמת מקבלים HTML עם תפריטים, באנרים וסקריפטים. קובץ טקסט נקי, עם הגדרות ועמודים מרכזיים, מאפשר להבין את האתר בבקשה אחת.
יש גם גרסה מורחבת, llms-full.txt, שמכילה את הטקסט המלא של התוכן החשוב.
מה כותבים ב-llms.txt?
- כותרת עם שם העסק, ומשפט אחד שמתאר מה הוא עושה.
- פסקה קצרה: למי השירות, איפה, ומה מבדיל אותו.
- רשימת עמודים מרכזיים, כל אחד עם קישור ושורת תיאור.
- הגדרות קצרות למונחים שחשוב שיובנו נכון.
- תאריך עדכון.
האם זה באמת משפיע?
בכנות: אין היום הוכחה שמנועים גדולים משתמשים בקובץ כדי לבחור מה לצטט. יש כלים וסוכנים שקוראים אותו, והרבה אתרי תיעוד טכני כבר מפרסמים אחד.
ההמלצה שלנו: לעשות פעם אחת, לעדכן כשמוסיפים עמודים חשובים, ולא להשקיע בזה יותר מחצי שעה. התוכן באתר עצמו חשוב פי כמה.
דגשים לאתר בעברית
- כתבו את הקובץ בעברית, באותם מונחים שמופיעים באתר.
- הוסיפו את השם הלועזי של העסק אם יש, כדי שמנוע שמחפש באנגלית יחבר בין השמות.
- שמרו את הקובץ בקידוד UTF-8, אחרת העברית תגיע כג׳יבריש.
שאלות נפוצות
איפה שמים את הקובץ?
בשורש האתר, בכתובת /llms.txt, כמו robots.txt.
האם llms.txt מחליף את robots.txt?
לא. robots.txt קובע מי מורשה לסרוק. llms.txt רק מסכם את התוכן.
האם יש לכם דוגמה?
כן: ranknroll.co.il/llms.txt ו-ranknroll.co.il/llms-full.txt.