.רתאל סנכהל טובורמ עונמל דציכ

ורצי ,םייטמוטואה שופיחה יעונמ תוחתפתהו תשרה לש הכרד תישארב םירתא ורצי ןכ .םימיוסמ םירתאב םיגאבו תויעב םינוש םיטובור וקרסש םיטובור רובע (לשמל תויפוסניא תואלול) תולקת םימיוסמ .םתוא

וריכי ותואו םירתאה ינוב ושמתשי וב דיחא ןקת רוציל טלחוה ןכל .רתאל םיסנכנה םיטובורב הטילש םשל םיטובורה יחתפמ

:הז ךמסמב םיירקיעה םיאשונה

.המדקה

.הטישה

.טמרופה

.אמגודל דוק

םירצוי תויוכז י"ע ןגומ וניא ,ירוביצ וניה הז ףדב גצומה רמוחה יכ שיגדהל שי לכ יכ חיטבהל ןתינ אלו ,והשלכ ףוג י"ע הבוגמה ימשר רמוח וניא ,ןהשלכ .וב ובשחתי םיידיתעהו םימייקה םיטובורה

בור ןיב 1994 ינויל 30-ב הגשוהש הנבה לע ססובמ הז ףדב גצויש רמוחה .םיטובורב ןיינע ילעב ויהש תשרה ישמתשמ תייליהק ןיבל םיטובורה יתנכתמ

.www-talk@info.cern.ch : תבותכב טנרטניאה םלועב ןוידל חותפ אשונה

תליהקל םיטובורה יחתפמ בור םיעיצמ ותוא ילככ הז רמוחב בשחתהל שי .םייוצר אל םיטובור י"ע השיגמ wwwה יתרש לע ןגהל נ"מע םישמתשמה

:המדקה

םירתאב תורבועה תונכות םה (םילחוז וא םישיבכע םג םיארקנה) www יטובור לש סקדניאל הלא םירתא לש גולטק םיריזחמו ,(יביסרוקר) יתגיסנ ןפואב תשרב .שופיחה עונמ

םניא םה םהב www ירתאב ורקיב םיטובור םהב םירקמ ויה 1994 בו 1993 ב ופיצה םימיוסמ םיטובור - ךכל ומרג טובורה תונוכת ,םיתעל .תוביס המכמ םייוצר םירתא םתואב ורבעש וא ,רתויב ריהמ בצקב תונשנו תורזוח תושירדב םיתרש םיצע ומכ םימיאתמ םניאש תומוקמב ורקיב םיטובורה םירחא םירקמב .בושו בוש .יאול תועפות תריצי ךות ,CGI יבתכו ,םיינמז םיצבק ,דואמ םיקומע םיילאוטריו

וליאל םיטובורל ועיבציש םינונגנמ תעמטהב ךרוצה לע ועיבצה ולא תוירקת . www ה יתרשב השיגה הרוסא תומוקמ

:הטישה

איה תרשב םייוצר אל םירוזאל טובורה תסינכ תעינמל םישמתשמ הב הטישה תויהל תבייח הז ץבוקל .רקבמה טובורל השיגה תוינידמ תא טרפמה ץבוק תפסוה ףיעסב טרופמ הז ץבוק ןכות . "/robots.txt" תימוקמה תבותכב http ךרד השיג .טמרופה

לוכי טובורהו ,םייק www תרש לכב תולקב המשייל ןתינש ןוויכמ הצמוא וז הטיש .דבלב תרשל תחא הסינכב השיגה תוינידמ תא אוצמל

.הזכ ץבוקב טולשל לוכי תרשה להנמ קרש ךכב אוה וז הטיש לש ןורסחה

:תוביס המכמ הרחבנ תבותכה תריחב

הלעפהה תוכרעמ לכב תומייקה תולבגהל םיאתהל ךירצ ץבוקה םש .תומייקה

.תרשה לש תפסונ המאתה שורדת אל ץבוקה תמויס

.תולקב ומש תא רוכזל לכונשו ,ותרטמ לע זומרל ךירצ ץבוקה םש

.תילמינימ תויהל הכירצ םימייק םיצבק םע שגנתי הז םשש תוריבסה

:טמרופה

:ןמקלדכ אוה "/robots.txt" ץבוקה לש טמרופה

הרוש י"ע תוחפל תודרפומ תומושר יתש לכו ,תחא המושר תוחפל ליכמ ץבוקה .(carriege return, carriege return/null, null י"ע תונמוסמה) תחא הקיר

:הרוצהמ תורוש הליכמ המושר לכ

אוה הדשה םש ."<field>:<optionalspace><value><optionalspace>" .case sensitive

,טובורה י"ע תוכלשומ הרעה קר שי ןהבש תורוש . '#' ןמיסה י"ע םינמסמ הרעה .תומושר ןיב לובג תווהמ ןניא ןכלו ,הקיר הרושכ תובשחנ ןניא ןכלו

תרוש תוחפל הירחאו ,תחא user-agent תרוש תוחפל םע הליחתמ המושרה .תוהוזמ ןניאש תורחא תורתוכמ םלעתמ טובורה .תחא (Disallow) הייחד

:User-agent

.הסינכה תוינידמ תנווכמ וילאש טובורה םש אוה הז הדש ךרע

רתויל ההז השיג תראתמ המושרה זא עיפומ דחא User-agent הדשמ רתוי םא .המושר לכ רובע דחא הדש תוחפל שרדנ .דחא טובורמ

אלל טובורה םשב שמתשהל ץלמומ .הז הדשל השיגב ינלבוס תויהל שרדנ טובורה .case sensitive ב בותכ (הסריג ןוגכ) תפסונ היצמרופניא

טובור לכ רובע השיגל לדחמה תרירב תא תראתמ המושרה יזא '*' אוה ךרעה םא רתויב שמתשהל ןיא .ץבוקב תורחאה תומושרב ומשב שרופמב עיפומ וניאש .וזכ תחא המושרמ

:Disallow

ביתנ תויהל לוכי הז הדש .הב רקבל ןיאש תיקלח תבותכ ןייצמ הז הדש ךרע .הב רקבי אל טובורה - הז ךרעב הליחתמש תבותכ לכ .יקלח וא אלמ (path)

בו /help.html ב רוקיב לע רסוא Disallow: /help :אמגודל ל השיג ענמי Disallow: /help/ רשאכ ,/help/index.html . /help.html ל השיג ריתי ךא ,/help/index.html

הדש תוחפל שרדנ .תרשב תובותכה לכל השיג תמייקש ךכ לע עיבצמ קיר ךרע לכ .המושר לכב דחא הייחד

לכ רמולכ ,םייק וניא וליאכ בשחי אוה יזא קיר "/robots.txt" ץבוק םייק םא .םייוצרכ םמצע וארי םיטובורה

:אמגודל דוק

םירקבמה םיטובורה לכ לע רוסאתש אמגוד הארנ אבה "/robots.txt"ה ץבוקב : "tmp" ב וא "/~webhum/honors/" ב תוליחתמה תובותכל סנכהל

# robots.txt for http://www.haifa.ac.il/

User-agent: *

Disallow: /~webhum/honors/ #this is an infinite virtual URL space

Disallow: /tmp/ # these will soon disappear

ל סנכהל םיטובורה לכ לע תרסוא "/robots.txt" ץבוק לש האבה אמגודה ."cybermapper" ארקנה טובורה טעמל "/cyberworld/map/"

# robots.txt for http://www.haifa.ac.il/

User-agent: *

Disallow: /cyberworld/map/ # this is an infinite virtual URL space

# Cyberworld knows where to go

User-agent: cybermapper

Disallow:

:ךליאו הז םוקממ תובותכה לכל סנכהל טובור לכ לע תרסוא האבה אמגודה

# go away

User-agent: *

Disallow: /