Գրեթե յուրաքանչյուր վեբ-վարպետ փորձում է օպտիմալացնել իր կայքի էջերը այնպես, որ հնարավորինս շատ ինդեքսավորված տարրեր ստանա: Բայց որոշ դեպքերում, ընդհակառակը, անհրաժեշտ է թաքցնել որոշ էջեր, օրինակ `գրանցման տվյալների մուտքագրման, գաղտնաբառերը վերականգնելու ձև և այլն:

Դա անհրաժեշտ է
Robots.txt ֆայլի խմբագրում:
Հրահանգներ
Քայլ 1
Մի քանի բաժինների կամ հատուկ ամբողջ կայքի ինդեքսավորումը փակելու ամենադյուրին ճանապարհը robots.txt ֆայլում համապատասխան գրառումներ կատարելն է: Նա օգտագործվում է որպես որոնիչների որոնում: Կայքի էջերը մուտք գործելիս որոնման ռոբոտը վերաբերում է այս ֆայլին, եթե այն այնտեղ չէ, այն ինդեքսավորում է ամբողջ կայքը, հակառակ դեպքում այն հետևում է այս ֆայլում նշված առաջարկություններին:
Քայլ 2
Եթե դուք ինքներդ եք ստեղծել ձեր կայքը, և չունեք նման ծրագիր, արգելքները մատնանշող տեքստային փաստաթղթի տեսքով, հեշտ է այն ստեղծել ինքներդ: Բացեք նոր տեքստային փաստաթուղթ, օրինակ, օգտագործելով Notepad ծրագիրը: Փաստաթղթի մարմնում տեղադրեք հետևյալ տողերը. Օգտագործող գործակալ. * Արգելել ՝ /file.htmlDisallow: / գրացուցակ /
Քայլ 3
Հիմա եկեք հասկանանք, թե ինչ եք խնդրել որոնիչին որպես առաջադրանք: Օգտագործող գործակալին հակառակ «*» նշանը նշանակում է, որ այս հրահանգը պետք է կատարվի բացարձակապես բոլոր ֆայլային համակարգերի կողմից: Օրինակ, եթե «*» - ի փոխարեն գրեք «Yandex», այս բողոքարկումը կկարդա միայն Yandex որոնման համակարգի ռոբոտը: Թույլ չտալ հայտարարություններն արգելում են որոշակի բաժնի (գրացուցակի) կամ ֆայլի (.html ֆայլ) ինդեքսավորումը:
Քայլ 4
Robots.txt ֆայլը կազմելուց հետո կարող եք ուղղակիորեն անցնել կայքի էջերի տեքստերին: Ինչպես գիտեք, որոնիչները չեն սիրում ձեր էջերում ունենալ ավելի քան 3 արտաքին ակտիվ հղումներ: Ինչ անել, եթե ձեզ պետք է քթից արյունահոսություն, բայց տեղադրեք 5 կամ ավելի հղումներ: Այս դեպքերում կարող եք օգտագործել հատկանիշ կամ պիտակ:
Քայլ 5
Google որոնիչի կողմից ինդեքսավորումից հղումները փակելու համար հարկավոր է հղումը բերել հետևյալ ձևով. Խարիսխի հղումներ: Հատկանիշի մարմինը պետք է տեղադրվի հղման ցանկացած մասի մեջ ՝ չմոռանալով առանձնացնել այն տարածությամբ, այսինքն. հատկանիշը կարող է դրվել «ա» -ի և «href» - ի կամ հղման և դրա խարիսխի միջև:
Քայլ 6
Yandex որոնման համակարգի կողմից ինդեքսավորումից հղումները փակելու համար հարկավոր է հղումը բերել հետևյալ ձևով. Խարիսխի հղում: Պիտակը տեղադրվում է հղման սկզբում և վերջում: Մի մոռացեք, որ այս հատկորոշիչը զուգակցված է. Երկրորդ մասը, ի տարբերություն առաջինի, գալիս է «/» նշանով: