Nästan varje webbansvarig försöker optimera sidorna på sin webbplats på ett sådant sätt att få så många indexerade element som möjligt. Men i vissa fall, tvärtom, måste du dölja vissa sidor, till exempel ett formulär för att ange registreringsdata, återställa lösenord etc.
Det är nödvändigt
Redigera filen Robots.txt
Instruktioner
Steg 1
Det enklaste sättet att stänga indexeringen av flera sektioner eller en specifik hel webbplats är att göra lämpliga poster i robots.txt-filen. Han används som en guide för sökmotorer. När du går in på sidorna på webbplatsen hänvisar sökroboten till den här filen, om den inte finns där indexerar den hela webbplatsen, annars följer den rekommendationerna som anges i den här filen.
Steg 2
Om du själv skapade din webbplats och du inte har en sådan ansökan i form av ett textdokument som anger förbuden är det enkelt att skapa den själv. Öppna ett nytt textdokument, till exempel med hjälp av programmet Anteckningar. Placera följande rader i dokumentets kropp: User-agent: * Disallow: /file.htmlDisallow: / directory /
Steg 3
Låt oss nu ta reda på vad du frågade sökmotorn som en uppgift. Tecknet "*" mittemot User-agent betyder att denna instruktion måste utföras av absolut alla filsystem. Om du till exempel skriver "Yandex" istället för "*" läses detta överklagande bara av roboten från Yandex-sökmotorn. Tillåt uttalanden förbjuder indexering av en viss sektion (katalog) eller fil (.html-fil).
Steg 4
Efter att ha sammanställt robots.txt-filen kan du gå direkt till texterna på webbplatsens sidor. Som du vet gillar sökmotorer inte att ha mer än 3 externa aktiva länkar på dina sidor. Vad händer om du behöver näsblod men postar 5 eller fler länkar. I dessa fall kan du använda ett attribut eller en tagg.
Steg 5
För att stänga länkar från indexering av Googles sökmotor måste du ta länken i följande form: ankarlänkar. Attributets kropp måste sättas in i någon del av länken, utan att glömma att separera den med ett mellanslag, d.v.s. attributet kan placeras mellan "a" och "href" eller mellan länken och dess ankare.
Steg 6
För att stänga länkar från indexering av Yandex-sökmotorn måste du ta länken till följande form: ankarlänk. Taggen placeras i början och i slutet av länken. Glöm inte att den här taggen är ihopkopplad: den andra delen kommer, till skillnad från den första, med ett "/" -tecken.
