Правилно конфигуриране на файла robots.txt и sitemap.xml ще се избегнат всякакви проблеми, произтичащи от индексация.
§ 1. файла robots.txt
robots.txt - това е един обикновен файл, който трябва да бъде в основата на вашия сайт, където има валидна и Htaccess и този файл разказва търсачката паяци как да индексира вашия проект, какви страници не са си струва да се обръща внимание на, и която да обърне особено внимание
Този файл съдържа инструкции, предназначени за ботовете на търсачките. Той винаги е поставен в основната директория, така че за индексиране страници ботове ще го четат с условията, изложени в robots.txt.
Помислете за предимствата на robots.txt, която той дава на ресурсите.
robots.txt инструкции файлове са:
- да се направи пренасочване към друга страница на грешка 404;
- показва местоположението на картата на сайта;
- да посочи времето за зареждане на страници за индексиране.
1.1. Създаване на robots.txt
Какво трябва да се регистрирате в досието?
Не забравяйте да използвате две директиви: User-Agent и Disallow.
Избройте имената на ботове най-популярните търсачки:
1.2. Проверете файла robots.txt и мета тагове
Някои уебмастъри Не индекс на сайта изцяло или частично, и каквото и да правиш, не го правят роботи индекс на сайта. Причината за всичко може да бъде файла robots.txt. Може би направих грешка и това не е направено правилно. Проверете файла robots.txt, за каквито и да било грешки в нея (например линия Disallow: / затваря сайта индексирането изцяло или Disallow: / новини / се затваря за индексиране новини раздел.) Или затворен важни директории. Ако сте затворили указателя, за да бъдат индексирани, а след това да го отворите.
Пример за правилното файла robots.txt на този сайт.
По-добре да се уточни инструкции за всяка търсачка, която представлява интерес за Вас лично, както и да се уточни инструкциите за всички други търсачки.
User-Agen тона - показва на търсачката, за което писмено изявление.
Позволете - позволява индексирането.
Забрани - забранява индексиране.
Водещ - показва основен домакин.
Карта на сайта - показва търсачката на картата на XML сайт.
Друг сайт не може да бъде индексиран заради мета маркера <Мета име = "роботи" съдържание = "Noindex">до Google и
Въз основа на горните данни може да се покаже пълните-роботи файл.
След като вече знаете основните точки на контакт на демонтирания файл, вие ще бъдете в състояние да управлява индексирането на вашия сайт: забрани и да отвори до желаните индексиране на файлове, папки и страници.
§ 2. sitemap.xml на файла
Карта на сайта на файла - файл с информация за страниците, за да се индексира. Със файл sitemap.xml уебмастъри да информират търсачките за страниците, които са достъпни за индексиране.
Основни изисквания към досието на сайта:
- Файлът трябва да се намира на същия домейн като сайта, за който тя е направена.
- При достъп до сървъра на файла трябва да извежда код на HTTP-статус 200 OK.
- Файлът може да съдържа не повече от 50 000 на URL и размера му в некомпресиран вид не трябва да превишава 10 MB. Ако вашата карта на сайта не отговаря на тези изисквания, счупи го в няколко файла и да ги посочите в индекса на сайта файл.
- Файлът трябва да използва UTF-8 кодиране.
- Файлът може да се опише само на страниците на домейна, на който се намира.
Карта за създаването на сайта за вашия сайт по няколко начина:
Използването на плъгини и онлайн генератори, както и което го прави ръчно.
За информация как да се направи това, генератор карта (карта на сайта генератор), за да се използва и как да добавите карта за търсачките Yandex и Google, ще научите от тази статия.
2.1 Карта на сайта sitemap.html (за посетители)
Карта на сайта (за посетители) - форма на допълнителен навигация. С него, потребителят може да се придвижват в сайта, без да използвате за навигация на сайта.
При създаване на карта на сайта за посетителите да обърнат внимание на важни точки:
1. Местоположение на видно място. Картата трябва да бъде там, където тя ще бъде непосредствено очевидни (например, в основния сайт или блог менюто).
2. Правилната структура и формат. Качествена карта на сайта трябва да съдържа заглавия, подзаглавия и други елементи на форматиране. Това прави информацията по-разбираеми, посетителите ще бъдат по-лесни за намиране на материалите, които ги интересуват.
2.1.1. Търсене в този сайт чрез Yandex
- С настройките Yandex за търсене Сортиране по всеки, който не разбира нищо от HTML и PHP програмни езици и не са запознати с CSS.
- Резултати от търсенето Yandex по-добре от стандартните резултатите от търсенето. Те са получили най-подходящата дума или изречение. Посетителите задържат така сайта си малко по-дълго, дори ако те не намират подходящи абсолютен отговор на въпроса;
2.2 Карта на сайта sitemap.xml (за търсачките)
Ограничения и
Търсачките са от полза за сайтовете, които имат карта sitemap.xml. Факт е, че ако има такива търсачките роботи индекс на страниците на сайта си по-добре и по-бързо (намалява вероятността, че всяка страница, която случайно е пропуснато). Очевидно е, че картата на сайта спомага за по-бързото нарастване на трафика на сайта. Въпреки това, търсачките са поставени на картата saytaSitemap.xml определени ограничения.
Карта на сайта файл трябва да съдържа не повече от 50 хил. Връзки и да бъдат по-големи от 10MB (използване архивиране е позволено да се намали размера на файла).
Какво да правим, ако вашият сайт е толкова голяма, че сайта надхвърля предполагаемите стойности. В този случай, се процедира, както следва:
2. създаване на няколко сайта карти (например, основни, съдържащи линкове към всички останали карти, както и някои малки).
И дори, ако са изпълнени следните изисквания, няма гаранция, че търсачките ще следват файл sitemap.xml за индексиране.
2.3. Онлайн генератори Карта на сайта карта на сайта
Онлайн генератори (генератор на сайта) ви позволяват да се създаде карта на сайта в отделен файл. Когато добавяте нови страници (или когато премахнете старите) трябва да се генерира карта на сайта с помощта на генератор и след това го добавите към вашия сайт.
Прост и лесен за използване карта на сайта генератор, който има някои сериозни недостатъци:
- броят на връзките в картата не може да бъде повече от 500;
- няма начин да се определи честота на опресняване за отделни групи страници;
Отидете на сайта на генератора тук. Вие ще видите форма за попълване.
2. Изберете "за" честотата на опресняване на сайта.
3. Настройте датата на страниците за актуализация на сайта (Нула - да не се използва; отговор Използване на сървъра - да се определи автоматично; Използвайте тази дата / час - за да използвате текущата дата и час).
4. Конфигуриране на приоритет на страниците за търсачките (няма - да не се използва; изчислява автоматично Приоритет - изчислява автоматично).
«Начало» бутон - стартиране на генератора.
След известно време, ще се формира на картата. Ще се отвори страница, където връзката можете да изтеглите карта sitemap.xml и да го добавите в главната директория (обикновено една папка - «public_html»).
Пътят към картата можете да се регистрирате в файла robots.txt със следното твърдение:
1. На първо място, отидете на mysitemapgenerator.com уебсайт Тази услуга дава възможност за генериране на свободен XML карта на сайта до 500 страници. Повече от достатъчно.
2. След това в "Създаване на карта на сайта безплатно" клик "създаде".
.jpg "Уеб майстор и настройката (елементи от потребителския интерфейс)")
4. Въведете номера и натиснете бутона старт.
.jpg "Уеб майстор и настройката (създаването на уебсайт от нулата сами по себе си)")
5. След като сканирането завърши, кликнете на линка "Изтегли Карта на сайта".
.jpg "Уеб майстор и настройката (HTML шаблони)")
6. След това изтеглете завършен Карта на сайта.
2.4. Как да добавите карта на сайта за търсачките
За да добавите сайта към вашия сайт, трябва да се правят следните стъпки:
1. За да се свържете със сървъра се нуждаят от FTP-клиент. се използва Пример FileZilla. Отворете програмата и направи необходимите идентификационни данни за свързване към FTP сървър:
Тази информация може да бъде получена от доставчика на хостинг.
1. Отидете в основната папка на вашия сайт (папката, където са всички ресурсни файлове) и да добавите към вашия sitemap.xml. Това може да стане с двойно кликване, или просто да се използва за прехвърляне на файлове в близкия прозорец. По въпроса за подмяна на съществуващия файл, изберете Замяна.
2.5. Добавяне на карта на сайта в Yandex
За да съобщите за паяк Yandex присъствието на sitemap.xml файл на вашия сайт, там са две от най-ефективните начини за:
1. Добавяне на карта на сайта, чрез robots.txt. За да направите това, трябва да се направи промяна в този файл, добавяне на директивата:
2.Add карта на сайта чрез Yandex.Webmaster. За този метод трябва да бъде потвърдена от правото на управление на сайта.
Отиди на уебмастера на панела Yandex. отидете в правилната сайта и в "Конфигуриране на индексиране страница", изберете "на сайта на файлове".
За най-бързото постигане на ефект се препоръчва да се изпълнява и двете действия.
2.6. Добавяне на карта на сайта, за да Google
За да направите е, както следва, отидете "Scan" тласък "на сайта на файлове":
в горния десен ъгъл кликнете върху червения бутон "Add / Карта на сайта Проверка на файл". В отворения прозорец влезем sitemap.xml. И тогава, преди да изпратите вашия блог карта, по-добре е да се провери за грешки, така че ние натиснете бутона Проверете я:
След това можете да добавите XML файл с карти на сайтове за индексиране от Google. И вие просто ще трябва да изчака известно време, докато всички от вашите статии ще индексира:
Сега, скъпи приятели, както и на целия процес. И аз съм в това, с което казвате сбогом, а не за дълго. Аз много се надявам, че ръководството ще бъде полезна за вас. Успех и всичко най-добро.
Свързани статии