Как да видите сайт, е интересна за вас
В интернет всеки ден има готови решения за даден проблем. Няма пари за дизайнер? Използвайте един от хилядите безплатни шаблони. Вие не искате да се наеме специалист SEO? Използвайте услугите на добре познатата безплатна услуга, прочетете няколко самите статии.
Той отдавна е необходимо да се напише от нулата и същ robots.txt. Между другото, е специален файл, който е на почти всеки сайт, а той съдържа инструкции за роботи за търсене. Командният синтаксис е много проста, но това ще отнеме още време, за да изготви свой собствен файл. По-добре е да се търси на друго място. Има няколко възражения:
Сайтът трябва да бъде на същия двигател като това на твоя. В действителност, днес в интернет един куп услуги, където можете да научите от името на системата почти всяка уеб собственост.
Тя трябва да бъде повече или по-малко успешен уеб сайт, който е наред с трафика при търсене. Това показва, че robots.txt се прави обикновено.
По принцип, дори и един човек не е особено запознат с кода, за да се разбере бързо, което е написано тук. позволи команда позволява нещо да се индексират и забраняване - забранява. Потребителят-агент - е показател за роботите, които се превърнаха инструкции. Това е необходимо, ако искате да зададете команди за определена търсачка.
Какво да правя след това?
Копирайте всичко, промяна на сайта. Как да се промени? Споменах ли, че двигателите трябва да съвпадат, или да променят нещо безсмислено - необходимо е да се пренапише всичко.
Така че, ще трябва да мине през редовете и да определи кои части от по-горе са налични на вашия сайт, и какво - не. В горната екранна можете да видите пример за мястото на robots.txt WordPress, и в отделна директория има форум. Изводът? Ако не разполагате с форум, всичко, което трябва да се отстранят тези редове, тъй като тези секции и страници, които просто не съществуват, тогава защо да ги затворят?
Най-простият robots.txt може да изглежда така:
Всички вие вероятно знаете стандартната структура на папката, в WordPress, ако най-малко 1 пъти инсталирания двигател. Тази папка WP-администратор, WP-съдържание и WP-включва. Обикновено всички 3 затворен от индексация, тъй като те съдържат чисто технически файлове, необходими за работата на двигателя, плъгини и шаблони.
Directory качени отварят, защото съдържа снимки и тяхното obyno индекс.
Важно ли е robots.txt настройките?
Разбира се, трябва да имате този файл, и най-малко основните директории са затворени през него. Но решаващо значение, ако това е важно да съставянето му? Както показва практиката, не. Аз лично виждам сайтовете в някои двигатели с напълно различна robots.txt, които са еднакво бележат напредък в търсачките.
Аз не споря, че можете да направите някаква грешка. Така например, в близост или да напуснат отвори каталога на изображението ненужно, но нещо супер лошо ще се случи. Първо, защото търсачките днес са по-умни и да игнорирате индикации от файла. На второ място, написани стотици статии за това как да конфигурирате robots.txt и със сигурност нещо, което може да бъде разбран от тях.
Аз съм виждал на файлове, които са били 6-7 линии, забраняващи индексиране няколко директории. Аз също видях файлове с няколко стотин реда код, които са били затворени всичко, което е възможно. И двата сайта едновременно напредват нормално.
В WordPress е т.нар двойки. Това е лошо. Мнозина се борят с това, като затваряне на тези дубликати, както следва:
Това са само някои от дубликатите, създадени от WordPress. Мога да кажа, че това може да се направи, но трябва да се очаква защитата на 100%. Бих казал, че по принцип не е необходимо да се очаква, че проблемът е точно това, както казах по-рано:
Bots все още могат да вземат в индекса на такива неща.
Вече има нужда да се бори по различен начин. Например, използването на пренасочване или плъгини, които ще унищожат дубликати. Все пак, това е тема за друга статия.
Къде е robots.txt?
Като цяло, днес ние сме обсъждали как да видите съдържанието на файла robots.txt, да го копирате и променяте, за да отговаря на нуждите ви. За настройка, ще напиша 1-2 статии в близко бъдеще, тъй като в тази статия не са всички. Между другото, и много информация за популяризирането на сайтове, блогове, могат да бъдат намерени в нашия курс. И аз съм в това, докато не се сбогува с вас.
Най-IT новини и уеб разработки на нашия канал Телеграма
Свързани статии