Semalt објаснува зошто некој треба да блокира ботови и веб-роботи

Со сигурност може да се каже дека многу погледи што доаѓаат на вашата веб-страница се од нечовечки и неоригинални извори и тоа не е во ред затоа што мора да се ослободите од тоа ако сакате да ја видите вашата веб-страница расте за цел живот. Ако сметате дека сообраќајот на ботот е добар и сигурен, правите голема грешка затоа што може да го натера Google да ја оневозможи вашата сметка на AdSense. Најчесто, ботовите се видливи како човечки сообраќај во Google Analytics, но не беше случај пред неколку месеци. Деновиве, повеќе од седумдесет проценти од сообраќајот создаден од мали веб-страници е од ботови и лажни извори. Макс Бел, експерт за „ Семил“ , ве предупредува дека ботовите секогаш се обидуваат да стигнат до вашата страница на многу начини, и можеби нема да ви биде можно да се ослободите од нив.

Добри ботови

Значителен број ботови што ги посетуваат вашите страници не се ништо повеќе од лажни и бескорисни; дури и тие се корисни за вашите веб-страници, ако тие доаѓаат во мала количина. На пример, некои од добрите ботови ги користи самиот Google за откривање на нови содржини на Интернет. Скоро сите пребарувач користат добри ботови за да го идентификуваат квалитетот на статиите. Начинот на кој тие го одредуваат квалитетот е променет, сега тие прибегнуваат кон употреба на масовни софтверски услуги за рој. Свитниците следат врски, скокаат од една до друга страница и индексираат нови и променети содржини. Ботовите на Google се комплицирани, со длабоки множества правила што можат да го регулираат нивното однесување. На пример, командата NoFollow на врските ги прави помалку ефективни и невидливи за ботовите на Google.

Лоши ботови

Лошите ботови се оние што ја уништуваат вашата страница и не можат да дадат никаква корист. Намерно се пребаруваат и автоматски се индексираат. Вашата содржина се прикажува како на луѓето така и на ботовите, игнорирајќи го квалитетот и автентичноста. Лошите ботови ги игнорираат директивите за роботи и не користат IP блокови за одржување на квалитетот на вашите веб-страници. Еден од најголемите проблеми со овие ботови е што содржината е тешко да се индексира и останува скриена од јавноста, додека останува отворена за хакерите кои можат да пристапат до вашите датотеки, за да го нарушат вашиот систем. Постојат и спам-ботови, кои можат да ги оштетат вкупните перформанси на вашата страница. Тие ја пополнуваат вашата страница со предефинирани пораки, со што придружните пазарот се чувствуваат лошо.

Дали треба да блокирате ботови?

Ако постојано добивате погледи од добри ботови, можеби нема да бидат потребни за да бидат блокирани. Но, ако добивате погледи од лошите ботови, можеби ќе размислите да ги блокирате. Треба да го блокирате Googlebot, кој е таму за да ја отстраните вашата страница од резултатите од пребарувачот. Од друга страна, дефинитивно треба да блокирате спамботови. Ако сте свесни за заштитата на вашата веб-страница од ДДОСИН, потребно е да ги блокирате IP-адресите на ботовите и спамерите. Секогаш запомнете дека лошите ботови никогаш нема да се грижат за вашите датотеки robot.txt, што е многу жално затоа што заштитата на оваа датотека е задолжителна за растот на вашата веб-страница и нејзините вкупни перформанси.

mass gmail