Загальні технічні проблеми SEO та способи їх вирішення

В пошукової оптимізації не буває дрібниць. Будь-яка помилку може привести до втрати позицій або більше жорстким заходам зі боку пошукових систем. Педді Муген, seo-консультант американської компанії Distilled, виконуючи аудит чергового клієнтського сайту, визначив найбільш часті технічні проблеми SEO. Проаналізувавши їх, він запропонував ефективні шляху рішення.

Заголовні URL-и проти строчных Спираючись на свій досвід, Педді Муген стверджує, що дана проблема є загальної для сайтів в доменної зоні .NET. До просуванню в Google це не відноситься, так як він відмінно обробляє особливі знаки, містяться в адресу ресурсу. Що стосується інших пошукових систем, то на подібне здатні далеко не усi з них. Є безліч прикладів, коли сайти, в адресу яких були заголовні літери, не були проиндексированы.

Крім того, від заголовних букв в URL варто відмовитися в користь відвідувачів. Інтернет-користувачі не звертають увага на то, якими буквами написаний адреса веб-сайту. Для них важливий результат — попадання на необхідний ресурс. Тому краще всього зупинитися на варіанті з прописними буквами, так як вони більше звичні для користувачів.

Рішення: Є відмінний інструмент перезапису урла — Search Engine Optimization Toolkit. Виконавши в ньому певні настройки, ви вирішите для себе проблему з великими буквами.

Дублювання головною сторінки Це одна з самих поширених проблем. Полягає вона в тому, що один і той ж контент видається користувачам по різним адресами. До наприклад, крім головною сторінки www.example.com, можуть ще існувати сторінки з розширенням index.php: www.example.com/default.aspx, www.example.com/home, www.example.com/index.html.

Як правило, генеруються вони самими CMS-ками. Раніше пошукові системи особливо не звертали на це уваги. Дублированные сторінки просто отфильтровывались або йшли в додатковий індекс. Проте з виходом алгоритму Panda негативний вплив дублів стало більше серйозним. В особливості це стосується ресурсів з великим кількістю дублированных сторінок. Вони потрапляють в основний індекс, витісняючи якісний матеріал і викликаючи проблеми з подальшої индексацией сайту. В свою чергу це може привести до втрати позицій і навіть повного виключенню з індексу.

Рішення: Важливо визначити усi дублированные сторінки. Процес пошуку дублів може бути трохи заплутаним, так як різні CMS генерують різні розширення URL-ів. Одним з варіантів рішення даної проблеми є перетворення копії сайту в формат CSV з подальшої фільтрацією по столбцу META title і виконанням пошуку по заголовку головною сторінки. Далі, по раді Педди Мугена, необхідно виконати 301 редирект дублированных версій на коректний варіант головною сторінки. Це самий простий спосіб знайти дублікати.

Також ефективним буде використання одного з наступних способів:

• тэг rel="canonical";
• файл robots.txt (блокування пошукового бота);
• мета-тэг Robots NoIndex (вказівка поисковику не індексувати сторінки-дублі);
• атрибут NoFollow (ним позначаються усi посилання на дублированные сторінки).

Корисним інструментом для визначення дублів є Screaming Frog. Він дозволяє знаходити внутрішні посилання на дублированные сторінки. Також можна піти прямим шляхом і просто відредагувати урлы. Це буде навіть в деякої ступеня краще, ніж 301 редирект, котрий нерідко призводить до незначною втрати ссылочной маси.

І останній спосіб виявлення дублированных сторінок — перегляд кеша Google по кожному урлу. Якщо пошуковик не виявив, що URL-и збігаються, значення PageRank кожен день будуть змінюватися.

Параметри запиту в наприкінці URL-а Ця проблема більше характерна для сайтів електронної комерції, так як вони частіше інших ресурсів завантажують інформацію про продукції, додають в фільтр більше опцій (розмір, колір, ціна і т.п.). Такі URL-и більше дружественны для пошукової оптимізації, але досить часто представляються в наступного вигляді: www.example.com/product-category?colour=12.

Ось один з прикладів:

В цьому прикладі використаний фільтр по квітам. Це дуже зручно для користувачів, але для SEO може послужити погану службу. В особливості, якщо покупці не вводять в пошукову рядок запити, містять колір або розмір речі. URL, що містить параметри товару — не кращий варіант для цільової сторінки. Розглянемо ще один випадок. Є два урла (наприклад, www.example.com/product-category?size=5&colour=1 і www.example.com/product-category?colour=12&size=5), провідні на одну і ту ж сторінку. В цьому випадку вони будуть розглядатися пошукової системою як дубльований контент.

Рішення: Для ефективного рішення даної проблеми необхідно ретельно проаналізувати ключові слова. До наприклад, сайт просувається по наступним ключевикам: водонепроникні куртки, похідні черевики, жіночі брюки. Кожен з цих товарів має свої атрибути: розмір, ціна, колір, бренд.

Ваша задача — знайти параметри, які є частиною ключових слів, вводяться користувачами для пошуку даних товарів. Також необхідно визначити, які комбінації атрибутів зустрічаються частіше всього. В внаслідок ви визначте самі продають ключові слова (до наприклад, назва бренда+водонепроницаемые куртки). При цьому важливо переконатися в тому, що урл сторінки записаний правильно. Замість «waterproof-jackets/?brand=5» краще всього використовувати «waterproof-jackets/north-face/» (north-face — назва бренду). Крім того, упевніться, що адреси веб-сторінок є частиною навігаційної структури сайту. Це допоможе підвищити показник PageRank і дозволить користувачам простіше знаходити ваш сайт. Наступного крок на шляху до рішенням даної проблеми полягає в тому, щоб визначити факт індексації URL-а. Якщо він не проиндексировался, можна скористатися інструментом Fetch as Google від Webmaster Tools. Якщо сторінки проиндексировались, найкращим рішенням проблеми є тэг rel="canonical".

З його допомогою ви вказуєте поисковику URL найбільш релевантных сторінок, які йому необхідно проиндексировать.

Soft 404 errors Soft 404 error — це так звана «мягкая» помилка 404. Вона є однією з найбільш поширених проблем пошукової оптимізації. Замість тексту «Вибачте, запитувана сторінка не найдена» Soft 404 error видає стандартні сторінки з кодом «200 ОК». Цей код передає поисковику інформацію про тому, що сайт працює коректно. «Мягкий» 404 представляє собою велику проблему для автоматизованих методів аналізу працездатності посилань. Причиною його виникнення можуть бути помилки конфігурації, з'являються при використанні деякого серверного ПО. До наприклад, якщо шлях до сторінці з 404 помилкою, прописаний в файлі .htaccess, є не відносним (з розширенням /404.php), а абсолютним. З-за «мягкого» 404 стає неможливим визначення реальних проблем, які виникають у користувачів сайту. Пошуковик зможе проиндексировать будь кількість дублированных сторінок. А це точно не допоможе вам в просуванні сайту.

Рішення: Визначити «мягкий» 404 можна при допомоги спеціальних додатків в Google Webmaster Tools. Також можна виконати ручну перевірку неробочих сторінок на сайті (наприклад, виключити урлы типу www.example.com/5435fdfdfd) або подивитися код статусу. Хорошим інструментом для перевірки наявності коду «200 ОК» є Web Sniffer. Для тих, хто воліє користуватися Google Chrome, існує Ayima tool. А можна просто створити красиву 404 сторінку, яка б подобалася відвідувачам. Тут представлені найбільш яскраві приклади креативних 404 сторінок.

Також можна спробувати створити правильну 404 сторінку. Для цього в файлі .htaccess необхідно прописати ErrorDocument 404 /404.php або ErrorDocument 404 /errors/404.html. Це шляху, по яким ви зможете розмістити потрібні сторінки, на які буде перенаправляться користувач при запиті з помилкою.

302-й редирект замість 301-го Для користувачів особливої різниці між 302 і 301 перенаправленням не існує. Відміну полягає в відношенні до ним пошукових систем. 301 редирект вважається постійним. Він означає, що веб-сторінка назавжди перемещена на новий адреса. 302 редирект є тимчасовим. Як правило, його використовують для об'єднання домену без приставки www і з ній. Google спокійно відноситься до цього явищу. При використанні 302 редиректу замість 301, початковий адреса сторінки залишається в індексі Google і утримує свої позиції подібного тому, як якщо б сторінка була недоступною. При цьому користувачі, клікаючи по засланні, потрапляють на новий URL — туди, куди ви планували їх направити.

В цілому ж, використання якого-то певного редиректу залежить від цілей переміщення сторінки. До наприклад, деякі браузери в відповідь на 301 помилку, автоматично перенастраивают закладки на нову веб-сторінку. Крім того, Google не завжди своєчасно передає PR на сторінки, переміщені по 302 редиректу. Вважаючи його «временным», він може «зазеркалить» обидва ресурсу.

Рішення: Для пошуку урлов з 302 перенаправленням відмінно підходять такі інструменти, як Screaming Frog і IIS SEO Toolkit. Вони дозволяють перевірити, який саме редирект використовується: 302 або 301.

Нерабочая/«устаревшая» карта сайту XML-карта сайту більше оптимальна з точки зору просування. Пошуковим системам набагато простіше знайти в ній продвигаемые сторінки. До жаль, деякі XML-карти генеруються тільки один раз і швидко застарівають, внаслідок чого з'являються неробочі посилання. В ідеалі XML-карти повинні регулярно оновлюватися. Це позбавить вас від проблем з неробочими посиланнями і додаванням нових URL-ів. В особливості, в оновленнях карти сайту потребують великі ресурси, на які постійно додаються нові сторінки.

Рішення: В першу чергу необхідно виконати аудит поточного варіанти карти сайту і виявити неробочі посилання. Для цього є корисний інструмент від Mike King.

У-друге, щоб зробити карту сайту динамічною, її потрібно регулярно оновлювати. В залежно від ресурсу, поновлення можна виконувати раз в день, тиждень або місяць. Це може зайняти деякий час, але буде працювати на перспективу розвитку інтернет-проекту.

І додатковий порада від Педді Мугена: експериментуйте і створюйте карти сайту, в яких містяться тільки нові товари, оновлюйте їх частіше, ніж зазвичай. Домогтися більше високих позицій сайту допоможе наявність в мапі закритих від індексації URL-ів.
Напевно кожен seo-фахівець стикався з подібними технічними проблемами. Не раз доводилося ламати голову над тим, що робити з дублями або як правильно скласти URL. Тому цілком можливо, що поради провідного американського seo-консультанта допоможуть вам успішно вирішити задачу, яка варто перед вами в справжній момент, і домогтися більше високих позицій що просувається сайту. Бажаємо успіхів!