SEO BIGCATS.RU
Останнім часом зацікавився пошуковою оптимізацією, частково по роботі, частково для себе. Неприємно робити щось, чого потім інші не побачать і не дізнаються, якщо не спамити рекламувати. Рекламувати я не вмію (бани в dikie_koshki й хохляцькій Вікіпедії тому підтвердження, хоча правил дотримувався як завжди), платити за рекламу теж не збираюся, лишається тільки оптимізація.
На сайтах, які роблю на роботі, широко не розвернутися, та й не завжди потребують оптимізації. А от BIGCATS.RU, який допомагаю адмініструвати, — інша річ. Щоправда, не завжди все гладко виходить.
У грудні помітив, що Google вважає www.bigcats.ru, bigcats.ru і bigcats.spb.ru різними сайтами, видаючи їх на різних позиціях за одним запитом. Було проведено склейку домену за допомогою .htaccess і всі запити перенаправлено на bigcats.ru, але Яндекс вважає основним дзеркалом www.bigcats.ru і за редиректами відмовився перейти, не маючи можливості отримати доступ до основного дзеркала, з часом прибрав з індексу весь сайт, крім головної. Це помітив тільки наприкінці лютого. Це швидко вдалося виправити, додавши в htacces винятки для Яндекса, а також створив robots.txt з директивою host, щоб з часом (у межах 4-х місяців або ніколи) змінилося основне дзеркало й в Яндексі. Поки ж тільки роботи Яндекса можуть ходити по сайту без перенаправлення на bigcats.ru.
Так само на форум було встановлено моди Canonical URL для додавання канонічних посилань на форум, щоб Google та інші пошуковики не індексували один і той самий вміст форуму, доступний за різними адресами. Яндекс rel="canonical" не підтримує, тому для нього треба мучитися винятками в robots.txt. Так само встановлено мод Sitemap FX для генерації xml-карт сайту форуму. У htacces довелося додаткове перенаправлення й при запиті /forum/sitemap.xml видавати /forum/sitemap.php (RewriteRule ^forum/sitemap.xml$ forum/sitemap.php), щоб Google не лаявся на карту з розширенням php у robots.txt. Ще нещодавно, базуючись на моді phpBB SEO Optimal titles, змінив вивід заголовків сторінок форуму, щоб назва тем була на початку й виводилися номери сторінок багатосторінкових топіків. Сторінки з новими назвами тільки зараз почали надходити в індекс, цікаво буде подивитися на результати.
Сам же сайт оптимізувати складніше, все ж структура нелогічна й застаріла з меню на JavaScript, по яких не можуть нормально ходити роботи. Автоматично карту сайту не вийшло згенерувати, довелося її вручну складати, вносячи майже 400 сторінок. Після додавання карт сайту у вебмайстри Google та Яндекс, перший досить швидко завантажив їх і проіндексував частину сторінок, Яндекс же через більший проміжок часу завантажив карти й в індексі не одразу всі посилання з'явилися, але через кілька тижнів проіндексованими виявилися всі понад 3500 адрес з карт сайту. А Google так само продовжує в індексі тримати третину сторінок. Як розумію, для нього це нормально.
Після індексації цими двома пошуковиками набагато більше відвідувачів приходить з Яндекса, зараз за запитом «тигр» майже 10% відвідувань виходить, зате за вертикальним пошуком більше йде з Google, особливо за запитом «гумор». Щоправда, відсоток відмов (bounce rate) високий, близько 70% загалом і 75% для переходів з пошуковиків, чи нормально це для такої тематики й структури. Більше б на форум привабити, а то на ньому виходить більше інформації.
Керуюся даними лічильників від Яндекса й Google, встановив їх на всіх сторінках сайту й форуму. Analytics краще виходить, але особисто мені більше інтерфейс Метрики подобається, зручніший, цікаві параметри є й оновлюється постійно протягом доби. Для обох лічильників задав мету «Повідомлення на форумі» і відстежую статистику відвідувачів, які залишають повідомлення.
Решту лічильників видалив, які були тільки на головній, користі від них ніякої, тільки вагу сторінки зменшували. Переходів, наприклад, з топу Рамблера ніяких не було, як і з самої пошукової системи. Так само на головній розмістив посилання-кнопки на форум замість дохлого чату, RSS і представлення сайту в соціальних ресурсах, сховавши адреси за допомогою перенаправлення форуму, тим самим зменшивши кількість зовнішніх посилань. На головній лишається місце під два банери інших сайтів, знайти б, з ким можна організувати продуктивний обмін. З «Тигроманії» мало переходять, але лишаються надовго, якісні відвідувачі. На фонд «Фенікс» просто посилання без обміну, як розумію.
До кінця ще не доробив robots.txt, ніяк не можу закрити всі сторінки від Яндекса, які він не має індексувати на форумі, через повторну індексацію сильно видача падає, переконався в цьому з одним із сайтів на роботі. Зараз виходить таке:
User-agent: Yandex
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?t=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&start=*&st=0&sk=t&sd=a
Disallow: /forum/viewtopic.php?f=*&t=*&st=0&sk=t&sd=a&start=*
Disallow: /forum/viewforum.php?f=*&start=0$
Disallow: /forum/viewtopic.php?f=*&start=*&st=0&sk=t&sd=a
Disallow: /forum/viewtopic.php?f=*&st=0&sk=t&sd=a&start=*
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=next&st=0&sk=t&sd=a
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous&st=0&sk=t&sd=a
Disallow: /cgi_scripts/search/search.pl?query=*
Host: bigcats.ru
Sitemap: http://bigcats.ru/sitemap.xml
Sitemap: http://bigcats.ru/forum/sitemap.xml
Clean-param: sid /forum/index.php
Clean-param: sid&st&sk&sd /forum/viewforum.php
Clean-param: sid&st&sk&sd /forum/viewtopic.php
Не можу розібратися, звідки Яндекс бере сторінки з «&st=0&sk=t&sd=a» в адресі, сам не можу вийти на такі сторінки. У скриптах форуму глибоко не копав, для сортування й фільтрації потрібні параметри, як розумію. Але проблема лишається, в індексі Google таких сторінок не помічав, а в Яндексі виходять по два рази проіндексовані одні й ті самі сторінки. При цьому додавання
Clean-param: sid&st&sk&sd /forum/viewforum.php
Clean-param: sid&st&sk&sd /forum/viewtopic.php
вплинуло на сторінки виду
/forum/viewtopic.php?p=*&st=0&sk=t&sd=a
/forum/viewtopic.php?t=*&st=0&sk=t&sd=a
Вони з індексу зникли, але тут же додалася купа наступних:
/forum/viewtopic.php?f=*&t=*&start=*&st=0&sk=t&sd=a
/forum/viewtopic.php?f=*&t=*&st=0&sk=t&sd=a&start=*
/forum/viewtopic.php?f=*&start=*&st=0&sk=t&sd=a
/forum/viewtopic.php?f=*&st=0&sk=t&sd=a&start=*
Їх тільки зараз заборонив у robots.txt.
І все ж, для чого точно потрібні «&st=0&sk=t&sd=a», де саме на форумі phpBB виходять посилання з цими параметрами й який найефективніший спосіб боротися з їхньою індексацією?