Файл robots.txt для блога на WordPress
Розміщено 01-04-10 у розділі Інтернет.
Спостерігаючи за тим, як Яндекс сканує мій блог, я був, м’яко кажучи, здивований. Робот постійно сканував удвічі більше сторінок, ніж є насправді, а потім половину з них відсіював. Наприклад бот вантажив понад 40 сторінок, серед яких лише канали коментарів і публікацій (кожна адреса закінчується на /feed/), а через деякий час вилучав усе з пошуку, оскільки „Формат документа не поддерживается”. Також робот на ім’я Yandex полюбляє різноманітні „ліві” файли.
Який толк у такому тупорилому скануванні?! Це суттєво гальмує появу сайту в пошуці і відповідно затримує оперативне подання інформації користувачам. А зважаючи на критичні дні пошукових павуків, при такій ефективності індексування, сторінки веб-сайту чекатимуть на вихід у світ тижнями. Далі>>
Синхронізація WordPress із Twitter
Twitter – штука популярна. Чому б не розкручувати там блог, розміщуючи посилання на свої публікації, отримати нових читачів, а також додаткові активні посилання на сторінки свого веб-сайту?! Далі>>

