Доброго времени суток уважаемые читатели. Те, кто остался мне верен и все же ждал, что я вновь начну строчить посты в этот блог. В моей жизни произошло много и хорошего и плохого. Но в итоге я самостоятельно теперь живу в съемной(жаль что пока не в личной) квартире, сам себя одеваю, кормлю и так далее)))

Но сегодня речь пойдет не об этом.Сегодня я хочу поделиться с вами тем, что наконец случилось. Сегодня я обнаружил в своем почтовом ящике конверт из США. А в нем была карта MasterCard заказанная в сервисе ePayService еще 27.10.2010. О как. Как говорится не прошло и пол года.

Очень долго там что-то затягивалось у них. То карты не могли выпустить. Так как заказ на отпечатку карт был в США, затем вроде как отправили карты но они не дошли до адресатов, затем снова сбор данные у тех к кому карты не дошли и повторная отправка.

И вот наконец я счастливый обладатель карты Мастер кард. Можно затариваться на аукционах типа eBay и в китайских магазинах, а так же нормально оплачивать сервер, а то приходилось напрягать товарища, за что ему огромное спасибо.

Вот собственно фото из «первых рук»(сделаны смартом, поэтому качество хромает):

Заказать карту можно на сайте ePayService

Собственно на карты действуют вот такие тарифы:

• Стоимость снятия наличных с банкоматов - $1.50

• Месячная абонентская плата активной карты - $6.00
• Месячная абонентская плата не активной карты^* - $0.25

• Стоимость пополнения карты - FREE (Пополнение карты происходит мгновенно, в реальном времени)
• Минимальный депозит - FREE
• Минимальный остаток на счету - FREE
• Максимальный лимит денежных средств, находящихся на карте - $10,000.00
• Стоимость оплаты покупок или услуг - FREE
• Проверка баланса через банкомат - $0.50
• Проверка баланса через свой счёт в ePayService - FREE
• Неудачное снятие средств через банкомат - $0.50

*Если в течении 45 дней по карте не было движений средств (загрузка на карту, снятие по карте, проверка баланса, покупки в магазинах, в том числе online и др. действий) карта автоматически становится не активной и месячная плата по карте составляет $0.25. При любом действии с картой (загрузка на карту, снятие по карте, проверка баланса, покупки в магазинах, в том числе online и др. действий) карта автоматически становится активной и месячная плата по карте будет составлять $6.00.

И вообще я вливаюсь назад в Заработок денег в интернете.

Приветствуйте. Впереди много интересного!

Ситуация с ePassporte не может не огорчать. Сегодня зашел в личный кабинет и обнаружил что пришло некое уведомление, в котором говорилось следующее:

Dear ePassporte Account Holders

St. Kitts Nevis Anguilla National Bank, without our prior knowledge, has turned off the ability for ePassporte to access or display Account Holders' Visa Card balances.  This means that when you login to your ePassporte Account, you will only be able to see your Wallet balance.  As a consequence, inquiries regarding your Visa Card balance must be directed to St. Kitts Nevis Anguilla National Bank.  St Kitts Bank is responsible for all funds on Visa Cards.  Their contact information is as follows:

St. Kitts-Nevis-Anguilla National Bank Ltd.

Central Street,
P.O. Box 343
Basseterre, St. Kitts, West Indies

Tel: (869) 465-2204    Mon - Thurs:  8 a.m. - 2 p.m.  Fri: 8 a.m. - 4 p.m.
Fax: (869) 465-1050
Email: webmaster@sknanb.com

ePassporte will continue to provide support with regard to the funds in your Wallet.  We kindly ask for your patience as we must verify Accounts and balances manually.

Thank You,

ePassporte Account Holder Services

Иными словами, данные про баланс карты Visa исчезли из кабинета ePassporte. И мол по всем вопросам обращайтесь в банк, адрес такой-то… Но ePassporte так же пытаются что-то решить. Ну что же, подождем.

А пока вся эта кутерьма происходит, ePayservice уже завтра обещает начать предзаказ карт “Master Card”. Лично я собираюсь брать карту у них, правда еще неизвестно в каком банке будет счет. В случае с ePassporte это был оффшорный банк. Ну да ладно, вот что ePayservice прислал в анонсе предзаказа:

Уважаемые клиенты!

Спасибо всем кто с нами дождался этого дня. Мы долго работали над созданием своей карточной программы. По сути это заняло практически один год. Мы искали идеальные условия для вас, дорогие друзья, и мы добились того, чего хотели. Сегодня мы хотим предложить вам новый собственный карточный продукт - ePayService MasterCard.

Данная карта по категории является MasterCard Standard, что позволяет не только снимать деньги с банкомата по самым низким тарифам на рынке, но и оплачивать покупки и услуги, в том числе в сети Интернет.

Делая выбор в пользу наших карт, вы получаете наилучшие условия.

Лимит на снятие наличных через банкомат и совершение покупок - до $10,000.00 в день
Стоимость снятия наличных с банкоматов - $1.50
Месячная абонентская плата активной карты - $6.00
Месячная абонентская плата не активной карты* - $0.25

*Если в течении 45 дней по карте не было движений средств (загрузка на карту, снятие по карте, проверка баланса, покупки в магазинах, в том числе online и др. действий) карта автоматически становится не активной и месячная плата по карте составляет $0.25. При любом действии с картой (загрузка на карту, снятие по карте, проверка баланса, покупки в магазинах, в том числе online и др. действий) карта автоматически становится активной и месячная плата по карте будет составлять $6.00

Стоимость пополнения карты - FREE (Пополнение карты происходит мгновенно, в реальном времени)
Минимальный депозит - FREE
Минимальный остаток на счету - FREE
Максимальный лимит денежных средств, находящихся на карте - $10,000.00
Стоимость оплаты покупок или услуг - FREE
Проверка баланса через банкомат - $0.90
Проверка баланса через свой счёт в ePayService - FREE
Неудачное снятие средств через банкомат - FREE

Стоимость выпуска карты будет напрямую зависеть от суточного лимита по ней:

ePayService MasterCard с лимитом $5000/сутки составляет $25.00
ePayService MasterCard с лимитом $7500/сутки составляет $40.00
ePayService MasterCard с лимитом $10000/сутки составляет $60.00

Доставка курьерской почтой (+$100.00) 3-4 рабочих дня
Доставка обычной почтой (бесплатно) - около 2-3 недели

Срок изготовления карты с момента заказа с вашего счёта в ePayService составляет 1-2 рабочих дня.

Для партнёрских программ есть специальные предложения:
- Скидки на выпуск карт до 50% в зависимости от объёма выкупленного пула карт.
- Generic Program. Эмбоссирование названия вашей партнёрской программы или сайта на карте, выдаваемой вашей партнёрской программой
- Full Co-Branding Card. Изготовление карт с индивидуальным дизайном и логотипом вашей партнёрской программы.

Пред-заказ карт будет открыт на следующей неделе. Точную дату мы назовём во вторник.
Акции, скидки, предложения так же будут сформированы ко вторнику.

С Уважением

Служба поддержки платёжной системы ePayService

Ждемс.

Уважаемые клиенты!
В связи с проблемами ePassporte сообщаем вам следующее:

1. Выплаты на ePassporte приостановлены. Текущие выплаты будут возвращены вам на счёт, чтобы сохранить ваши деньги.
2. Приём ePassporte на сегодняшний день не возможен из-за отсутствия понимания о дальнейшей судьбе ePassporte

По мере поступления какой-либо информации мы будем уведомлять вас рассылками.

С Уважением
Служба поддержки платёжной системы ePayService

Близится осень. Теплые дни ушли, все натянули теплую одежду. Уже не так прикольно тусоваться на улице и загарать, поэтому все чаще садишься, вечером за компьютер и начинаешь «писать», работать, думать, размышлять. Кушать хочется, а денег всегда не хватает на все вкусности жизни.

Привет мир! Я наконец очнулся от двух месячной спячки, точнее это было что-то отвлеченное. Скоро моя жизнь перевернется на 180 градусов и надеюсь все будет путем. За это долгое время произошло много всего. То что привело меня в шок и то что безумно обрадовало, то что дало понять что жизнь продолжается. Хотя хватит разводить кисель в чашке. Пожалуй пора начать говорить по теме.Около месяца назад я задался целью попробовать сделать мало-страничники. Был сделан всего один. Тематика совершенно отдаленная и отстраненная от обычных дорвейных тематик(датинг, порнушка, таблетки, фильмы …) поэтому так сказать НЧ эксклюзив. Но не смотря на это в Яндексе, да и в Гугле есть хорошая конкуренция. С помощью программы KEI Checker, которая скоро прекратит свою работу и переползет в Amazing Niche Finder, были собраны и проверены на конкурентность и частотность кейворды. Были написаны уникальные статьи, все это было зашпиговано в уникальный шаблон сверстанный под DLE. Залито на хостинг и отдано на сьедение ПС.

В итоге прошло пару тройку АП’ов но Яндекс так и не хотел «жрать» страницы. На следующий АП произошла вообще довольно странная картина: Яндекс «сожрал» 1 страницу(морду) + еще какую-то страницу другого сайта и показывал это в выдаче при поиске проиндексированных страниц моего мало-страничника. Я возмутился и написал Платону об этом, на что получил вполне человеческий ответ(для тех кто не знает, Платон обычно отвечает языком роботов) о том что мол это их ошибка и они ее скоро исправят. Как узнал позже, такая проблема была не только у меня.

В итоге уже в следующий АП все страницы были в индексе как Яндекса, так и Гугла. Но трафика нету вообще, позиции то же оказались не из лучших. Отсюда сделал вывод, что ключевые слова нужно подбирать тщательнее и реально оценивать конкуренцию.

Пока я решил отойти от темы малостраничников и наделать дорвеев на фришных сервисах блогов с помощью программы TextKit и R-Dorgen, а так же дорвеев на рушных доменах. Так как дорвеи сделанные давным-давно и забаненные Яндексом но при этом хорошо висящие в Гугле и Рамблере до сих пор приносят копейки и трафик.

Всем удачи, до связи =)

Бот яндекса

В скором времени, с началом лета боты Яндекса предстанут перед нами в новой «одежке».

А именно они сменят вид своего представления в User-Agent. Компания Яндекс хочет добиться этим того, что все роботы будут приведены к одному виду представления, что позволит сделать значения User-Agent в логах более развернутым и информативным.

Исходя из этого, можно будет с легкостью понимать какой именно бот прошелся по страницам вашего сайта и какой именно бот помог загнать страницу в топ или наоборот, помочь странице оттуда выпасть.

Список новых представлений в User-Agent:
Mozilla/5.0 (compatible; YandexBot/3.0) — основной индексирующий робот.
Mozilla/5.0 (compatible; YandexBot/3.0; MirrorDetector) — робот, определяющий зеркала сайтов.
Mozilla/5.0 (compatible; YandexImages/3.0) — индексатор Яндекс.Картинок.
Mozilla/5.0 (compatible; YandexVideo/3.0) — индексатор Яндекс.Видео.
Mozilla/5.0 (compatible; YandexMedia/3.0) — робот, индексирующий мультимедийные данные.
Mozilla/5.0 (compatible; YandexBlogs/0.99; robot) — робот поиска по блогам, индексирующий комментарии постов.
Mozilla/5.0 (compatible; YandexAddurl/2.0) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL».
Mozilla/5.0 (compatible; YandexFavicons/1.0) — робот, индексирующий пиктограммы сайтов (favicons).
Mozilla/5.0 (compatible; YandexDirect/3.0) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса.
Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel) — «простукивалка» Яндекс.Директа.
Mozilla/5.0 (compatible; YandexMetrika/2.0) — робот Яндекс.Метрики.
Mozilla/5.0 (compatible; YandexCatalog/3.0; Dyatel) — «простукивалка» Яндекс.Каталога.
Mozilla/5.0 (compatible; YandexNews/3.0) — индексатор Яндекс.Новостей.

Как видно, все предыдущие буковки типа «D», «I» и так далее, сменятся на английские слова. На мой взгляд это хороший ход, теперь все боты будут «читаемыми». Хотя теперь пропадут выражения типа «бот дятел», «бот I» и так далее.

Желаю всем летом увидеть в логах своего веб сервера или виртуального хоста, побольше записей про бот с User-Agent’ом Mozilla/5.0 (compatible; YandexBot/3.0)

Не проспи зарплату

Приветствую Вас мои подписчики, гости блога и те, кто отписался от фидбюрнера. Довольно долго я отсутствовал в блоге и сети соответственно, на то были свои причины и об этом я уже писал в предыдущем посте. За время моего отсутствия я смотрю ничего особенного не произошло в «Сео интернете». Яндекс все так же банит дорвеи, дорвейщики все так же стараются загнать свои детища в индекс ПС и заработать бабло на них. Так же вижу темы о ухудшении конверта и знакомые говорят, что СМС сейчас не рулят. Ну в общем как и написал выше, изменений никаких.До того как уйти в плавание на тройку-четверку недель я регнул 8 фришек на одном из хостов предлагающих бесплатный домен третьего уровня. Добавил их в аддурл с заглушкой на морде каждого сайта состоящего из копипаста и стянутого шаблона из выдачи ПС. После первого и второго Апа Яндекса они так и не попали в индекс, но каково было мое удивление, когда я находясь на отдыхе, решил проверить индексацию этих казалось бы обреченных заглушек и обнаружил что 6 из 8 попали в Индекс Яшки и сидят там уже порядка 6 Апов. И так делая вывод – копипаст рулит и не надо придумывать и выдумывать сотни новых алгоритмов генерации морфологически правильного контента для дорвеев.

Так же я в очередной раз сделал вывод, что зарабатывать на СМС партнерках не очень то и круто, нужно искать альтернативные места и способы заработка с помощью дорвеев. Они есть, я знаю и сам давно использую эти методы, заработок конечно на них не так велик, как в пиковые моменты посещения дора пользователями, но зато стабильность заработка перекрывает все минусы.

Как то недавно я писал что ухожу в бурж и фарму, но пока решил остановиться еще на чуть чуть в Рунете и попробовать подзаработать на фарме в нем. Хотя я больше чем уверен что наши люди не будут тратить деньги и заказывать виагру, сиалис и прочее через интернет, хотя как знать. Нужно попробовать, что бы увидеть. А пока еще один случай. Регнул я под аптеки РуФармы 5 доменов, чтобы отлежались. Не аддурил, но удивился когда обнаружил их проиндексированными Яндексом. Видимо регистраторы все таки передают инфу или ПС сами парсят ее. В общем попробую Руфарму, о результатах естественно будет написано.

R-Dorgen обзор

Ну вот собственно подошло время рассказать о проведенном эксперименте и соответственно написать обещанный обзор доргена R –Dorgen.

C момента последнего поста прошло 4 дня и соответственно именно столько почти не было апдейта выдачи Яндекса. В этот раз АП что-то задержался и я уже опять начал думать, что яндексоиды опять что-то придумали очередное, глобальное для убиения заработка «честных» вебмастеров. Но как-то нет, все прошло гладко, просто с опозданием.Хотя один странный факт, не касающийся дорвеев. Я написал предыдущий пост и через 9 часов он был в индексе Яшки, причем я никогда не пингую ПС и не толкаю посты ни в Bposter, ни в аналогичные быстроботные места. Но факт остается фактом. Вобщем я уже начал радоваться что Яндекс начал «работать» как Гугл в плане индексации и выдачи. Но наверное пока это еще мечты.

Итак, последняя созданная пачка дорвеев, повторю:

• на новом хостинге
• с персональным IP
• с новым шаблоном
• с новыми данными «Хуиз»
• на новом доргене R -Dorgen

частично, а именно 3 дорвея из двух, в этот АП оказались мордами в индексе. Два из них, пока не там. Были сгенерированы дорвеи с разным методом генерации текстовки(об этом позже по сути обзора доргена). Но попали в индекс и тот и другой способ генерации, что говорит о неважности метода генерации для данной пачки. В общем буду надеяться на следующий АП, который думаю не за горами. Пока в общем все хорошо, нету выпадение в «междуапье» и это уже о чем-то да говорит.

И так, начнем пожалуй уже.

R –Dorgen это десктопный(с автором можно поговорить на тему установки консольной версии на NIX сервер) генератор статических дорвеев написанный на языке Python

Он существует в двух видах: консольный и с GUI(Графический интерфейс).

На мой взгляд дорген очень хорош. В нем нет ничего лишнего и нету ничего недостающего. Может конечно найдутся эстеты и любители экстравагантностей, но на такие случаи думаю автор за умеренную цену. А может и за просто так включит какую-то функцию в новое обновление доргена.

Что же умеет этот чудо агрегат, а умеет он следующее:

• Пятью(5-ю) способами обрабатывать текстовку
• Имеет на своем борту на сегодняшний день 30 макросов для вставки в шаблон будущего дорвея(макросы периодически дорабатываются и добавляются с выходом обновления)
• Заливать сгенерированный дорвей на FTP сервер
• Генерировать «белые страницы», которые разбавляют дорвей чистыми сеошными страничками для вида его ПС, как хорошего сайта xD
• Парсить картинки с «Яндекс.Картинок» по заданному ключу и заданное кол-во, с последующей вставкой их в шаблон
• Создавать карты дорвеев, как html так и xml
• Работать в пакетном режиме
• Парсить видео с сервиса Youtube по заданному ключу и заданное кол-во. С последующей вставкой в шаблон
• Очищать контент от лишних символов
• Генерировать robots.txt в соответствии с шаблоном
• Создавать отдальный вид главной страницы(для этого нужно создавать отдельный шаблон для нее)
• Работать в скоростном режиме, это значит что дорген очень быстро генерирует страницы, даже с морфологией
• Архивировать созданный дорвей и удалять исходники
• Генерировать RSS для дорвея
• Сохранять все ссылки на страницы дорвея(что будет полезно елси вы массова аддурите дорвей в яндекс)

Ну и еще много чего по мелочи.

Дорген обладает следующими методами генерации текста:

• Цепи Маркова(может кто-то еще верит в их силу)
• Синонимизация(вместе с доргеном идет база синонимайза, но никто не мешает подсунуть свою или создать)
• Синонимизация + смена предложений местами
• Вставка текста без изменений
• Смена предложений местами в тексте без изменений

В своем эксперименте я использовал два метода: «синонимизация + смена предложений местами» и «смена предложений местами в тексте без изменений»

Так же дорген умеет вставлять кейворды хитрыми способами. Что лично я нигде не видел, по мойму все доргены тупо вклинивают кейворд в текст и все, могу ошибаться.

Методы вставки кейворда:

• Обычная вставка
• Соблюдая морфологию
• Соблюдая морфологию + разбивка кейворда на слова(если кейворд двухсловный)

А так же разной может быть структура ссылок на страницы дорвея:

• Кейворд.html
• Кейворд-случайное число.html
• Подпадка/кейврод.html

Ну все это хорошо и чудесно, но из описалова мало что может быть понятно, так что для наглядности заснял пару видео роликов, заодно кое что проверю. И так начнем с парсинга картинок:

Чтобы не делать видео большим и не ждать долго, я прервал парсинг.

Далее парсинг с Youtibe:

Парсинг прошел довольно быстро и в результате получен файл с хешами видео на ютубе, после чего они будут использованы при генерации дорвея.

И наконец генерация самого дорвея:

В общем дорген просто летает и на ура справляется со своими обязанностями, этакий мини комбайн, ничего лишнего, ничего недостающего.

На сайта автора можно найти тестовый дорвея + почитать ридми по доргену.

Советую брать тем кому действительно нужна простота и скорость. На сегодняшний день, дорген можно получить почти за даром, для этого нужно помочь автору вот в чем: нужно сверстать пару страничек для сайта(типа офф. Сайта доргена), думаю это хорошее предложение. Со всеми вопросами пишите автору доргена, его контакты можно найти на сайте(ссылка выше).

За сим позвольте откланяться, ваш iron-viper.

P.S. Что-то Алекса потянуло на лохотроны

Заговор Сеошника на Яндекс

Шло все хорошо и беззаботно, пока Яндекс не забанил золотожильные дорвеи, которые просидели в индексе 5 месяцев и принесли не плохой доход с минимум затрат. Все бы ничего, обыденное дело попадания дорвея в бан, но самое интересное впереди, нужно определить, почему именно они попали в бан, что поисковик счел за не кондицию и приклеил ярлычок «прямиком в котел»?! Вот в этом и заключаются самые сложные вопросы. Об этом и будет сегодняшний пост.И так, после того как Яндекс забанил дорвеи, я не сложил руки и начал делать(продолжать) сотворение дорвеев на свет божий. Но к моему удивлению и недоумению две пачки очередных дорвеев выпадали в междуапье. Стоило только мордам попасть в индекс, как через сутки они выпадали и больше уже не лезли. Я начал мозговать. Значит так, шаблон был одинаковый, ключи были разные, IP адрес был одинаковый, текст был одинаковый(перемешанный + генерация РБТ). Причем домены не попадали в бан аддурилки, они с успехом добавлялись в аддурилку и бот шастал по дорвеям, но Яндекс не считал нужным взять страницы в индекс. У меня уже наклевывались мысли по поводу бана по IP, слухи о котором развели уже много людей, но все же береженого бог бережет, подумал я и начал новый эксперимент. Проверил все свои забаненные дорвеи с помощью сервисов проверки сайтов на видимость их ПС и понеслось.

Был куплен новый хостинг + дополнительный IP адрес к нему, пачка доменов из пяти штук, спаршен текст, сделан переработанный шаблон(прям загляденье, сам бы повелся). Затем было сооружено 5 новеньких дорвейчиков новым доргеном  R –Dorgen 2.3. Обзор этого доргена будет в следующем посте(да простит меня автор этого агрегата, уж задолжал я ему с обзором). В итоге бот индексатор Яндекса уже побывал на дорах, но как всегда сволочь жрет только морду и роботс.txt, ну ничего скоро АП, посмотрим что будет.

Кстати зато рама, кушает неплохо доры и немного дает трафика.

Кстати доказано влияние бара в браузере. У меня стоит в лисе бар от mail.ru, после того как сделал доры, на следующий день логии апача были забиты ботами майл спутника(на заметку).

За сим откланяюсь.

С Уважением, Ваш iron-viper.

P.S. В очередной и последний раз сменил дизайн блога, мне он нравится.

Написание реггера на Питоне – познавательная статейка из цикла

Сопли шольников

Последнее время в сети начинается паника среди блек сеошников, но я думаю это скорее школьники волнуются. У которых все выпадает из индекса. На серче начали плодить темы по поводу конца дорвейства и черного сео. Сначала ОстапКэш заявил о своем уходе, после ужасная новость о покупке Яндексом какого-то там аццкого алгоритма, который даст начало концу всех саттелитов, рерайтов, дорвеев и прочей ереси в сети. По уму Яндекса не имеющую никакого отношения к полезной информации.Яндекс это комерчесская система, торговая площадка. Как хотите назовите, но это не СДЛ, это способ нажить побольше бабла, я всегда так думал и думать буду и никто меня не переубедит.

А тем временем ажиотаж по поводу закрытия Остапа спадает но я не перестаю любить Смартбакс он все еще на плаву и почти каждую неделю не перестает удивлять новыми лендингами. Конверт тоже не плох.

Довольно давно с ним работаю и пока, тьфу тьфу тьфу. Все идет пучком.

Кстати попробовал тут поюзать тизеры на BodyClick на одном белом проектике и вот вышла какая картина:

bodiclick 666

Даже не знаю, может не стоит там работать.))) Хотя там объемы маловаты, в таких системах нужно иметь парк софтопорталов и гнать оттуда траф. Вобщем тизеры не по мне.

Кстати inlanger тоже пробовал подзаработать на тизерах

Яндекс - чудит!

Яндекс, Яндекс, Яндекс….. Как он уже «дорог», наш «дорогой», «любимый», русскоязычный и близкий нам по менталитету поисковик. Не то, что буржуйский Google.

Хоть большинство Яндексовских фич и нагло спиж**о у оного. К чему я тут ругаю всеми любимую ПС? Да к тому, что они снова придумали какой-то фильтр. Фильтр, направленный на отсеивание в выдаче и в отказе от индексации генерированного контента, предназначенного для роботов этой самой ПС.

До того как он был введен или скорее до того, как о нем было официально заявлено представителями Яндекса, у меня уже было предчувствие, что что-то тут не так и Яндекс что-то введет. Дорвеи стали выпадать, боты стали странно себя вести, в индекс не лезли даже проверенные способы. Уже два «полуапа», да именно так я бы их назвал, ибо толку от них нету никакого, ничего не «влазит», ничего не «выпадает», я слежу за своей новой пачкой. И наблюдаю странную картину поведения поисковых ботов Яндекса.

После аддурла приходит сразу же «бот дятел» (D). Кстати про ботов я писал давно вот тут . Стучит на морду и на robots.txt

Далее приходит Индексатор и стучит на тот же robot.txt и на opensearch.xml (OpenSearch — это коллекция технологий, которая позволяет получать поисковые данные, с сайтов и поисковых систем в удобном формате для публикации и агрегации.)

Затем боты затихают, после ломятся только на файл роботс и на опенсерч, через пару дней пришел индексатор картинок и начал жадно «жрать» все имеющиеся картинки. Но повторю что толку от этого – ноль, может быть пока.

Остается только ждать и придумывать новые уловки, уже есть пару в голове.

Выпал один дор из долгоживущих, выпал целиком и в индекс не вернулся, остальные живут. Похоже на «стук».

Пока  я тут разглагольствовал, мой товарищ inlanger выложил в паблик написанный им же генератор текста для дорвеев, методом переводов на разные языки.