Для работы в буржнете, будь то фарма или kinovip нужно где-то парсить англоязычные запросы. Ну не покупать же начинающему дорвейщегу базу Пастухова за 4 сотни невинно убиенных енотов .

Можно конечно и вручную wordtracker помучить, но все же в двадцать первом веке живем. Поэтому на прошлой неделе озаботился поиском соответствующей софтины либо скрипта. С дармовым софтом мне опять не повезло, ничего из найденного в паблике у меня на компе не заработало, а пятидесяти постов на нулледе не имею.

Так что вновь сам написал себе программку и решил выложить, может, кому тоже пригодится:
Скачать программу для парсинга WordTracker.
Программа написана на скорую руку, поэтому имеет минимум функций, в частности - периодически нужно вручную вводить капчу. Тем не менее, за час вполне реально напарсить несколько тысяч запросов.

Для начала парсинга нужно ввести слева от кнопки “Add” стартовый запрос, например “buy movies”, этой же кнопкой добавить запрос в очередь и нажать кнопку “Start”. Парсинг автоматически ставится на паузу в двух случаях: если wordtracker просит капчу и если по запросу ничего не найдено. В первом случае нужно просто ввести капчу и парсинг продолжится автоматически, во втором - еще раз нажать кнопку “Start”. Программа сохраняет во время работы данные в два текстовых файла “keys.txt” и “keylist.txt”. В файле “keys.txt” записываются найденные запросы и их количество, разделенные точкой с запятой, а в “keylist.txt” - текущая очередь запросов на парсинг, что позволяет при следующем запуске программы продолжить парсинг с места остановки.
ВНИМАНИЕ! - файл “keys.txt” с результатами парсинга перезаписывается при каждом запуске программы, не забывайте копировать сохраненные данные. Так же необходимо, что бы программа была развернута на весь экран, т.к. html-код в нижнем окне разбирается построчно и не должно быть лишних переносов строк, иначе запросы будут распознаны неверно.

Вот в принципе и все, но если все-таки запутаетесь в программе с тремя кнопками - пишите

Ну и напоследок еще небольшой подарок - база англоязычных кеев (где скачал не помню, давно это было ) - в распакованном виде 45 Мб, для начала хватит, дубли вычищены. В базе есть и фарма, и адалт, и много чего еще. А по второй ссылке доступна скачанная еще где-то база англоязычных адалт запросов.
Скачать базу eng-кеев (17 Mb).
Скачать базу adult eng-кеев (700 Kb).

Последние недели не хватает времени не только на проведение различных экспериментов, но и на описание их в блоге. Постараюсь серией постов до выходных, посвященных агрофитнесу, исправить ситуацию.

В первую очередь хочу рассказать об эксперименте по постингу в blogger через e-mail.

Решил я, стало быть, замонстрячить сетку автопополняемых кинодорвеев. Для чего и прикупил в магазине аккаунтов kak-tak.com 50 акков блоггера по сходной цене. Затем приступил к генерации дорвеев по очень простому шаблону: в первой строке - кейворд страницы, который в дальнейшем будет заголовком поста, а дальше простой текст, сгенерированный дорвеем, с кодами фидов и попапов безо всякой html-разметки.

Далее оставалось только настроить рассылку страниц дорвея по списку e-mail. Сначала попробовал проделать это через скрипт на php, но не смог побороть глюки с русскоязычной кодировкой писем. В итоге была на скорую руку написана десктопная прога на Делфи с расссылкой через учетню запись Outlook. В нее я и зарядил очередь сообщений с рассылкой по аккаунтам blogger-а раз в 6 часов.

Уже на следующий день можно было подвести неутешительные итоги: 49 из 50 блогов были сразу же помечены Blogger-ом как спамерские. Соответственно, в них показывалось только по одному первому сообщению, а все вновь присылаемые попадали в черновики. Помеченные таким образом блоги автоматически удаляются через двадцать дней, если их владелец не обратился в техподдержку с претензиями, но это, конечно, не в нашем случае

Почему 49 из 50? Просто на первом блоге я отлаживал программу рассылки, соответственно заходил в него и вручную правил и набирал посты. Но и ему я много жизни не оставил - для завершения эксперимента увеличил рассылку до 10 писем за раз, и блог на следующий день стал спамерским.

Дабы время на написание проги для рассылки не пропало даром, хочу в дальнейшем перенастроить ее на постинг через e-mail в wordpress. Тут риска бана никакого нет, а Гугл регулярно обновляемые сайты любит. Предположительно, работать буду по такой схеме (слегка геморно, но и планируемый выхлоп побольше):

• делается блог на WP, вручную набивается пара нормальных постов;
• блог прогоняется по rss-каталогам и dofollow-комментам;
• выжидаем время на модерацию каталогов, затем генерим и загружаем дор под wordpress как описано в предыдущем посте;
• дальше генерим еще страницы под рассылку и шлем в каждый блог по 1-2 поста в день;
• в итоге у нас готов регулярно обновляемый многостраничный сайт на WP с повышенной плотностью ключевых слов.

Для начала ответим на вопрос: а для чего нужен дорвей на WordPress?

Во-первых, такой дор можно залить на какой-нибудь бонусный фри-блогхостинг, ( например, WordPress.com ).

Во-вторых, с помощью плагинов можно настроить кросспостинг из вордпресса в кучу сервисов типа blogger, livejournal и т.п., тем самым увеличив количество страниц в индексе в несколько раз.

В-третьих, блоги на wordpress пока что сильно любят поисковики.

Ну, и в-четвертых, разбавив такой сплогодор ( или всё-таки доросплог? ) нормальными постами и замаскировав его таким образом под белый и пушистый сайт, мы сможем прогнать его по каталогам и по rss-каталогам. Соответственно, вместе с ссылочной массой вырастет и траф на такой дор.

Еще можно попробовать даже запихнуть такой сплог в сапу или другую биржу ссылок.

А теперь о том, как же все это дело замутить.
Вкратце суть идеи примитивно проста - представить выдачу доргена в виде rss-фида, а затем импортировать его в админке WordPress.

Расскажу подробно на примере доргена DoorWay.SU (качнуть можно здесь).

Создаем шаблон для доргена - файл index.html с таким текстом:

<item>
<title>{REDIRECT}</title>
<pubDate>06 Apr 2009</pubDate>
<content:encoded><![CDATA[сюда{CONTENT}и сюда нужно вписать скрипты партнерок]]></content:encoded>
</item>

В файле с редиректом прописываем только тэг {KEY} , больше никакого текста не нужно.

В результате получаем заголовок поста из ключевика и текст поста с ключевиками, сгенеренный доргеном. Естественно, рядом с тэгом {CONTENT} можно и нужно прописать коды ява-фидов и поп-ап баннеров, чтобы они у нас были в каждом посте блога. Дату поста можно указать произвольно, если не указывать совсем, то вордпресс при импорте подставит по умолчанию 1970 г.

Теперь запускаем дорген на генерацию, указываем ему нужные ключевики, текстовку и файл с редиректом. Чтобы в редирект подставился ключевик, нужно в настройках редиректа в доргене прописать в поле url какой-нибудь символ.

После прогона у нас получится папка с кучей html-файлов, каждый из которых представляет собой один пост будущего rss-фида. Остается объединить их в один файл, например, переименовать их в txt-файлы и склеить с помощью KeyWordKeeper.

Полученный файл нужно сохранить в формате Unicode (utf-8), в начало файла добавить шапку rss:

<?xml version=”1.0″ encoding=”utf-8″?>
<rss version=”2.0″
xmlns:content=”http://purl.org/rss/1.0/modules/content/”
xmlns:wfw=”http://wellformedweb.org/CommentAPI/”
xmlns:dc=”http://purl.org/dc/elements/1.1/”
xmlns:atom=”http://www.w3.org/2005/Atom” >
<channel>
<generator>http://wordpress.org/?v=2.7</generator>
<language>ru</language>

а в конец файла еще пару строк:

</channel>
</rss>

Вот и все, наш фид готов к импорту. Для этого идем в админку WordPress, выбираем меню “Управление/Импорт/RSS” и загружаем файл. Дорвей на WordPress готов!

И напоследок еще пара советов:
- В зависимости от производительности хостинга могут быть различные ограничения на размер импортируемого файла, по умолчанию в WordPress максимум 2 Мб, а вот мой хостинг, например,корректно загружает файлы не более 500 Кб, соответственно, большой файл придется разбить на несколько поменьше и импортировать поэтапно.
- Для начала сгенерите и импортируйте один пост, чтобы проверить корректность шаблона, кодировок и прочего.

Мега-хостинг Peterhost давеча подложил очередную свинью - неожиданно перенесли несколько сайтов, в числе которых был и этот блог, на другой сервак и завязанные на ip-шник домены стали недоступны на сутки. В результате новые доры, которые только начали плодотворно лезть в индекс, благополучно из Яши вылетели.

В связи с этим подыскиваю нормальный платный хостинг для дорвеев, т.к. надоедает под каждый новый дор регать фришник и ждать, пока к нему привяжется ру-домен. Пока что посматриваю в сторону axer.ru - у них есть интересные предложения по html-хостингу без поддержки php и mysql (для простых доров самое то) - всего за 200 руб можно взять 5 гигов места с анлим трафиком и неограниченным числом доменов. Или за те же деньги 2 Гб, но уже с php и с неограниченным числом баз данных - пригодится для сплогов. Если у кого есть отзывы о данном хостинге, черкните, плиз, в комментах.

Ну и обещанный линк на регистратора доменов - mnogodomenov.biz. Не знаю, как долго продлится акция, пока что регистрация ru-домена 80 рублей, продление - 90.

Давно хочется попробовать себя в фарме, а тут подоспел отличный стимул от Стимул Кэша, простите за каламбур . А именно - возможность выиграть отличный внедорожник Hummer H3 в полной комплектации.

Правила конкурса очень просты:
С 16 марта по 15 июля за каждые 100 продаж партнер Stimul-Cash получает один лотерейный билет. И по этим билетам в августе на специальной вечеринке состоится розыгрыш мега-внедорожника. Конечно, кроме главного приза будет разыграна куча полезных в хозяйстве вещей: ноутбуки, фото/видео камеры, игровые приставки и др.

Что немаловажно, Хаммер будет уже растаможен в России, так что победитель сможет спокойно уехать на нем с вечеринки домой.

Так что дружно регистрируемся в Stimul-Cash и вперед за Хаммером!