Вот и вылетел падла через несколько аппов =D 3 или 4 прошло, не считал, больше не буду в аддурилку добавлять, посмотрю сколько такой проживет..
Богдан, лично для меня 3-4 аппа, это нефигово Очень даже, ибо иногда (а чего таить, в основном), дор вываливается из индекса через дней 5
Добрые люди. Стоит большая проблема с текстовкой. Перерыл не один десяток парсеров (и все они детские или медленные или некачественные). Нужен парсер многопоточный, желательно скрипт (можно дорогой), который мог бы делать в среднем 1 Гб текста в день (30 Гб текста в месяц) и аккуратненько ложить этот 1 Гб в текстовый файлик на сервере. Хорошо бы, если бы парсер парсил текст по указанным ссылкам с глубиной входа в сайт с фильтром по длине текста (подобие Webparsera, но не такого медленного). Есть мощные сервера для парсера. Кто-нибудь может посоветовать что-либо подобное и малоизвестное? (известные наши русские парсера такие как X-Parser-PRO и т.д. не подходят).
Так кто-нибудь знает что нибудь подобное? или близко к этому? Вам ничего не будет, если посоветуете - я весь трафик не заберу честно (тем более парсер по ссылкам). И с Пасхой всех.
А я начал эксперименты с первым дором. Сидит долго страниц 100 из 800 но даже в 50 ку не лезет. Я уже ночами не сплю, пытаюсь добиться хоть какой то подвижки. В итоге страницы добавляются но не двигаются. Так что копаюсь в шаблоне, модернизируя его
Вася, какие эксперименты, что ты там модернизируешь. А если он у тебя через 2 месяца вылезет, всё ждать будешь ... дёргаешь с топа шаб который нравится ScrapeBook'ом (плагин такой для firefox), всё шаб есть, и он точно то что нужно, тыкаешь туда макросы и генериш по 50 доров в день, и льёш льёш . Ну а если совсем туго с расстановкой, то дёргай с топа дор, смотри на сколько хорошо сидит, бери его шаб ну и тут уж совсем понятно куда какие макросы ставить, ибо за тебя уже всё сделали.
Не встречал такого в паблике, заказывать если только. Хз как вариант ContentDownloader, десктопная может в 10 потоков парсить саты, есть границы парсинга, сама тебе весь мусор html отфильтрует, может всё ложить в 1 файл, сама может распарсить сайт на ссылки через карту, краулером по страницам, по шаблону сам добавить можешь. Из минусов для тебя: щаблон нужно писать на каждый сайт (для твоих целей очень быстро), искать сайты чтоб гиг напарсить дофига времени нужно. Зато тематичный контент, программа простая, за пол дня разберёшься, у автора видосы есть. На просторах должна быть ломаная 11-я версия, можно попробовать поискать. p/s/ гиг контента это реально дохрена в сутки особенно если тематический заипёся искать доноров
За постоянный троллинг можно получить постоянный бан Dilerik , вбивай в гугл "inurl:map.html порно" и рипай шаблон. Вместо "порно" твоя тематика.
Да, просто боязно. Сделаешь 3000-6000 дорвеев за месяц, а не один в топ не попадет лол из за какой нибудь упущености, я же на фришках делаю. http://dertysany.narod.ru/dieta.html как карта вот этого недодора могла вылезти в топ.
Ну найти нормальных доров малость, так как глупые только не меняют название маппы. Это ты представь делать к примеру супер доры и тут же их палить ?
А что вы хотели, на фришках, конечно только количеством надо брать... Но можно было бы и на несколько инфошек раскошелиться, хотя бы ради эксперимента Но с фрихами, только если процесс автоматизирован. Я имею ввиду процесс регистрации. Тут пути три: или покупать зареганые уже аккаунты; или покупать автореггер; писать самому... Я выбрал 3 вариант, так как в наше время любой может написать реггер с нашими то возможностями. Есть куча эмуляторов, с ними и знания языков почти, или вообще не надо. Если интересно пишите в личку, тут разводить демагогию не хочу.