SEDv4 «MobyDick» - генерируем трафик  

Video guide по «Moby Dick»

 

 

SEDv4 «Moby Dick» сегодня, какой он?

  • Это 100% работы только из административной панели после установки системы
  • Нет необходимости каждый раз устанавливать генератор или что-то куда-то самостоятельно заливать. Все делается из централизованной панели управления. Все домены дорвеев и сами дорвеи управляются из одного места!
  • Простая структура шаблонов, которую, с легкостью, освоит даже новичок
  • Обработка макросов в любых tpl файлах, находящихся в шаблоне, tpl файлы можно иклюдить в другие tpl файлы шаблона.
  • tpl файлы можно иклюдить в другие tpl файлы шаблона.
  • Встроенный менеджер и редактор шаблонов (создание/редактирование, импорт/экспорт шаблонов)
  • Возможность предпросмотра шаблона, создаваемого в редакторе
  • Встроенные парсеры видео (9), изображений (9) и текста сниппетов (21)
  • Универсальный парсер текста сайтов из выдачи
  • Возможность использовать предложения спаршенного текста as is или генерировать из них контент на основе 2-х алгоритмов
  • Возможность парсить контент с использованием: основного IP сервера, интерфейсов (дополнительных IP сервера), а также socks5/proxy, с авторизацией и без. Дополнительно могут быть настроены таймауты парсинга, лимит ошибок прокси.
  • Логика парсинга предусматривает возможные проблемы (бан прокси, интерфейса, недоступность сайта) и использует все имеющиеся возможности, чтобы получить контент
  • Возможность создания собственных парсеров (требуется знание PHP)
  • Фильтрация текста по языку (содержание кириллицы/латиницы), позволит не засорять дорвеи тем или иным видом языка в контенте
  • Фильтры (удаление лишнего) и нормализаторы текста (приведение первой буквы предложения к верх регистру, точка в конце предложения и т.д.), позволяют избавиться от лишнего мусора в нем и привести его к читаемому виду
  • Создание собственных фильтров текста на основе регулярных выражений
  • Фильтрация доменов позволит избежать парсинга контента с заведомо некачественных сайтов (бесплатные домены) и ограничить зону парсинга более-менее нормальными доменными зонами
  • 72 макроса, позволяющих создавать максимально уникальные и сложные структуры контента на странице, в том числе возможность создавать полную и короткую новости, выводить заданное количество и тип контента в нужных местах и многое другое.
  • Возможность создавать собственные макросы (требуется знание PHP)
  • Базы ключевых слов. Модуль, в который вы можете загрузить один раз свои базы ключевых слов, а затем использовать их постоянно уже из админ.панели.
  • Парсинг ключевых слов из статистики самих дорвеев в Li.ru
  • Поддержка Multikey - ключевые слова с дополнительными параметрами (Блузка женская;размер:38;цена 2000 руб)
  • Умная система разрастания (разрастание используется как опция.): ключ создаваемой страницы сравнивается с ключом текущей страницы и если процент совпадения меньше заданного (настраивается), такая страница создана не будет. Это позволяет сохранить тематичность разрастания.
  • Дополнительная фильтрация разрастания на основе групп стоп-слов. Под каждую тематику и случай, вы сможете создать свою группу стоп-слов для разрастания.
  • Отложенная публикация позволит создать видимость естественного наполнения
  • Встроенная клоакинг-система позволяет не показывать роботам, то, что вы показываете обычным посетителям, например фрейм на весь сайт. Существует возможность вести и добавлять свою базу поисковых роботов, а также пользоваться нашей (наша новая система сбора находится в разработке, она заменит базу redsed)
  • Модуль статистики посещаемости собирает статистику из сервиса Liveinternet.ru и позволяет видеть реальную посещаемость групп ваших дорвеев
  • Нет сотен и тысяч файлов, как у статических генераторов:
  • Если дорвеи располагаются на сервере с ядром системы - создается просто домен, а его DocumentRoot направляется на папку SEDv4 ядра.
  • Если дорвеи располагаются на стороннем хосте - генерируются файлы-терминалы (index.php и .htaccess) и только эти 2 файла заливаются в папку домена.
  • Поддержка создания групп дорвеев. Чтобы не путаться в тысячах дорвеев.
  • Система профилей. Позволяет создавать наборы предварительных настроек/правил, по которым будет создаваться группа дорвеев: выбор используемых шаблонов, баз ключевых слов, тайтлов, конфигураций ЧПУ страниц и путей к изображениям, наборов парсеров, фильтра языка, вкл/выкл разрастания, клоакинга и другие пред. настройки.
  • Помимо удобного массового создания, SEDv4 позволяет удобно размещать дорвеи на вашем оборудовании:
  • Создание доменов дорвеев через встроенный модуль ISPmanager API: создает домены на сервере автоматически, при генерации группы дорвеев, а также удаляет домены с сервера, при удалении группы (подробности). Актуально только для генерации дорвеев на одном с ядром системы сервере.
  • Заливка дорвеев через встроенный FTP менеджер Актуально для дорвеев, расположенных на отличных от веб-сервера ядра системы хостах.
  • Заливка дорвеев через встроенный WSO менеджер (подробности).
  • Комплексная система кеширования: файловый кеш (страницы и конфиги) + информация хранящаяся в БД MySQL (используется для перегенерации страниц, в случае удаления файлового кеша, чтобы избежать повторного парсинга информации).

    Мы неоднократно переделывали нашу систему, пытаясь найти оптимальные варианты по соотношению нагрузка/производительность. Прошлой весной, основываясь на предыдущем опыте, мы внесли серьезные изменения в архитектуру системы, полностью переписав frontend часть.

    По откликам наших пользователей это в разы улучшило ситуацию с нагрузкой и позволило дополнительно размещать сотни дорвеев на тех же мощностях за счет снижения нагрузки.
  • Модуль обновления, который позволяет максимально упростить обновления систем для наших клиентов.
  • MVC архитектура, модульность
  • Реализация на популярном фреймворке symfony (полностью переписанная frontend часть) + ORM Doctrine (MySQL)
  • 3 Уровня кэширования, страницы в итоге сводятся в статику
  • Масштабирование всей системы, для каждого домена отдельная БД
  • Парсеры написаны с помощью XPath, что сводит время парсинга страницы практически к 0, время работы парсеров = время загрузки донор-страницы
  • Модуль установки с минимумом телодвижений
  • Работает на apache+mod_rewrite+mysql+php 5.3 или nginx + mod_php/php-cgi/php-fpm (core 5.3 or higher) + mysql
  • Необходим IonCube
  • SEDv4 рассчитан на работу с большими объемами дорвеев и на опытных вебмастеров, в области создания большого количества трафикодобывающих сайтов.

    Поскольку вся нагрузка лежит на ядре системы, мы рекомендуем примерно такие конфигурации серверов под него:

    Intel Xeon™ E3-1230v2 (или близкий по параметрам 4х ядерник с тактовой частотой от 3 GHz), от 8-16 gb RAM

    Как показала практика и отзывы наших пользователей, одним из ключевых моментов конфигурации сервера является SSD (от 64 gb в зависимости от планируемого количества дорвеев) диск под файлы (ядро + файловый кеш в sqlite), а под MySQL базу можно взять hdd, она занимает много места, поэтому SSD будет небюджетно. По отзывам пользователей скорость работы системы и ее стабильность на SSD в разы лучше HDD.

Требования к серверу

Вы должны понимать, что мы можем перечислить лишь требования к софтовой "начинке" сервера, но никак не к железу, потому как "прожорливость" софта зависит лишь от того, как и при каких обстоятельствах он будет использован, сколько дорвеев будет на нем, какие объемы кеша будут у этих дорвеев и многое другое.

Все зависящее от нас, по оптимизации кода и архитектуры БД MySQL, сделано, весной 2014 был полностью переписана frontend часть системы и произведена масса различных оптимизаций в логике работы.

  • PHP 5.3 и выше (сборка должна быть дефолтная, со всеми включенными в нее модулями, а не урезанная/кастомная) + libcurl + pdo_sqlite
  • MySQL с InnoDB
  • Apache+mod_rewrite+mysql+php 5.3 или nginx + mod_php/php-cgi/php-fpm (core 5.3 or higher (на 5.6.6 есть проблемы, поэтому лучше выбирать версии 5.3, 5.4)) + mysql
  • IonCube loader

Цены и тарифы


Цена



Абонентская плата

  • Абонетская плата*: 30 wmz


Дополнительная лицензия на IP

  • Стоимость дополнительной лицензии на 1 IP: 50 wmz

* - Абонентская плата не является обязательным платежом, последняя, оплаченная вами версия скрипта будет работать без каких-либо дополнительных плат. Абонентская плата взымается только за обновления.


Скидка для наших клиентов


Как оплатить и получить скрипт?

* если вы в чем-либо сомневаетесь или вас интересуют предпродажные вопросы, не описанные на этой странице, свяжитесь с нами по контактам приведенным ниже.

Контакты и реквизиты

SEDv4 MobyDick купить со скидкой, контакты


СЕД4 МобиДик купить со скидкой, контакты

Наши продукты