Если у вас возникли предложения по внесению изменений в руководство, свяжитесь с нами по контактам:

Вы пришли на страницу Wiki.SEDv4 с целью получить пошаговый мануал по созданию дорвеев на МобиДике, но не тут то было…

К сожалению, мы не можем научить каждого пользователя делать дорвеи или написать мануал как их нужно и как не нужно делать.

Вместо этого, мы можем максимально подробно описать все настройки и логику работы МобиДика, а какие из этих функций использовать и как это делать, пусть каждый дорвейщик решает для себя сам.

Кто-то будет делать простейшие дорвеи на сниппетах, без картинок и видео, кто-то будет имитировать картиночные галлереи, кто-то видео галлереи, а кто-то захочет делать более осмысленные дорвеи, используя для каждой категории свои ключевые слова, используя вставку своего текста на страницы, при помощи макросов.

Все в ваших руках, господа дорвейщики!

с уважением, SafariLive

Видео-инструкции, обязательные к просмотру совместно с чтением руководства, а также ДО его прочтения

Визуальная информация воспринимается гораздо легче чем текстовая, именно поэтому, в данном руководстве очень много скриншотов административной панели и отдельных ее частей, с цифровыми обозначениями на них и текстовой расшифровкой.

Текст и скриншоты это хорошо, но видео+комментарии воспринимаются еще лучше, поэтому наш программист постепенно создает видео, описывающие те или иные моменты работы с системой.

Все видео выкладываются по возможности в тех рубриках, в которых они актуальны, а также мы размещаем их в одном месте из которого они все доступны к просмотру.

По возможности выбирайте режим просмотра FULL HD.

Видео-инструкции к SEDv4 MobyDick

Порядок действий по созданию дорвеев на SEDv4

Хочется отметить что это самый простой порядок действий, он может отличаться у каждого дорвейщика.

Уважаемые клиенты, не забывайте что все страницы ваших дорвеев, при заходе на них, тут же ложаться в статический кеш! Если вы что-то изменили в настройках дорвея и не видите изменений, это именно поэтому! Чтобы измения на странице вступили в силу, вам нужно почистить кеш этого домена. Подробности о системе кеширования читайте в статье Кеширование в SEDv4

Для начала давайте определимся с 2мя понятиями:

  • Ядро системы - это тот скрипт, который вы устанавливаете
  • Терминалы - домены, взаимодействующие с ядром системы, на них отображаются ваши дорвеи.

Вы уже:

  1. просмотрели видео, в голове уже сформировалось определенное представление о скрипте, его возможностях
  2. ориентируетесь в админ панели
  3. добавили на сервер домены, которые собираетесь использовать для размещения дорвеев.
  4. добавили необходимые ссылки в крон задания сервера (ссылки можно найти здесь)
  5. находитесь в административной панели скрипта

1. Категорически запрещается устанавливать несколько ядер на 1 физический сервер. Это приведет к ошибке.

2. Очень важно чтобы все крон ссылки были добавлены в Cronjob вашего сервера, от этого зависят многие важные функции SEDv4

Приблизительный порядок действий, подготовка данных

  1. добавьте необходимые для создания дорвея базы ключевых слов
  2. создайте профиль и, если необходимо, профиль категорий
  3. добавьте по возможности IP интерфейсы и Прокси, чтобы избежать массовых банов от сервисов за парсинг
  4. если вам необходима филтрация сниппетов включите ее в Глобальных настройках, пункт [10], а затем создайте сами фильтры, используя регулярные выражения
  5. для более детальной статистики создайте, создайте группы ботов, разделив поисковых роботов например так: Яндекс, Гугл, ЯндексКартинки, ГуглКартинки, Все остальные (здесь добавьте юзер агенты различных, менее популярных в РУнете роботов, таких как Альтависта, MSN, Bing или сделайте наоборот, если работаете в иностранном сегменте сети)

Со стороны МобиДика все готово, но ведь нужно еще как-то его законнектить с вашими доменами и отображать информацию на них!

Способы отобразить ваши дорвеи на доменах-терминалах

Сразу хочется сказать - забудьте о привычной заливке сотен и тысяч файлов на домены.

Вся необходимая информация хранится на центральном сервере со всеми настройками и данными.

Есть 3 способа отображения дорвеев с этой информацией на ваших доменах-терминалах:


1 - Редактирование конфига веб-сервера/Автосоздание доменов и направление их на нужную папку, если сервер находится под управлением ISPmanager v4.


  • Если домены-терминалы находятся на одном сервере с ядром системы, вам достаточно в файле /etc/apache2/apache2.conf изменить у всех ваших доменов строку с DocumentRoot, она должна смотреть на директорию ядра. Это будет выглядеть примерно так DocumentRoot /var/www/пользователь/data/www/домен-ядра.ru/web
    • Перезапустить сервис апача /etc/init.d/apache2 restart
    • Таким образом все ваши домены-терминалы будут смотреть на директорию домена ядра системы в ее папку /web
    • Данные настройки верны для сервера, работающего на apache, для конфигурации apache+nginx или nginx+php-fpm может понадобится другая настройка.
    • Если вы не в состоянии самостоятельно справиться с такой настройкой, обратитесь к своему системному администратору за помощью

Также существует возможность автоматического добавления доменов-терминалов на сервер с использованием API ISPmanager (см. Добавить группу -> Добавление доменов в ISPmanager)


2 - Загрузка/Автозагрузка на домены файлов-терминалов через FTP (index.php, htaccess), php-проксирование


Также существует возможность автоматической заливки файлов-терминалов по FTP (см. Добавить группу -> Добавление доменов с FTP для заливки терминалов)


3 - Автоматическая загрузка на домены файлов-терминалов через WSO (index.php, htaccess), php-проксирование

Обращаем ваше внимание на то, что данный функционал был протестирован вот на этой версии WSO скрипта.

Обязательно ознакомьтесь с дополнительными настройками функционала заливки через WSO менеджеры в Глобальные настройки - Утилиты - WSO настройки

По сути, это тоже самое, что и предыдущий метод, здесь также нужно загрузить 2 терминальных файлика в директорию домена, расположенного на стороннем вебсервере. Эти файлики можно скачать как для Группы доменов (см. Управление группой -> Утилиты -> Зеркало), так и для каждого отдельного домена (см. Настройки домена -> Утилиты -> Зеркало).

Но есть нюанс - SED сам подбирает необходимую директорию. Поэтому необходимо использовать автоматизацию

Автоматическая заливка файлов-терминалов через WSO сразу, при создании группы дорвеев (см. Добавить группу -> Добавление доменов + WSO менеджер



После всех необходимых манипуляций, походите по созданным доменам, оцените качество созданных дорвеев, то ли это, что вы задумывали.

Навигация

После оплаты


* Что делать после оплаты?


Новое в SEDv4

* Новое в SEDv4 Это те обновления, информация о которых пока не вошла в данное руководство


Видео инструкции

* Видео-инструкции


Установка

* Настройки сервера

* Установка


Ошибки

* Что делать в случае ошибок?


Главная страница

* Главная страница

* Добавить группу

* Редактирование группы

* Управление группой

* Настройки домена


Глобальные настройки

* Главная

* Парсеры

* Интерфейсы

* Прокси

* Стоп-слова

* Макросы

* Шаблоны

* Профили

* Профили категорий

* БД ключей

* Фильтр сниппетов

* Настройки TwiFarm

* Боты

* Утилиты

* Системные логи


Домены

* Домены


Статистика

* Статистика


Новости

* Новости


Профиль

* Профиль


Обновление

* Обновление


Важные логики SEDv4

* Парсинг продвинутого контента

* Логика наследования данных от странице к странице

* Крон ссылки SEDv4

* Как происходит парсинг в SEDv4

* Создание своего парсера в SEDv4

* Все о шаблонах SEDv4

* Встроенный клоакинг SEDv4

* Кеширование в SEDv4


Нагрузка SEDv4

* Сколько дорвеев выдержит SEDv4


Пересечение ключей в дорвеях

* Пересечение ключей в дорвеях


Ответы на частые вопросы (FAQ)

* FAQ


Интересные мысли/солянка

* Уникальность контента

Печать/экспорт
QR Code
QR Code Видео-инструкции, обязательные к просмотру совместно с чтением руководства, а также ДО его прочтения (generated for current page)