Сборки и пакеты

Вопросы специалистов

Портфолио MODX-клуба

Песочница

Эксперименты и исследования

Blog by Fi1osof

Ajax-овый импортер на десятки и сотни тысяч товаров.

Процессоры во frontend

Реализация "модульности" процессоров

Hamster-fox.ru Миграция с minishop на shopModx

Как стать членом клуба?

Релизы modxRepository 1.2.1-beta и modxSmarty 0.0.3-beta на modx.com

&#91;REVO&#93; Скрытая политика доступов Developer

Релиз modSociety-1.0.0-beta и modBlog-1.0.0-beta

Поможем вывести правильные пакеты в ТОП модулей MODX!

Кеширование настроек контекстов в MODX Revolution. Я негодую

Добрый день.
 Запланированные критерии вступления в Клуб будут введены позже. Пока что все на мое личное усмотрение.
 В данном случае считаю, что техническая специализация, наполнение вами своего профиля и краткий рассказ о себе — достаточно.
 Поздравляю с вступлением в наш Клуб!
 Переавторизуйтесь, чтобы права перегрузились.

Добрый день.
 Запланированные критерии вступления 

Спасибо большое

Не за что! 
 P.S. сорри, только увидел коммент.

Да, можно. 
 1. Можете посмотреть публичный коннектор компонента Gallery (там он наиболее полный).
 2. Я использую урезанную версию без лишних проверок, что-то типа этого:
 

<?php
$_REQUEST['ctx'] = 'web';
if(!isset($location)){
    $location = '';    
}

@session_cache_limiter('public');
define('MODX_REQP',false);
    
require_once dirname(dirname(dirname(dirname(dirname(__FILE__))))).'/config.core.php';
require_once MODX_CORE_PATH.'config/'.MODX_CONFIG_KEY.'.inc.php';
require_once MODX_CONNECTORS_PATH.'index.php';

if ($modx->user->hasSessionContext($modx->context->get('key'))) {
    $_SERVER['HTTP_MODAUTH'] = $_SESSION["modx.". $modx->context->get('key') .".user.token"];
} else {
    $_SESSION["modx." .$modx->context->get('key'). ".user.token"] = 0;
    $_SERVER['HTTP_MODAUTH'] = 0;
}

/* handle request */
if(!$path = $modx->getOption('mycomponent.core_path')){
    $path = $modx->getOption('core_path').'components/mycomponent/';
}
$path .=  'processors/web/';

$modx->request->handleRequest(array(
    'processors_path' => $path,
    'location' => $location,
));

И если надо, вызываю его другим коннектором, передавая $location в него.

Добрый день. Да, можно. 
 1. Можете посмотреть публичный коннектор компонента Gallery (там он наиболее полный).
 2. Я использую урезанную версию без лишних проверок, что-то типа этого: <?php
$_REQUEST['ctx'] = 'web';
if(!isset($location)){
    $location = '';    
}

@session_cache_limiter('public');
define('MODX_REQP',false);
    
require_once dirname(dirname(dirname(dirname(dirname(__FILE__))))).'/config.core.php';
require_once MODX_CORE_PATH.'config/'.MODX_CONFIG_KEY.'.inc.php';
require_once MODX_CONNECTORS_PATH.'index.php';

if ($modx->user->hasSessionContext($modx->context->get('key'))) {
    $_SERVER['HTTP_MODAUTH'] = $_SESSION["modx.". $modx->context->get('key') .".user.token"];
} else {
    $_SESSION["modx." .$modx->context->get('key'). ".user.token"] = 0;
    $_SERVER['HTTP_MODAUTH'] = 0;
}

/* handle request */
if(!$path = $modx->getOption('mycomponent.core_path')){
    $path = $modx->getOption('core_path').'components/mycomponent/';
}
$path .=  'processors/web/';

$modx->request->handleRequest(array(
    'processors_path' => $path,
    'location' => $location,
)); И если надо, вызываю его другим коннектором, передавая $location в него.

Добрый день. Да, можно. 
 1. Можете посмотреть пуб

Илья, привет!
 1. Ты используешь базовый процессор modObjectGetListProcessor. Переопределять в нем метод getData надо очень осторожно. Вот ты не очень удачно это сделал, так как ты из метода вынес очень полезные методы, такие как prepareQueryBeforeCount и prepareQueryAfterCount. Вот сравни:
 

public function getData() {
    $data = array();
    $limit = intval($this->getProperty('limit'));
    $start = intval($this->getProperty('start'));

    /* query for chunks */
    $c = $this->modx->newQuery($this->classKey);
    $c = $this->prepareQueryBeforeCount($c);
    $data['total'] = $this->modx->getCount($this->classKey,$c);
    $c = $this->prepareQueryAfterCount($c);

    $sortClassKey = $this->getSortClassKey();
    $sortKey = $this->modx->getSelectColumns($sortClassKey,
		$this->getProperty('sortAlias',$sortClassKey),'',array($this->getProperty('sort')));
    if (empty($sortKey)) $sortKey = $this->getProperty('sort');
    $c->sortby($sortKey,$this->getProperty('dir'));
    if ($limit > 0) {
        $c->limit($limit,$start);
    }

    $data['results'] = $this->modx->getCollection($this->classKey,$c);
    return $data;
}

Так вот как раз на уровне этих методов и происходит вклинивание в формирование запроса. То есть в расширяющем процессоре ты пишешь примерно следующее:
 

public function prepareQueryBeforeCount(xPDOQuery $c) {
    $c = parent::prepareQueryBeforeCount($c);
    // Добавляешь условия к запросу
    return $c;
}

Это тебе позволит не лезть в общую логику.
 

2. По поводу самой логики: я сам чаще всего использую только два метода:
 а) Расширение классов (переопределяя методы типа prepareQueryBeforeCount)
 б) Передачей параметров. К примеру вот часть кода процессора:
 

class ....{
    public function initialize(){
        $this->setDefaultProperties(array(
            'hot'    => false,         // Флаг, что делать только выборку новинок
        ));
        return parent::initialize();
    }

	public function prepareQueryBeforeCount(xPDOQuery $c) {
		$c = parent::prepareQueryBeforeCount($c);
		 
		
		// Если указано, что нужны только новинки
		if($this->getProperty('hot')){
			// Добавляем условие только новинок
			
		}
		
		return $c;
	}
    
}

И вот уже при вызове этого процессора ты просто передаешь параметр 'hot' => true и все. По умолчаниюу тебя стоит 'hot' => false.

Илья, привет!
 1. Ты используешь базовый процессор modObjectGetListProcessor. Переопределять в нем метод getData надо очень осторожно. Вот ты не очень удачно это сделал, так как ты из метода вынес очень полезные методы, такие как prepareQueryBeforeCount и prepareQueryAfterCount. Вот сравни: public function getData() {
    $data = array();
    $limit = intval($this->getProperty('limit'));
    $start = intval($this->getProperty('start'));

    /* query for chunks */
    $c = $this->modx->newQuery($this->classKey);
    $c = $this->prepareQueryBeforeCount($c);
    $data['total'] = $this->modx->getCount($this->classKey,$c);
    $c = $this->prepareQueryAfterCount($c);

    $sortClassKey = $this->getSortClassKey();
    $sortKey = $this->modx->getSelectColumns($sortClassKey,
		$this->getProperty('sortAlias',$sortClassKey),'',array($this->getProperty('sort')));
    if (empty($sortKey)) $sortKey = $this->getProperty('sort');
    $c->sortby($sortKey,$this->getProperty('dir'));
    if ($limit > 0) {
        $c->limit($limit,$start);
    }

    $data['results'] = $this->modx->getCollection($this->classKey,$c);
    return $data;
} Так вот как раз на уровне этих методов и происходит вклинивание в формирование запроса. То есть в расширяющем процессоре ты пишешь примерно следующее: public function prepareQueryBeforeCount(xPDOQuery $c) {
    $c = parent::prepareQueryBeforeCount($c);
    // Добавляешь условия к запросу
    return $c;
} Это тебе позволит не лезть в общую логику. 2. По поводу самой логики: я сам чаще всего использую только два метода:
 а) Расширение классов (переопределяя методы типа prepareQueryBeforeCount)
 б) Передачей параметров. К примеру вот часть кода процессора: class ....{
    public function initialize(){
        $this->setDefaultProperties(array(
            'hot'    => false,         // Флаг, что делать только выборку новинок
        ));
        return parent::initialize();
    }

	public function prepareQueryBeforeCount(xPDOQuery $c) {
		$c = parent::prepareQueryBeforeCount($c);
		 
		
		// Если указано, что нужны только новинки
		if($this->getProperty('hot')){
			// Добавляем условие только новинок
			
		}
		
		return $c;
	}
    
} И вот уже при вызове этого процессора ты просто передаешь параметр 'hot' => true и все. По умолчаниюу тебя стоит 'hot' => false.

Илья, привет!
 1. Ты используешь базовый процессор

А, все, понял, спасибо)))

Пожалуйста.
 Можешь скачать магазин и посмотреть как там сделано.

Пожалуйста.
 Можешь скачать магазин и посмотреть к

Я туда и смотрю) Просто в этом процессоре мне количество и не нужно — пользователь один, а уже присоединенных объектов много. Еще надо будет посмотреть, можно ли после Join'ов ограничивать количество и сортировать присоединенные записи…

Я туда и смотрю) Просто в этом процессоре мне коли

Просто в этом процессоре мне количество и не нужно — пользователь один

Так а что же ты тогда используешь modObjectGetListProcessor? Используй modObjectGetProcessor он делает выборку только одного процессора.
 

Еще надо будет посмотреть, можно ли после Join'ов ограничивать количество и сортировать присоединенные записи…

Все эти вещи выполняются в list-процессорах пакета shopModx. Посмотри как это там выполняется. Лично я исползую их практически везде, и еще не было задачи, на которую мне не хватало бы getdata-процессора.
 

P.S. если у тебя суперузкопрофильная задача, тогда вообще используй просто modPropcessor, и основную логику пиши в методе process.

Просто в этом процессоре мне количество и не нужно — пользователь один Так а что же ты тогда используешь modObjectGetListProcessor? Используй modObjectGetProcessor он делает выборку только одного процессора. Еще надо будет посмотреть, можно ли после Join'ов ограничивать количество и сортировать присоединенные записи… Все эти вещи выполняются в list-процессорах пакета shopModx. Посмотри как это там выполняется. Лично я исползую их практически везде, и еще не было задачи, на которую мне не хватало бы getdata-процессора. P.S. если у тебя суперузкопрофильная задача, тогда вообще используй просто modPropcessor, и основную логику пиши в методе process.

Просто в этом процессоре мне количество и не нужно

Николай, здравствуйте!
 

Как раз зарегистрировался на сайте чтобы узнать у Вас про форум для MODX, и тут такая интересная новость. Однозначно нужно вынести на главную. 
 

Установлю и попробую запустить. Есть ли какие-либо обязательные расширения для того, чтобы все заработало? (GetResources и.т.п?)

Николай, здравствуйте! Как раз зарегистрировался на сайте чтобы узнать у Вас про форум для MODX, и тут такая интересная новость. Однозначно нужно вынести на главную. Установлю и попробую запустить. Есть ли какие-либо обязательные расширения для того, чтобы все заработало? (GetResources и.т.п?)

Николай, здравствуйте! Как раз зарегистрировался н

Зажигаешь. Даже не успеваю всё поставить и проверить, но я попробую =)

Зажигаешь. Даже не успеваю всё поставить и провери

верни статью на этот сайт

Доброго времени суток, Иван!
 Топик вынес на главную. Но вообще это старая тема, просто переношу свои старые топики с коммунити.
 А вообще тема требует развития, и оно обязательно будет. Просто сейчас я плотно развиваю eCommerce в лице shopModx, но движок для социалок также в обязательном порядке будет доведен до ума.
 

Есть ли какие-либо обязательные расширения для того, чтобы все заработало? (GetResources и.т.п?)

Нет. Ничего такого не требуется. Но подобные пакеты так же могут вам в чем-то помочь. Это все равно, как вы можете и без getResources обойтись, и самостоятельно вывести список дочерних документов, но все равно используете getResources, просто потому что так легче. Но в целом все мои решения рассчитаны все-таки на использование API MODX.

Доброго времени суток, Иван!
 Топик вынес на главную. Но вообще это старая тема, просто переношу свои старые топики с коммунити.
 А вообще тема требует развития, и оно обязательно будет. Просто сейчас я плотно развиваю eCommerce в лице shopModx, но движок для социалок также в обязательном порядке будет доведен до ума. Есть ли какие-либо обязательные расширения для того, чтобы все заработало? (GetResources и.т.п?) Нет. Ничего такого не требуется. Но подобные пакеты так же могут вам в чем-то помочь. Это все равно, как вы можете и без getResources обойтись, и самостоятельно вывести список дочерних документов, но все равно используете getResources, просто потому что так легче. Но в целом все мои решения рассчитаны все-таки на использование API MODX.

Доброго времени суток, Иван!
 Топик вынес на главн

Да это старая тема :) ShopModx по своей природе более поздний продукт.

Да это старая тема :) ShopModx по своей природе бо

ОК. Завтра сделаю.

То есть надо сразу щупать ShopModx?

Вообще да. Причем сразу лучше эту готовую сборку, так как там уже настроены на совместную работу modxSite, shopModx, phpTemplates, modxSmarty и прочие тонкости. Эти пакеты сами по себе очень не плохие, но максимальный эффект именно от совместного использования получаешь.
 А там уже технологии освоишь и без проблем в modSociety разберешься, потому что принципы те же используются.

Вообще да. Причем сразу лучше эту готовую сборку, 

Прикольными скачками я тебя догоняю. phpTemplates, modxSmarty уже мною используется.
 По поводу ShopModx сборки, то ты там пугаешь слегка — «Внимание!!! Не пытайтесь это установить на готовый сайт! Все затрется нафиг.». Начну с модулей. Направление изучения понял. Спасибо.

Прикольными скачками я тебя догоняю. phpTemplates,

По поводу ShopModx сборки, то ты там пугаешь слегка

И не напрасно. Кто-нить как попробует накатить это на боевой сайт, и затрет его нафиг. И кто будет виноват? Конечно я, а не тот, кто бекапы не делает перед обновлением и вообще.

По поводу ShopModx сборки, то ты там пугаешь слегка И не напрасно. Кто-нить как попробует накатить это на боевой сайт, и затрет его нафиг. И кто будет виноват? Конечно я, а не тот, кто бекапы не делает перед обновлением и вообще.

По поводу ShopModx сборки, то ты там пугаешь слегк

Я врубился, что не зря. А то чуть не накатил поверх рабочего=) 
 (шутка)

Я врубился, что не зря. А то чуть не накатил повер

Лайкнул каждый пакет. Давайте поддержим Николая, ведь реально хорошие вещи делает.

Лайкнул каждый пакет. Давайте поддержим Николая, в

Спасибо! :-)

Вернули :-)

Получилось еще сократить время загрузки главной страницы с одной секунды до 0.4-0.6
 Оказывается, забыли про phpthumbof, который постоянно читает директорию кеша. В настройках выставил phpthumb_cache_maxage, phpthumb_cache_maxfiles и phpthumb_cache_maxsize в ноль, и стразу все зашуршало.

Получилось еще сократить время загрузки главной ст

Я эти три параметра уже изнасиловал, но так ничего и не ускорилось. Насилую дальше.

Я эти три параметра уже изнасиловал, но так ничего

для справедливости должен сообщить, что у меня был включенным xdebug, который я успешно забыл. ну и тормоза конечно. рука-лицо.

для справедливости должен сообщить, что у меня был

Добрый день, Николай. А чем именно не понравился стандартный компонент MODx.Console? Я делал на нем импорт 300 000 позиций и нареканий с ним не было. Конечно там может перекосить регистры, на которых он, собственно, и работает, но в целом компонент мне показался довольно стабильным.

Добрый день, Николай. А чем именно не понравился с

эти параметры насиловать не надо. Если значения не нулевые, то будет выполняться подсчет значений. А это зверское чтение файловой системы.

эти параметры насиловать не надо. Если значения не

А чем именно не понравился стандартный компонент MODx.Console?

1. Тем, что он запросы шлет асинхроннонные, и не дожидаясь ответа, шлет новый запрос. (возможность переключить провайдер в синхронный режим я не нашел. Если вы знаете как, поделитесь, полезно будет).
 2. Слишком хитрая система записи логов в файлы и чтения ответов из них. По-моему избыточная сложность.
 

Я ранее уже делал импортер с использованием стандартной консоли MODX-а ( www.youtube.com/watch?feature=player_detailpage&v=fpkfFbInV88#t=44s ), и хочу сказать, что второй вариант мне показался более простым и гибким.

Добрый день. А чем именно не понравился стандартный компонент MODx.Console? 1. Тем, что он запросы шлет асинхроннонные, и не дожидаясь ответа, шлет новый запрос. (возможность переключить провайдер в синхронный режим я не нашел. Если вы знаете как, поделитесь, полезно будет).
 2. Слишком хитрая система записи логов в файлы и чтения ответов из них. По-моему избыточная сложность. Я ранее уже делал импортер с использованием стандартной консоли MODX-а ( www.youtube.com/watch?feature=player_detailpage&v=fpkfFbInV88#t=44s ), и хочу сказать, что второй вариант мне показался более простым и гибким.

Добрый день. А чем именно не понравился стандартны

То есть реальных проблем со стандартной консолью не было, просто свое решение задачи?
 

(возможность переключить провайдер в синхронный режим я не нашел. Если вы знаете как, поделитесь, полезно будет).

Нет, я ничего подобного в коде не видел, когда мне нужен был этот компонент. Чтобы все это дело заставить дожидаться ответа действительно придется переписывать консоль.
 А вы как обошлись без передачи логов через файлы между работающим скриптом импорта и Javascript-формой?

То есть реальных проблем со стандартной консолью не было, просто свое решение задачи? (возможность переключить провайдер в синхронный режим я не нашел. Если вы знаете как, поделитесь, полезно будет). Нет, я ничего подобного в коде не видел, когда мне нужен был этот компонент. Чтобы все это дело заставить дожидаться ответа действительно придется переписывать консоль.
 А вы как обошлись без передачи логов через файлы между работающим скриптом импорта и Javascript-формой?

То есть реальных проблем со стандартной консолью н

То есть реальных проблем со стандартной консолью не было, просто свое решение задачи?

Асинхронные запросы без ожидания ответа — это и есть большая проблема. Здесь важно, чтобы каждый запрос обрабатывался последовательно, так как, к примеру, нельзя перейти к шагу импорта записей во временную таблицу, пока эта таблица не очищена.
 

А вы как обошлись без передачи логов через файлы между работающим скриптом импорта и Javascript-формой?

Все просто: идет запрос на сервер, и с сервера информация поступает в ответе через стандартное return $this->success($msg, $object);

То есть реальных проблем со стандартной консолью не было, просто свое решение задачи? Асинхронные запросы без ожидания ответа — это и есть большая проблема. Здесь важно, чтобы каждый запрос обрабатывался последовательно, так как, к примеру, нельзя перейти к шагу импорта записей во временную таблицу, пока эта таблица не очищена. А вы как обошлись без передачи логов через файлы между работающим скриптом импорта и Javascript-формой? Все просто: идет запрос на сервер, и с сервера информация поступает в ответе через стандартное return $this->success($msg, $object);

Асинхронные запросы без ожидания ответа — это и есть большая проблема. Здесь важно, чтобы каждый запрос обрабатывался последовательно, так как, к примеру, нельзя перейти к шагу импорта записей во временную таблицу, пока эта таблица не очищена.

В базовой версии это компенсировалось тем, что весь импорт выполнялся в рамках одного процессора, а в нем действия могут выполняться только последовательно. А веб-форма просто проверяла регистр на наличие новых сообщений. Таким образом логика работы процессора не могла нарушиться асинхронными запросами.
 

Мне непонятен следующий момент. Вы выполняете импорт в процессоре, а во время импорта процессор не может ответить на запрос формы, так как он уже начал свою работу и нужен какой-то промежуточный обмен данными между работающим процессором и формой. Он должен сохранять сообщения о ходе операции, чтобы форма запросом к промежуточному скрипту могла отобразить все сообщения работающего процессора. Так работает стандартная консоль + процессор. Сам процессор кладет сообщения в регистр и форма их потом забирает. Как вы смогли избавиться от промежуточного стека сообщений?

Асинхронные запросы без ожидания ответа — это и есть большая проблема. Здесь важно, чтобы каждый запрос обрабатывался последовательно, так как, к примеру, нельзя перейти к шагу импорта записей во временную таблицу, пока эта таблица не очищена. В базовой версии это компенсировалось тем, что весь импорт выполнялся в рамках одного процессора, а в нем действия могут выполняться только последовательно. А веб-форма просто проверяла регистр на наличие новых сообщений. Таким образом логика работы процессора не могла нарушиться асинхронными запросами. Все просто: идет запрос на сервер, и с сервера информация поступает в ответе через стандартное return $this->success($msg, $object); Мне непонятен следующий момент. Вы выполняете импорт в процессоре, а во время импорта процессор не может ответить на запрос формы, так как он уже начал свою работу и нужен какой-то промежуточный обмен данными между работающим процессором и формой. Он должен сохранять сообщения о ходе операции, чтобы форма запросом к промежуточному скрипту могла отобразить все сообщения работающего процессора. Так работает стандартная консоль + процессор. Сам процессор кладет сообщения в регистр и форма их потом забирает. Как вы смогли избавиться от промежуточного стека сообщений?

Асинхронные запросы без ожидания ответа — это и ес

В базовой версии это компенсировалось тем, что весь импорт выполнялся в рамках одного процессора, а в нем действия могут выполняться только последовательно. А веб-форма просто проверяла регистр на наличие новых сообщений. Таким образом логика работы процессора не могла нарушиться асинхронными запросами.

А вы условие в топике читали:
 

при чем так, чтобы уложиться в 30 секунд и 64 Mb памяти

Уверены, что 30 секунд нам будет достаточно, чтобы прогрузить 13 000 товаров? Эту проблему данный компонент и решает — он в цикле шлет кучу запросов, на каждый из которых может уходить до 30-ти секунд. Таким образом импортер хоть сутки может крутиться и прогрузить хоть миллион товаров.
 

Вы выполняете импорт в процессоре, а во время импорта процессор не может ответить на запрос формы, так как он уже начал свою работу и нужен какой-то промежуточный обмен данными между работающим процессором и формой.

Вы в целом не уловили смысла этого решения. Смысл в том, что вся процедура разбивается на кучу шагов. То есть запрос отрабатывает запрос, возвращает ответ, консоль кушает ответ и опять шлет запрос, и т.д. и т.п., пока процессор не вернет «COMPLITED».

В базовой версии это компенсировалось тем, что весь импорт выполнялся в рамках одного процессора, а в нем действия могут выполняться только последовательно. А веб-форма просто проверяла регистр на наличие новых сообщений. Таким образом логика работы процессора не могла нарушиться асинхронными запросами. А вы условие в топике читали: при чем так, чтобы уложиться в 30 секунд и 64 Mb памяти Уверены, что 30 секунд нам будет достаточно, чтобы прогрузить 13 000 товаров? Эту проблему данный компонент и решает — он в цикле шлет кучу запросов, на каждый из которых может уходить до 30-ти секунд. Таким образом импортер хоть сутки может крутиться и прогрузить хоть миллион товаров. Вы выполняете импорт в процессоре, а во время импорта процессор не может ответить на запрос формы, так как он уже начал свою работу и нужен какой-то промежуточный обмен данными между работающим процессором и формой. Вы в целом не уловили смысла этого решения. Смысл в том, что вся процедура разбивается на кучу шагов. То есть запрос отрабатывает запрос, возвращает ответ, консоль кушает ответ и опять шлет запрос, и т.д. и т.п., пока процессор не вернет «COMPLITED».

В базовой версии это компенсировалось тем, что вес

Я уже где-то читал и понял о нулях, но ничего не выходило. Спасибо за напоминание. 
 

И вот как я сделал в итоге: поставил нули в трех параметрах совершенно без надежды, отключил xdebug (сам по себе уже был отключен, но я вырубил модуль полностью), включил memcached на 1 гиг для общего кеша сайта и просто для понта, удалил вручную кеш modx, ребутнул Apache2, ребутнул memcached — запустил…
 

Ускорение где-то в пределах от 1,5 до 6 раз. (диапазон ранее был 1-3,5 секунды для тяжелой морды и для залогиненного юзера теперь снизился до 0.68-0,8 при нулевом изменении кода сайта при равных условиях нагрузки). 
 

А для анонимусов там вообще другая заварка.
 

Я уже где-то читал и понял о нулях, но ничего не выходило. Спасибо за напоминание. И вот как я сделал в итоге: поставил нули в трех параметрах совершенно без надежды, отключил xdebug (сам по себе уже был отключен, но я вырубил модуль полностью), включил memcached на 1 гиг для общего кеша сайта и просто для понта, удалил вручную кеш modx, ребутнул Apache2, ребутнул memcached — запустил… Ускорение где-то в пределах от 1,5 до 6 раз. (диапазон ранее был 1-3,5 секунды для тяжелой морды и для залогиненного юзера теперь снизился до 0.68-0,8 при нулевом изменении кода сайта при равных условиях нагрузки). А для анонимусов там вообще другая заварка. ?

Я уже где-то читал и понял о нулях, но ничего не в

Не было возможности посмотреть видео со звуком, а в описании к видео недостаточно информации. Там вы все хорошо объясняете. А по видео слишком уж похоже на стандартный импорт и разницы в подходе не видно.
 Прошу меня простить за поспешность.

Не было возможности посмотреть видео со звуком, а 

Ничего страшного.

Опишите, пожалуйста, параметры хостинга и версию минишопа в оригинале на сайте.

Опишите, пожалуйста, параметры хостинга и версию м

Минишоп 1.6.2-rc
 Параметры хостинга запросил, но пока ответа нет. Как только будет (если будет), отпишу. Знаю только что это как минимум VPS, а не простой шаредхостинг, и память и т.п. ему поднимали, ибо нет мочи.
 

Но для сравнения скажу, что на другом моем выделенном облачном сервере, где было 16 ядер и 1,5-2 гига памяти, оригинальный сайт отрабатывал в среднем за 8-10 секунд. А уже с изменениями сайт отрабатывал за эти 0,5-1 сек. К сожалению, с отключенной проверкой phpthumbOf я не успел проверить, сейчас этого облака уже нет. Да и скоро самого Galaxy и не останется.

Минишоп 1.6.2-rc
 Параметры хостинга запросил, но пока ответа нет. Как только будет (если будет), отпишу. Знаю только что это как минимум VPS, а не простой шаредхостинг, и память и т.п. ему поднимали, ибо нет мочи. Но для сравнения скажу, что на другом моем выделенном облачном сервере, где было 16 ядер и 1,5-2 гига памяти, оригинальный сайт отрабатывал в среднем за 8-10 секунд. А уже с изменениями сайт отрабатывал за эти 0,5-1 сек. К сожалению, с отключенной проверкой phpthumbOf я не успел проверить, сейчас этого облака уже нет. Да и скоро самого Galaxy и не останется.

Минишоп 1.6.2-rc
 Параметры хостинга запросил, но 

Спасибо, интересно читать подробные кейсы, понимаешь ограничения и места возможного искривления рук в процессе разработки)

Спасибо, интересно читать подробные кейсы, понимае

Конкретно в данном случае на хостинг вообще не получается грешить. Здесь проблема именно из-за использования модифицированного getResources. Посмотрите формируемый запрос, и если хоть какой-то опыт с MySQL имеете, то поймете, что он весьма не слабый: gist.github.com/Fi1osof/c3aafeb797c20f370b73
 Но проблема и не столько в самом запросе, сколько в процессе формирования этого запроса. Много циклов, много запросов к БД и т.п.

Конкретно в данном случае на хостинг вообще не пол

Хороший инструмент для убийства, так понимаю модификация сниппета была значительная?

Хороший инструмент для убийства, так понимаю модиф

Нет, сниппет совершенно не трогали. Здесь в принципе не использовались механизмы минишопа для выборки товаров из каталога. Здесь использовались list-процессоры из shopModx-а. А в остальном все работает на самом минишопе (точнее должно работать, так как где-то при переносе на облако что-то поломалось, скорее всего из-за коротких <?, которые не воспринимаются modxcloud-ом. Но мне пока не до этих мелочей. Задача стояла только в оптимизации вывода каталога).
 То есть минишоп справлялся со всеми задачами на сайте, кроме выборки товаров из этого не маленького каталога.

Нет, сниппет совершенно не трогали. Здесь в принци

Спасибо за развернутый ответ.

Пожалуйста

Привет Николай! Установил и поигрался немного с modSociety и modBlog.
 

Все таки оказалось, что дополнительные расширения нужны (если ставить на чистый MODX):
 — Login для авторизации :) 
 — включенные Friendly URLs с параметром use_alias_path = Yes
 Тогда все работает как надо.
 

Единственное, не получилось дать ума modBlog при установке в новый контекст. Пытался сделать это на Dev облаке MODXCloud. Если устанавливать в контекст web — работает нормально и блоги создаются. Но если при установке указать «Создать новый контекст» (допустим Forum) то странички этого контекста не открываются, а открывается контекст web. Я уверен, что что-то не так настроено в облаке. Не подскажите, что? (Ставил на чистое облако)

Привет Николай! Установил и поигрался немного с modSociety и modBlog. Все таки оказалось, что дополнительные расширения нужны (если ставить на чистый MODX):
 — Login для авторизации :) 
 — включенные Friendly URLs с параметром use_alias_path = Yes
 Тогда все работает как надо. Единственное, не получилось дать ума modBlog при установке в новый контекст. Пытался сделать это на Dev облаке MODXCloud. Если устанавливать в контекст web — работает нормально и блоги создаются. Но если при установке указать «Создать новый контекст» (допустим Forum) то странички этого контекста не открываются, а открывается контекст web. Я уверен, что что-то не так настроено в облаке. Не подскажите, что? (Ставил на чистое облако)

Привет Николай! Установил и поигрался немного с mo

Добрый день.
 Да, Login надо ставить (я стараюсь не раздувать пакеты лишними кодами), ЧПУ тоже включать самостоятельно (может кому-то не надо).
 Про контексты — здесь все как обычно. Смотрите index.php, там инициализируется контекст web ($modx->initialize('web');). Или меняйте там на свой контекст вместо web, или плагин вешайте на событие OnHandlerRequest и делайте $modx->switchContext($ctx);

Добрый день.
 Да, Login надо ставить (я стараюсь н

Сегодня основательно перелопатил боевой сайт. Очень подробный топик здесь: modxclub.ru/blog/modx-club-portfolio/152.html

Сегодня основательно перелопатил боевой сайт. Очен

Доброго времени суток!
 А можно и меня зачислить в клуб?
 В MODX пришел совсем недавно, после того, как NetCat нахлобучил с лицензиями… Пришлось, вобщем, проект переписывать. 
 Сложилось мнение, что MODX, как Linux — не ты ее выбираешь, а она тебя… :-)
 С уважением.

Доброго времени суток!
 А можно и меня зачислить в

Доброго!
 Зачислил. Переавторизуйтесь.

Попробовал поставить модуль, он убил юзера admin. В базе поставил ему: admin SocietyUser. 
 В логах modx запротоколировал Could not load class: SocietyUser from mysql.societyuser.

Попробовал поставить модуль, он убил юзера admin. 

Ты что-то не то сделал. 
 

В логах modx запротоколировал Could not load class: SocietyUser from mysql.societyuser.

Пользователь физически должен быть. Это MODX не может найти класс пользователя. Проверь добавлен ли extension package на настройки системы.
 Можешь в личку прислать логин и пароль к админке и phpMyAdmin, я гляну.

Ты что-то не то сделал. В логах modx запротоколировал Could not load class: SocietyUser from mysql.societyuser. Пользователь физически должен быть. Это MODX не может найти класс пользователя. Проверь добавлен ли extension package на настройки системы.
 Можешь в личку прислать логин и пароль к админке и phpMyAdmin, я гляну.

Ты что-то не то сделал. В логах modx запротоколиро

А почему именно 30, а не 40 или 20 сек.? У меня просто была проблема с компонентом от Andchir, в общем при импорте на 30-й секунде была проблема…

А почему именно 30, а не 40 или 20 сек.? У меня пр

Не я это придумал. Это стандартный порог в настройках нгинкса, апача и т.п.
 В настройках можно его изменить, если VPS или типа того.

Не я это придумал. Это стандартный порог в настрой

Добрый день!
 Хотелось бы вступить в Ваш клуб, это возможно?

Добрый день!
 Хотелось бы вступить в Ваш клуб, это

Добрый день!
 Сорри, но пока нет. Сборка доступна для скачивания итак, вопросы можно задавать без ограничения.

Добрый день!
 Сорри, но пока нет. Сборка доступна 

Добрый день, Николай. Делаю небольшой магазин на ShopModX. Столкнулся с проблемой импорта товаров из выгрузки на Яндекс.Маркет. Можно ли где-то посмотреть пример как правильно импортировать в ShopModX товары? Сам изучение ModX начал недавно. Хотелось самому разобраться, да вот пока не очень получается с импортом…

Добрый день, Николай. Делаю небольшой магазин на S

Можно чуть подробней про этот «импорт товаров из выгрузки на Яндекс.Маркет»? Экспорт в Я.Маркет не рассчитан на то, чтобы его импортировали потом на сайте. Это чисто выгрузка на яндекс.

Можно чуть подробней про этот «импорт товаров из в

Мой клиент является партнером одной фирмы, у которой есть сайт, с этого сайта мне предоставляют выгрузку в Яндекс.Маркет, чтобы я разместил ее на сайте клиента.

Мой клиент является партнером одной фирмы, у котор

Ну, если там выгрузка подробная, то ее можно использовать.
 Используйте SimpleXML, загружайте их файл и создавайте/обновляйте ресурсы на своем сайте. Если опыта нет и не справитесь, можем написать импортер. Цена 3000 рублей.

Ну, если там выгрузка подробная, то ее можно испол

Добрый день!
 Насколько сложно мигрировать магазин с minishop 1 версии на shopmodx? Нет никакой универсальной последовательности действий? Замучался я с минишопом уже.

Добрый день!
 Насколько сложно мигрировать магазин

Добрый день!
 Я не могу дать универсальный рецепт по переносу, так как каждый проект на MODX-е все-таки выполняется индивидуально, и 10 сайтов на минишопе могут быть в итоге абсолютно по разному разработаны. Тем не менее мы уже довольно много магазинов перенесли как с минишопа, так и с шопкипера (да и просто с самописок), так что задача вполне решаемая. Киньте в личку ссылку на свой магазин, а так же вкратце напишите про самые сложные модули и задачи, которые там были введены или хотелось бы ввести, но не получается. Я тогда оценю сложность или не сложность переезда в целом.

Добрый день!
 Я не могу дать универсальный рецепт 

Добрый день! 
 А можно ли где-то скачать данный импортер?

Добрый день! 
 А можно ли где-то скачать данный им

Добрый день!
 Пока нет. Это вещь чисто индивидуальная, настраиваемая на отдельных проектах. Но не исключено появление какой-то более массовой вариации.

Добрый день!
 Пока нет. Это вещь чисто индивидуаль

Но не исключено появление какой-то более массовой вариации. 

По прежнему нельзя скачать данный импортер?

Добрый день Николай! Но не исключено появление какой-то более массовой вариации. По прежнему нельзя скачать данный импортер?

Добрый день Николай! Но не исключено появление как

Пока что да. Но, думаю скоро появится:)

ладно, подождем…

Добрый вечер! Подскажите по поводу getdata-процессора.
 По аналогии с новинками хочу вывести на главную еще и скидки.
 Создала еще поле hot1 и директорию в которую положила свой getdata.class.php 

require_once dirname(dirname(__FILE__)).'/getdatanew.class.php';

class modWebCatalogProductsHot1GetdataProcessor2 extends modWebCatalogProductsGetdataProcessor1{
    
    public function initialize(){
        
        $this->setDefaultProperties(array(
            'hot1'   => true,       // Получать скидки
            "sort"  => "{$this->classKey}.publishedon",
            "dir"   => "ASC",
        ));
        
        return parent::initialize();
    }
    

}

return 'modWebCatalogProductsHot1GetdataProcessor2';

в файле getdatanew.class.php задала процессор modWebCatalogProductsGetdataProcessor1 так, чтобы выводил скидки
 

require_once dirname(dirname(dirname(__FILE__))).'/resources/getdata.class.php';

class modWebCatalogProductsGetdataProcessor1 extends modWebResourcesGetdataProcessor{
    
    
    public function initialize(){
        
         $this->setDefaultProperties(array(
            'hot1'                   => false,       // Получать скидки
        ));
        $this->setProperties(array(
            "base_currency_id"         => (int)$this->modx->getOption("shopmodx.default_currency"), // ID базовой валюты магазина
        ));
        
        return parent::initialize();
    }
    
    
    public function prepareQueryBeforeCount(xPDOQuery $z) {
       $z = parent::prepareQueryBeforeCount($z);
        
        $alias = $z->getAlias();
        
        
        $z->innerJoin('ShopmodxProduct', 'Product');
        
        if($this->getProperty('hot1')){
            $z->innerJoin('modTemplateVarResource',  'hot1', "hot1.contentid = {$alias}.id AND hot1.tmplvarid = 15 AND hot1.value='1'");
        }
        
        // Поиск товаров в категории и подкатегориях
        if($category_id = $this->getProperty('category_id')){
            $categories = array();
            $this->getCategories($category_id, $categories);
            $Z->where(array(
                "parent:IN" => $categories,
            ));
        }

как бы все работает, Но при вызове выводит Новинки + Скидки все в одном массиве.
 Подскажите что нужно сделать, чтобы остались только Скидки?? спасибо

Добрый вечер! Подскажите по поводу getdata-процессора.
 По аналогии с новинками хочу вывести на главную еще и скидки.
 Создала еще поле hot1 и директорию в которую положила свой getdata.class.php require_once dirname(dirname(__FILE__)).'/getdatanew.class.php';

class modWebCatalogProductsHot1GetdataProcessor2 extends modWebCatalogProductsGetdataProcessor1{
    
    public function initialize(){
        
        $this->setDefaultProperties(array(
            'hot1'   => true,       // Получать скидки
            "sort"  => "{$this->classKey}.publishedon",
            "dir"   => "ASC",
        ));
        
        return parent::initialize();
    }
    

}

return 'modWebCatalogProductsHot1GetdataProcessor2'; в файле getdatanew.class.php задала процессор modWebCatalogProductsGetdataProcessor1 так, чтобы выводил скидки require_once dirname(dirname(dirname(__FILE__))).'/resources/getdata.class.php';

class modWebCatalogProductsGetdataProcessor1 extends modWebResourcesGetdataProcessor{
    
    
    public function initialize(){
        
         $this->setDefaultProperties(array(
            'hot1'                   => false,       // Получать скидки
        ));
        $this->setProperties(array(
            "base_currency_id"         => (int)$this->modx->getOption("shopmodx.default_currency"), // ID базовой валюты магазина
        ));
        
        return parent::initialize();
    }
    
    
    public function prepareQueryBeforeCount(xPDOQuery $z) {
       $z = parent::prepareQueryBeforeCount($z);
        
        $alias = $z->getAlias();
        
        
        $z->innerJoin('ShopmodxProduct', 'Product');
        
        if($this->getProperty('hot1')){
            $z->innerJoin('modTemplateVarResource',  'hot1', "hot1.contentid = {$alias}.id AND hot1.tmplvarid = 15 AND hot1.value='1'");
        }
        
        // Поиск товаров в категории и подкатегориях
        if($category_id = $this->getProperty('category_id')){
            $categories = array();
            $this->getCategories($category_id, $categories);
            $Z->where(array(
                "parent:IN" => $categories,
            ));
        } как бы все работает, Но при вызове выводит Новинки + Скидки все в одном массиве.
 Подскажите что нужно сделать, чтобы остались только Скидки?? спасибо

Добрый вечер! Подскажите по поводу getdata-процесс

Так а скидки у вас где реализованы? Да и расширять скорее всего вам надо было web/catalog/products/getdata, у вас и кода в процессоре меньше бы тогда было.
 

P.S. Лучше это было отдельным топиком писать, а то оффтоп получается.

Так а скидки у вас где реализованы? Да и расширять скорее всего вам надо было web/catalog/products/getdata, у вас и кода в процессоре меньше бы тогда было. P.S. Лучше это было отдельным топиком писать, а то оффтоп получается.