Дело в том, что у нас проект разделен по серверам, на одном сервере крутится php, на другом сервере полноценный MySql. Общая локальная сеть. То есть данные от MySql в PHP приходят по сети. Как только мы разделили по серверам работу сайта столкнулись с очень долго работой создания индексов. Виной этому, при создании индекса $index->continueIndex(); происходит циклическая беготня по элементам и формирования для отдельно каждого индекс. В итоге мы получаем огромное количество запросов к MySql и задержку из-за работы протокола сети TCP. Если бы, во время индексации не производить обмен данными с PHP, и уменьшать тем самым количество запросов, было бы гораздо быстрее и красивее.
Поясню на примере: Сейчас создание индекса занимает: Elements: 124 Query count: 4912 Time: 9.2134962081909 сек. Было до разъединения PHP и MySql в секундах 2.91 s при том же количестве элементов и количестве запросов.
Я прекрасно понимаю, что это наша проблема, что мы решили разделить, но теоретически ваш код тоже можно было бы оптимизировать. Даже у вас в документации и рекомендациях четко написано придерживаться правила - не делать запросов в цикле, однако сами нарушили свои рекомендации: https://dev.1c-bitrix.ru/learning/course/?COURSE_ID=32&LESSON_ID=3594
public function continueIndex($interval = 0)
{
if ($interval > 0)
$endTime = microtime(true) + $interval;
else
$endTime = 0;
$indexedCount = 0;
if ($this->lastElementId === null)
$lastElementId = $this->storage->getLastStoredElementId();
else
$lastElementId = $this->lastElementId;
$elementList = $this->getElementsCursor($lastElementId);
while ($element = $elementList->fetch())
{
$this->indexElement($element["ID"]); <-----------
$indexedCount++;
$this->lastElementId = $element["ID"];
if ($endTime > 0 && $endTime < microtime(true))
break;
}
return $indexedCount;
}
public function indexElement($elementId)
{
$element = new Element($this->iblockId, $elementId);
$element->loadFromDatabase();
$elementSections = $element->getSections();
$elementIndexValues = $this->getSectionIndexEntries($element);
foreach ($element->getParentSections() as $sectionId) <-------------
{
foreach ($elementIndexValues as $facetId => $values) <-------------
{
foreach ($values as $value) <-------------
{
$this->storage->addIndexEntry(
$sectionId,
$elementId,
$facetId,
$value["VALUE"],
$value["VALUE_NUM"],
in_array($sectionId, $elementSections)
);
}
}
}
foreach ($elementIndexValues as $facetId => $values)
{
foreach ($values as $value)
{
$this->storage->addIndexEntry(
0,
$elementId,
$facetId,
$value["VALUE"],
$value["VALUE_NUM"],
empty($elementSections)
);
}
}
}
В этом случае необходимо собрать все элементы в кучу, обработать что надо, и потом разом воткнуть в MySql Спасибо за внимание, возможно учтете это в разработке.