Импорт данных: загрузка товаров из gifts.ru, oasiscatalog.com, happygifts.ru, xindaorussia.ru

Если Вы установили демо-версию модуля и демонстрационный режим истек, но Вы не успели попробовать модуль в работе, сообщите об этом нам, мы можем повторно включить демо-режим. В общем случае, для сброса демо-режима нужно выполнить следующие указания:

1. создать рез. копию сайта, хотя бы базы данных,

2. деинсталлировать модуль (все данные будут удалены!),

3. стереть данный модуль с сайта (соотв. опция доступна в списке модулей),

4. выполнить SQL-запрос (в админке на соотв. странице в разделе "Инструменты": Административный раздел - Настройки - Инструменты - SQL-запрос):
   

   DELETE FROM `b_option` WHERE `MODULE_ID`='webdebug.import';
   

5. сбросить весь кеш на сайте,

6. сообщить нам адрес сайта и владельца лицензии для проверки и сброса срока демо-версии на Вашем сайте,

7. после нашего ответа повторно установить модуль из Маркетплейс .

Ни один из наших модулей не имеет никаких ограничений или изменения условий работы в демо-режиме (за исключением механизма сохранения профилей в Антирутине).

Другими словами, никакие проблемы не могут быть связаны с демо-режимом.

Данная проблема возникает обычно в тех случаях, когда модуль ранее уже устанавливался на данном сайте (либо на копии сайта с той же лицензией), повторно установить не позволяет Битрикс.

При этом даже если на сайт впервые установить данный модуль в демо-режиме, и сразу удалить - то повторная установка будет невозможной.

В таком случае выполните все шаги, описанные в пункте «Как продлить DEMO» (если модуля на сайте нет, пункты 2 и 3 пропустить), либо напишите нам, мы поможем установить.

Если интеграция с Вашим поставщиков возможна, то вариантов два:

1. если поставщик популярный, то его поддержку в модуль мы можем добавить бесплатно,
   
2. во всех остальных случаях мы добавим поддержку за отдельную плату.

Если Вы ранее приобретали один из наших модулей по загрузке товаров (Загрузка каталога из Excel, Загрузка товаров из gifts.ru, Загрузка товаров из p5s.ru, Загрузка товаров из belm.ru, Загрузка товаров из arti-m.ru) - то для Вас стоимость приобретения лицензии на модуль импорта будет равна разнице в цене.

В случае, если лицензия на модуль уже неактивна, то к стоимости добавляется стоимость его продления.

Обновлено: независимо от активности лицензии на имеющийся модуль.

Проблема с символьными кодами может возникать из-за неверной настройки кодировки для планировщика, или если не настроено автозаполнение символьного кода из названия (в настройках инфоблока).

Для предотвращения проблем с символьным кодом (а также для предотвращения других проблем) необходимо чтобы проверка теста "Настройка php для командной строки" показывала "Да" (см. ответ на вопрос «Не проходит тест «Настройка php для командной строки»).

Нет, объекты это не товары.

Объекты это разделы, товары и торговые предложения, причем в некоторых загрузчиках 10 (условно) объектов могут относиться к одному разделу.

Если вы отметите опции «Не перемещать имеющиеся элементы», «Не перемещать имеющиеся разделы», то после очередной загрузки товары останутся там, куда Вы их перенесете. Т.е. это именно то, что рекомендуется для большинства случаев.

Если при этом появляется сообщение "Работает другой процесс загрузки", то проблема может быть в некорректной настройке дат - например, сайт работает в часовом поясе Москвы (и проверка сайта не показывает ошибок), а планировщик может быть настроен на Челябинск.

В таком случае нужно настроить часовой пояс для планировщика. Если проблему нельзя (или сложно, или что-то еще) решить настройкой на сервере, можно внести настройки в скрипт Битрикса /bitrix/php_interface/dbconn.php (указать правильный часовой пояс):

ini_set('date.timezone', 'Europe/Moscow');
date_default_timezone_set('Europe/Moscow');

Можно. Но для этого необходимо отметить в профиле опции отмены привязки разделов («Не перемещать имеющиеся элементы») и элементов («Не перемещать имеющиеся разделы»), т.к. иначе каждая очередная загрузка будет перемещать все на свои места.

При указании этих опций, после завершения первого импорта перенесите все разделы и товары по нужным папкам, и все. Там, куда вы перенесете их, там они и останутся лежать. Удалять любые загруженные разделы при этом нет смысла, т.к. при следующей загрузки они будут созданы снова. Ненужные разделы деактивируйте и если нужно - перенесите куда-либо, чтобы не создавали неудобств (напр., в неактивный раздел «Ненужное»).

При этом есть нюанс: если в файле поставщика в деактивированных разделах появятся новые разделы или элементы, они будут загружены в «ненужном» разделе, поэтому периодически необходимо проверять наличие новых товаров и перемещать их на нужные места.

Такой возможности, к сожалению, нет.

Но при загрузке в отдельный скрытый (неактивный) раздел можно только один нужный Вам раздел перенести в реальную структуру каталога, и в результате фактически будет использоваться только один раздел.

На виртуальной машине Битрикс по умолчанию не включено соответствующие расширения PHP. Функции XML необходимы для всех загрузчиков, скрыто или явно использующих XML - например, Excel [только для формата XLSX] или oasiscatalog.com. Для работы таких загрузчиков необходимо включить расширение xmlreader, это можно сделать следующим образом:

1. войти на сервер через SSH (напр., Putty), а для редактирования файлов удобно использовать программы для SFTP (напр., WinSCP),
2. в файле /etc/php.d/30-xmlreader.ini добавить строку extension=xmlreader.so (эта запись есть в файле /etc/php.d/30-xmlreader.ini.disabled - поэтому указанные файлы можно просто поменять названиями) - это удобно делать через WinSCP,
3. т.к. для работы xmlreader требуется расширение dom, то необходимо проделать те же действия для файла 20-dom.ini, т.е. добавить строку extension=dom.so
4. выполнить (через SSH) команду service httpd restart - это перезапустит Apache и применит сделанные изменения в настройках PHP,
5. все! Теперь расширение XML включено, в чем можно убедиться, открыв phpinfo() - XMLReader должно быть enabled.

На виртуальной машине Битрикс 7.0 по умолчанию не установлено расширение zip, хотя оно необходимо загрузчику Excel для работы с новым форматом файлов Excel - XLSX. Для старого формата XLS это расширение не требуется. Для включения расширения необходимо сначала установить его на сервере, а затем включить:

1. войти на сервер через SSH (напр., Putty), для редактирования файлов удобно использовать программы для SFTP (напр., WinSCP),
2. выполнить (через SSH) команду yum install php-zip - это установит расширения zip,
3. проверить, что в файле /etc/php.d/40-zip.ini добавлена строка extension=zip.so,
4. выполнить (через SSH) команду service httpd restart - это перезапустит Apache и применит сделанные изменения в настройках PHP,
5. все! Теперь расширение zip включено, в чем можно убедиться, открыв phpinfo() - Zip (в секции zip) должно быть enabled.

На большинстве серверов для сайта и для планировщика (равно как и для командной строки) используются различные конфигурации php. Если эти конфигурации настроены на различные кодировки (чаще всего это касается параметра mbstring.func_overload, но не всегда), то при загрузке могут возникнуть проблемы.

Обычно проблема касается параметров mbstring, т.к. на сервере настройка по умолчанию, например, для кодировки windows-1251, а сайт работает на UTF-8, или наоборот. В любом случае необходимо соответствие этих параметров (а также других). Последняя версия модуля сама добавляет данные параметры прямо в команду вызова (напр., -d mbstring.func_overload=2), поэтому в последних версиях проблема связана не с этим.

В числе других потенциальных проблем всевозможные ошибки при запуске из командной строки: несоответствие важных конфигурационных параметров, времени и даты, ограничение памяти (тогда в команду нужно добавлять -d memory_limit=512M) и наиболее частая проблема - несоответствие версий PHP. Последнее особенно важно, т.к. если сайт работает на PHP7, то на PHP5 могут быть ошибки, не позволяющие модулю начать загрузку. Поэтому необходимо правильно прописать путь к PHP в поле "Путь к PHP на сервере".

Помочь в диагностике может файл лога, который находится в папке /upload/webdebug.import/.

В любом случае, для большинства пользователей это будет сложно сделать самостоятельно, поэтому за любой помощью Вы можете обращаться к нам.

Да, модуль поддерживает PHP7, и более того - именно на PHP7 ведется его разработка.

При возникновении каких-либо сложностей или проблем - обращайтесь к нам, мы поможем с их решением.

В последнее время мы активно работаем с VDS от Timeweb, и советуем ее нашим клиентам. При этом, выбирая используемую ОС, рекомендуем выбрать Bitrix 7 - тогда будет использована стандартная виртуальная машина битрикс, которая уже настроена разработчиками на максимальную производительность и при этом совершенно бесплатна.

В этом случае Вы получаете большие преимущества:

1. относительно простая установка,
2. высокая производительность сервера изначально,
3. возможность увеличивать выделяемые для VDS ресурсы (процессор, оперативная память) по мере необходимости: начать можно с 2 ядер, 1Гб памяти и 30Гб места, чтобы не платить за лишние ресурсы,
4. относительно невысокая стоимость хостинга - указанный в пункте 3 вариант стоит всего 351руб/мес при оплате за год,
5. отсутствие ограничений по нагрузке - при регулярной загрузке данных от нескольких поставщиков это особенно актуально.

1. если Вы сами будете администрировать сервер, необходимо будет сначала прочитать руководство по использованию виртуальной машины, хотя это несложно,
   
2. Таймвеб для VDS не предоставляет услугу администрирования, т.е. если Вам нужна будет помощь в администрировании, ее нужно искать в другом месте.

Для любых загрузок данных через модуль, обязательна настройка планировщика Cron. Иначе никак. При этом необходимо запланировать выполнение файла cron.php в папке модуля, т.е. /bitrix/modules/webdebug.import/cron.php. Имейте ввиду, что в планировщике обычно указывается не этот путь к файлу, а полный путь к файлу на сервере. Для настройки планировщика Вы можете обратиться в техподдержку Вашего хостинга.

В команде запуска Вы можете через пробел указать параметр profile, содержащий ID профиля (или несколько профилей через запятую) - в таком случае будут загружаться только указанные профили. Пример команды: «php /home/bitrix/www/bitrix/modules/webdebug.import/cron.php profile=1» При этом, если указан только один ID профиля, то такая загрузка будет называться индивидуальной (в настройках профиля есть опция «Только индивидуальный запуск»).

Проблема, скорее всего, в том, что на сервере возникает ошибка. В этом случае необходимо получить как можно больше информации по ошибке: включить вывод ошибок и попробовать снова, найти логи сервера.

Обязательно выполните проверку сайта - возможно, она покажет, что на сайте имеются какие-то серьезные проблемы.

Основные возможные проблемы:

1. превышение нагрузки на сервер, вследствие чего скрипт «обрубается» - это свойственно виртуальному хостингу, но не VPS/VDS. Имейте ввиду, что для загрузки больших объемов данных необходим мощный сервер! Мы советуем VPS от Timeweb (в сочетании с виртуальной машиной Битрикс), подробности читайте в нашем блоге.
2. превышение скриптом выделенного количества памяти. Особенно это актуально для серверов с малым количеством памяти (менее 256Мб). Но, например, для больших файлов Excel требуется не менее 512Mb памяти, и дополнительно есть возможность загружать за один шаг какое-то определенное количество строк.
3. слишком старая (или наоборот - слишком новая) версия программного обеспечения на сервере (обычно php, но возможно и mysql, и др.).
4. и другие проблемы.

Статус «Ошибка» ставится автоматически, если процесс завершился (т.е. последняя активность по профилю была не менее 5 минут назад), а статус не соответствует этому - т.е. если во время процесса произошла ошибка, которую модуль не в состоянии обработать.

profile=1

profile=2,3,4

Если планировщик запускать с правами root, то и временные файлы создаются от имени root, а сайт при этом работает от имени другого пользователя. Вследствие этого на сайте невозможно будет удалить эти временные файлы, и все последующие загрузки не от имени root будут завершаться ошибкой.

Планировщик должен запускаться от имени пользователя, под которым работает сайт (веб-сервер).

Режим запуска это опция, которая управляет условиями для запуска процесса загрузки по профилю.

• Вариант «Использовать расписание планировщика Cron» означает, что задание будет выполняться всегда, когда будет вызов из планировщика (равно как и из командной строки сервера).

• Вариант «Интервал между запусками» позволяет запускать загрузку, например, каждый час, или каждый день.

• Вариант «Интервал с момента последнего завершения» позволяет запускать загрузку через какое-то время после окончания предыдущей загрузки. Таким образом можно создать непрерывную загрузку (если указать интервал равным одной минуте).

Индивидуальный запуск это опция, которая позволяет выделить загрузку профиля среди других профилей.

Например, у Вас создано десять профилей, которые загружаются общим заданием планировщика - в таком случае они загружаются последовательно.

Если же один из профилей нужно отделить от других, например, задав собственное расписание, в его настройках необходимо отметить галочку «Только индивидуальный запуск». И теперь загрузка этого профиля будет запускаться только в случае, если команда планировщика содержит указание ID этого профиля в параметре profile (должен быть только один ID, без указания ID других профилей). Например, «php /home/bitrix/www/bitrix/modules/webdebug.import/cron.php profile=1».

Модулем новые свойства автоматически не создаются (кроме функционала автосоздания профилей, который полностью настраивает профиль, хотя в этом случае создаётся неполный набор свойств). Это в общем случае плохо, если бы они создавались автоматически. Вы сами должны создать необходимые свойства необходимых типов (учитывая то, что на сайте может понадобиться фильтрация по ним) и для них настроить соответствия полей. Если свойства существуют - можно загрузить в них, не создавая новые дубли.

Соответствие полей - это настраиваемое соответствие между данными в исходном файле и данными на сайте.

Например, если Вы загружаете файл Excel, и в нем есть колонки - наименование, артикул, остаток, цена, то соответствия следующие (колонка в файле - поле на сайте):

• Наименование - название товара,
• артикул - свойство «Артикул»,
• остаток - общий остаток на складе,
• цена - тип цены «Розничная цена».

Привязка - это механизм связи существующих элементов (а также разделов или торговых предложений) с элементами (разделами и торговыми предложениями), загружаемыми из внешних данных.

Рассмотрим, например, привязку элементов по названию. При такой привязке модуль, загружая каждый товар из внешних данных (Excel, oasiscatalog и все остальные поддерживаемые сервисы), ищет на сайте (в пределах указанного инфоблока, а если указан раздел - в пределах указанного раздела) товар, который имеет такое же название (с точностью до символа, регистр не важен). Если такой элемент найден, то модуль считает этот товар целевым и обновляет его данные загружаемыми данными. Если же такой элемент не найден, то будет создан новый.

Аналогично и с привязками разделов и торговых предложений.

Привязка - основной механизм для соблюдения правильность структуры разделов/элементов/предложений. Если привязка указана неверно, то результаты загрузки могут быть непредсказуемыми. Например, после окончания процесса может выясниться, что вообще ничего не загрузилось, также может быть и такое, что разделы успешно загрузились, а товаров нет. Или же все товары могут загрузиться в один случайный раздел.

Пример. Загружаем каталог из oasiscatalog. При загрузке разделов указываем загрузку названия из поля с названием, а символьный код из поля с символьным кодом. Привязку сделаем по внешнему коду (для многих это кажется логичным). В таком случае модуль знает у всех имеющихся разделов их внешние коды, а вот у загружаемых разделов внешние коды неизвестны, т.к. они не загружаются. В результате все товары будут загружены в один случайно попавшийся раздел. Если же в соответствиях для раздела добавить загрузку внешнего кода из символьного кода, то загрузка будет успешной.

Таким образом, для успешной и правильной загрузки необходимо отчетливо понимать, что такое привязка, и как правильно ее настраивать.

Данная опция позволяет не создавать индекс для поиска разделов/товаров/предложений модулем поиска. Это ресурсоемкая операция, и ее отключение позволяет примерно на 20-30 процентов ускорить загрузку. При этом, загруженные товары найти через модуль поиска не будет возможности, чтобы проиндексировать загруженные товары, необходимо будет вручную сделать полную переиндексацию.

Эта опция может быть полезна, в числе прочего, при первичной настройке профиля - чтобы ускорить первые тестовые загрузки.

Картинки загружаются следующими способами:

1. Можно указывать в файле в колонке "Картинка" значения например "image1.jpg", и в настройках профиля выбрать папку, где именно на текущем сайте находится папка со всеми картинками, оттуда и будут загружены картинки.

2. Можно указывать, например, "/upload/products/product_1032.jpg", без указания папки, тогда модуль будет искать картинки по указанному пути на текущем сайте.

3. Можно указывать также "http://site1.ru/images/my_image_1.jpg", тогда картинки будут загружаться с других сайтов.

Если для анонсной и подробной картинок указываются одиночные значения, то для множественных свойств типа "Файл" (напр., свойство "MORE_PHOTO" для загрузки доп. изображений) можно указывать несколько картинок любым из вышеуказанных способов с помощью перечисления. Перечисление может быть через запятую, точку с запятой, или каждая картинка с новой строки, или другие варианты. Пример (разделитель - запятая):

/images/image1.jpg,/images/image2.jpg,/images/image3.jpg

пример, где разделитель - перенос строки (указанное ниже - в одной ячейке):

/images/image1.jpg
/images/image2.jpg
/images/image3.jpg

Принципиальной разницы между форматами нет. Формат XLSX более современный, файлы занимают меньше места, но скорость загрузки приблизительно одинаковая. Поэтому используйте тот формат, который удобнее.

При составлении файла Excel основную сложность представляет разделение на разделы, т.к. товары указываются очень просто - одна строка - один товар.

Разделы же можно указывать двумя различными способами.

1. Форматированием. Каждый раздел, каждый подраздел и т.д. - это строка в файле Excel, и у каждого уровня вложенности свой формат. Например, все разделы первого уровня - заливка серого цвета, все разделы второго уровня - жирный шрифт и курсив.
   
2. Указание разделов к колонках. Для этого способа в файле есть несколько колонок - колонка для указания раздела 1го уровня, колонка для указания разделов 2го уровня и т.п.

Примеры файлов можете найти в модуле (всплывающее окно помощи по модулю).

1. режим запуска - «Использовать расписание планировщика Cron»,
2. для загрузки необходимо использовать инфоблок, являющийся торговым каталогом, и имеющий торговые предложения, в профиле выбрать загрузку в этот инфоблок,
3. в этом инфоблоке необходимо создать вспомогательный раздел «Товары из oasiscatalog.com», снять галочку активности (т.е. раздел не должен быть виден в публичной части сайта), в профиле выбрать загрузку в этот раздел, снять галочку «Искать только в выбранном разделе»,
4. в профиле отметить галочку «Использовать торговые предложения»,
5. все разделы, товары, и торговые предложения загружать активными,
6. для товаров и торговых предложений в профиле настроить деактивацию, но только для загруженных данным профилем,
7. для привязки разделов, товаров и торговых предложений создать соответствующие свойства (свойство раздела, свойство товара и свойство торгового предложения) - эти свойства должны использоваться только для данного поставщика! В настройках соответствия в эти свойства должны загружаться соответственно ID раздела, ID группы, ID товара,
8. отмечаем галочки «Не привязывать к разделам элементы, уже привязанные к нескольким разделам», «Не перемещать имеющиеся элементы», «Не перемещать имеющиеся разделы»,
9. настраиваем соответствия для разделов,
10. настраиваем соответствия для товаров (посмотреть какие могут загружаться характеристики, добавив любое из соответствий, и после этого для каждой характеристики создаем в инфоблоке свойство, если оно не создано, обязательно выбирая тип свойства в соответствии с целями для которых это свойство загружается),
11. настраиваем соответствия для торговых предложений (аналогично предыдущему пункту),
12. настраиваем планировщик и все, готово, остается ждать окончания процесса (первая загрузка может занять около 5 часов, т.к. загружается большое количество товаров с картинками),
13. после загрузки необходимо «раскидать разделы», вынося их из созданного в пункте 3 раздела. При этом удалять какие-то загруженные разделы не нужно, они все равно при следующей загрузке будут вновь созданы - если разделы не нужны, их нужно деактивировать.
    
    

1. Если загружаете каталог с торговыми предложениями, то очень желательно загружать для торговых предложений цвета и размеры,
2. желательно загружать остатки (доступное количество),
3. если загружаете в отдельный скрытый раздел, после выгрузки (и затем регулярно) выносите все разделы за пределы этого скрытого раздела,
4. после выгрузки вы можете ненужные товары и предложения деактивировать.

• Загрузить скриншоты настроек с реального проекта: oasis_real_example.zip (1.34Мб)

В выгрузке от oasiscatalog имеется много разделов с одинаковым названием. Например, разделов с названием «Офисные аксессуары» в различных других подразделах имеется как минимум девять.

В то же время на подавляющем большинстве сайтов формирование ссылок происходит на основе символьных кодов, поэтому для разделов символьный код не только обязателен, но и должен быть уникальным. В связи с этим разделам добавляется порядковый номер, чтобы символьные коды не повторялись.

Решений два. Первое - вручную заменить все символьные коды. Второе - загружать символьный код разделов из символьного кода, предоставляемого поставщиком (в настройке соответствий).

При этом привязка разделов по символьным кодам нежелательна!

Для данного поставщика рекомендуется следующий вариант: для разделов, для товаров и торговых предложений создать отдельные свойства, загружать в них (в настройках соответствий) соответственно ID разделов, товаров и предложений, и привязку выполнять по этим свойства.

Пример: для разделов создать свойство (тип - «Строка») разделов UF_EXT_OASISCATALOG, для товаров создать (в настройках инфоблока) свойство (тип - «Строка») EXT_OASISCATALOG, для торговых предложений создать (в настройках инфоблока) свойство (тип - «Строка») EXT_OASISCATALOG.

В настройках профиля привязку по разделам сделать по «UF_EXT_OASISCATALOG» (в списке нужно выбрать «другое (укажите ниже)»), для товаров - «PROPERTY_EXT_OASISCATALOG», для торговых предложений также «PROPERTY_EXT_OASISCATALOG».

В настройках соответствий обязательно (иначе загрузка будет некорректной) должно быть указано, откуда загружать все эти данные (и для разделов, и для товаров, и для предложений) - соответственно «ID раздела», «ID товара», «ID товара».

При этом, если на сайте уже есть разделы/товары/предложения от данного поставщика, загруженные другими способами, то у них значения указанных выше будут пустые, поэтому при первой загрузке данным модулем разделы/товары/предложения будут созданы.

Символьный код разделов можно загружать из поля, предоставляемого постащиком («Символьный код»), а вот для товаров и торговых предложений такого поля нет. Поэтому для товаров и торговых предложений, если нужен символьный код, вариант один - в настройках инфоблока отметить:

1. обязательность символьного кода,
   
2. автогенерацию символьного кода из названия.

Это можно сделать как для товаров, так и для торговых предложений, и даже для разделов.

Дополнение.

Есть и другой интересный способ:

1. в настройках инфоблока для разделов необходимо отметить обязательность символьного кода, но не отмечать уникальность (в таком случае можно загружать символьные коды как от поставщика, так и генерировать автоматически),
   
2. донастроить компонент bitrix:catalog на работу с такой структурой.

Это возможно, но не рекомендуем, т.к. у данного постащика своя структура каталога, и символьные коды повторяются (напр., раздел «Подарочные наборы» с одинаковым символьным кодом встречается более десяти раз). На большинстве сайтов отмечена обязательность и уникальность символьного кода, поэтому в таких случаях повторные символьные коды вызовут ошибку, импорт не закончится.

Если же хотите загружать символьный код от поставщика, то, во-первых, необходимо снять обязательность и уникальность символьного кода. Но в таком случае построение URL на сайте с помощью символьных кодом станет невозможным.

Если символьные коды не будут загружаться от поставщика, то они будут сгенерированы автоматически (но только если в настройках инфоблока отмечена обязательность символьного кода и автогенерация из названия).

1. режим запуска - «Использовать расписание планировщика Cron»,
2. для загрузки необходимо использовать инфоблок, являющийся торговым каталогом, и имеющий торговые предложения, в профиле выбрать загрузку в этот инфоблок,
3. в этом инфоблоке необходимо создать вспомогательный раздел «Товары из gifts.ru», снять галочку активности (т.е. раздел не должен быть виден в публичной части сайта), в профиле выбрать загрузку в этот раздел, снять галочку «Искать только в выбранном разделе»,
4. в профиле отметить галочку «Использовать торговые предложения»,
5. все разделы, товары, и торговые предложения загружать активными,
6. для товаров и торговых предложений в профиле настроить деактивацию, но только для загруженных данным профилем,
7. для привязки разделов, товаров и торговых предложений создать соответствующие свойства (свойство раздела, свойство товара и свойство торгового предложения) - эти свойства должны использоваться только для данного поставщика! В настройках соответствия в эти свойства должны загружаться соответственно ID раздела, ID товара, ID торгового предложения,
8. отмечает галочки «Не привязывать к разделам элементы, уже привязанные к нескольким разделам», «Не перемещать имеющиеся элементы», «Не перемещать имеющиеся разделы»,
9. настраиваем соответствия для разделов,
10. настраиваем соответствия для товаров (посмотреть какие могут загружаться характеристики, добавив любое из соответствий, и после этого для каждой характеристики создаем в инфоблоке свойство, если оно не создано, обязательно выбирая тип свойства в соответствии с целями для которых это свойство загружается),
11. настраиваем соответствия для торговых предложений (аналогично предыдущему пункту),
12. настраиваем планировщик и все, готово, ждем окончания процесса (первая загрузка может занять около 5 часов, т.к. загружается большое количество товаров с картинками, также у поставщика действует ограничение по количеству подключений для скачивания изображений),
13. после загрузки необходимо «раскидать разделы», вынося их из созданного в пункте 3 раздела. При этом удалять какие-то загруженные разделы не нужно, они все равно при следующей загрузке будут вновь созданы - если разделы не нужны, их нужно деактивировать.

1. Если загружаете каталог с торговыми предложениями, то очень желательно загружать для торговых предложений цвета и размеры,
2. желательно загружать остатки (доступное количество),
3. если загружаете в отдельный скрытый раздел, после выгрузки (и затем регулярно) выносите все разделы за пределы этого скрытого раздела.

Для данного поставщика рекомендуется следующий вариант: для разделов, для товаров и торговых предложений создать отдельные свойства, загружать в них (в настройках соответствий) соответственно ID разделов, товаров и предложений, и привязку выполнять по этим свойства.

Пример: для разделов создать свойство (тип - «Строка») разделов UF_EXT_GIFTS, для товаров создать (в настройках инфоблока) свойство (тип - «Строка») EXT_GIFTS, для торговых предложений создать (в настройках инфоблока) свойство (тип - «Строка») EXT_GIFTS.

В настройках профиля привязку по разделам сделать по «UF_EXT_GIFTS» (в списке нужно выбрать «другое (укажите ниже)»), для товаров - «PROPERTY_EXT_GIFTS», для торговых предложений также «PROPERTY_EXT_GIFTS».

В настройках соответствий обязательно (иначе загрузка будет некорректной) должно быть указано, откуда загружать все эти данные (и для разделов, и для товаров, и для предложений) - соответственно «ID раздела», «ID товара», «ID товара [ТП]». Если используется режим загрузки без торговых предложений, то для товаров необходимо выбрать «ID товара [ТП]».

При этом, если на сайте уже есть разделы/товары/предложения от данного поставщика, загруженные другими способами, то у них значения указанных выше будут пустые, поэтому при первой загрузке данным модулем разделы/товары/предложения будут созданы.

1. маленькая картинка (200х200),
   
2. средняя картинка (280х280),
3. большая картинка (1000х1000),
4. дополнительные изображения (массив, 1000х1000).

1. маленькую или среднюю картинку загружать в картинку для анонса (если картинка для анонса у Вас на сайте не используется, то не нужно),
   
2. большую картинку загружать в детальную картинку,
3. дополнительную картинку загружать в множественное свойство типа «Файл», при этом в настройках соответствия необходимо отметить галочку «Не загружать первое изображение».

К сожалению, этот раздел указан в выгрузке, и все остальные разделы строятся относительно него. Модуль не модифицирует структуру выгрузки, поэтому загружается всегда так.

Но при этом решение есть: в профиле отметьте галочки, которые отменяют привязки существующих разделов и элементов. После завершения первого импорта перенесите все разделы и товары по нужным папкам, и все. Там, куда вы перенесете их, там они и останутся лежать. Удалять любые загруженные разделы при этом нет смысла, т.к. при следующей загрузки они будут созданы снова. А раздел «Каталог», как и другие ненужные разделы, нужно деактивировать и если нужно - перенести куда-то, чтобы не мешал (напр., в неактивный раздел «Ненужное»).

При этом есть нюанс: если у поставщика добавляются новые разделы, они будут добавляться в родительских разделах. Т.е. если в «Каталог» появится новый раздел, он будет загружен в спрятанный раздел.

Поставщик gifts.ru предоставляет партнёрам XML-файл, в котором разбивка на товары осуществляется только по размерам.

По цветам группировки нет.

В то же время, на сайте gifts.ru структура в точности такая же. Однако в карточке товара выводятся ссылки на товары той же группы (по общему артикулу группы). Т.е. выводится один товар, а сайт, используя код группы, определяет другие товары группы, и выводит на них ссылки в виде картинок. Таким же образом можно сделать и на Вашем сайте, но эта доработка никак не относится к модулю (это может выполнить любой программист).

Вся вышеуказанная информация по доработке относится только к карточке товара, и только для товаров из gifts.ru (т.к. у других поставщиков схема стандартная с точки зрения Битрикса и доработки в общем случае не требуются). В списке товаров таким способом проблему решить не получится.

Проблема заключается в привязках (разделов, элементов и предложений). Подробнее о привязке читайте в ответе на вопрос «Что такое привязка?».

Суть проблемы в следующем: Вы либо не указали (или некорректно указали) поле/свойство для привязки (поля в профиле: «Привязка разделов», «Привязка элементов», «Привязка предложений»), либо не указали откуда значения для привязки загружается (в настройках соответствия).

Решение проблемы:

1. Должно быть корректно указано поле/свойство для привязки. Примеры для разделов: UF_EXT_GIFTS, EXTERNAL_ID. Пример для элементов и предложений: PROPERTY_EXT_GIFTS, EXTERNAL_ID.
2. Выбранное свойство или поле должно быть указано в таблице соответствий, и должна быть настроена его загрузка из какого-либо поля выгрузки. Например, при привязке по свойству EXT_GIFTS добавьте загрузку значения свойства EXT_GIFTS из необходимого поля выгрузки. Т.к. это привязка, то значение должно быть уникальным.

Возможных проблем - несколько. Но, скорее всего, на сервере некорректная дата при запуске скриптов из командной строки (на сайте может быть все нормально, а при запуске из командной строки или из планировщика часовой пояс используется некорректный).

Решение следующее: в файле /bitrix/php_interface/dbconn.php добавьте строку с указанием часового пояса, пример для московского времени:

date_default_timezone_set('Europe/Moscow');

На самом деле, именно зависание в модуле невозможно. Скорее всего процесс просто неожиданно обрывается. Причин для этого может быть много:

1. ограничения хостинга по нагрузке (ограничения имеются практически на всех тарифах виртуального хостинга; на VPS ограничений нет), пара примеров:
   
   • максимальное допустимое время работы скрипта: не более 15 процессорных секунд и не более 5 минут реального времени (хостинг Hostland),
   • На тарифах обычного хостинга и тарифах "Старт" CMS-хостинга запрещается использование процессами процессоров сервера более 90% в течение 10 минут. В случае превышения данного лимита процесс завершается (хостинг Timeweb),
2. ограничения скрипта по оперативной памяти,
3. ошибка в процессе загрузки (упала БД, закончилось место на диске, ошибка в сторонних обработчиках и т.д.).

Данная ошибка характерна для поставщика gifts.ru при загрузке в свойство типа «Список» характеристики «Материал [одной строкой через запятую]».

Причина проста: у поставщика в строке с материалом хранятся длинные значения, похожие между собой, но немного отличающиеся, причём это отличие ближе к концу текста, в результате при попытке сохранения в базу данных, текст обрезается до строки, которая совпадает у обоих значений (это происходит в связи с ограничением длины строки в поле таблицы), и всё это приводит к попытке создания дубля, о чём и сообщает указанная ошибка.

Решение простое: вместо характеристики «Материал [одной строкой через запятую]» используйте характеристику «Материал [для фильтра]», или загружайте эту характеристику не в списочное свойство.