Парсеры и Грабберы для OpenCart

DEMO: https://pm2x.script-brains.com/admin/
Login: demo
Password: demo
 
 
Price Master – это модуль для OpenCart который предназначен для автоматической загрузки (импорта) товаров в ваш интернет-магазин, а также экспорта(выгрузки) товаров из вашего магазина. Модуль поддерживает множество источников и форматов данных для загрузки и выгрузки товаров.
В модуль встроено множество серьезных инструментов для работы с данными: парсер, переводчик, генераторы текста на основе искусственного интеллекта, генератор файлов, планировщик, инструменты разметки, интеграции и гибкой настройке данных перед загрузкой в магазин.
Модуль является комплексным и всеобъемлющим решением для работы с каталогом товаров вашего интернет-магазина. Он позволяет вам автоматизировать процесс загрузки и обновления товаров в вашем магазине, а также создавать прайс-листы и фиды данных для выгрузки на площадки и маркетплейсы.
Ранее такие возможности были доступны только программистам, но теперь благодаря модулю Price Master, вы сможете самостоятельно настроить и автоматизировать процесс загрузки и обновления товаров в вашем магазине.
После настройки этот модуль способен эффективно и автоматически обрабатывать и поддерживать в актуальном состоянии огромный ассортимент товаров от различных поставщиков, при этом требуя минимального вмешательства и времени со стороны человека.
 
Кратко о возможностях модуля Price Master:
   
Позволяет загружать данные о товарах, категориях, производителях, атрибутах, опциях, ценах, описаниях, изображениях, характеристиках и многое другое.  Поддерживает мультиязычные магазины. Работает с множеством источников и форматов данных: EXCEL, CSV, XML, WORD, Google Sheets, парсинг. Позволяет настроить для загрузки самые сложные по своей структуре прайс-листы. Позволяет загружать данные из своего интернет-магазина в таблицу для дальнейшего массового редактирования и дополнения данных. Позволяет форматировать данные перед загрузкой с помощью большого арсенала инструментов(форматеров). Работа с ценами и наценками на товары с помощью математических форматеров. Создание уникальных артикулов и сео ссылок для товаров. Перевод текстов на любой язык используя сервисы перевода Google Translate и DeepL. Предварительный просмотр товара перед загрузкой. Генератор файлов - позволяет создавать прайс-листы и фиды данных практически любой структуры для экспорта(загрузки) товаров на любые площадки и маркетплейсы. Генерация уникальных текстов на любую тематику и на любом языке с помощью форматера Chat GPT и других инструментов генерации. Уникальный парсер сайтов - позволяет многопоточно извлекать данные с сайтов всего в несколько кликов мышью без навыков программирования. Гибкие настройки загрузки и обновления товаров. Интеграция данных - настройка сопоставления данных о товарах из загруженного прайс-листа с данными вашего магазина. Фильтрация товаров перед загрузкой. Ссылочная система - позволяет обмениваться данными между всеми загруженными прайс-листами. Многопоточная загрузка фотографий. Встроенный планировщик - позволяет настроить автоматическую загрузку прайс-листов по расписанию и визуально наблюдать распределение задач на временной шкале. Статистика и история загрузок. Детальный отчет о загрузке и обработке данных из прайс-листов. Удобный интерфейс - все элементы модуля сделаны максимально удобными и интуитивно понятными. Интерфейс переведен более чем на 30 языков. Встроенная документация - все ключевые элементы снабжены подробными подсказками ведущими на целевую страницу документации. Массовое обновление файлов прайс-листов Система обновлений модуля (при появлении новой версии модуля, вы получаете уведомление в админке магазина и можете обновить модуль в один клик). Видео документация - видео документация по каждому элементу модуля на английском, украинском и русском языках. Поддержка Opencart и OcStore версий 2.0 - 3.0. Поддержка PHP 5.6, 7.2, 7.3, 7.4, 8.1, 8.2     и многое многое другое...
   
 
Источники и форматы для загрузки данных:
EXCEL (XLSX, XLS) - с любым количеством листов и строк CSV - с любыми кодировками и разделителями XML - любых форматов (включая YML-формат для Яндекс.Маркета) WORD (DOCX) - будут извлечены все данные из таблиц в документе Google Sheets - любые таблицы Google Sheets с публичным доступом Встроенный инструмент парсинга сайтов - в модуле встроен уникальный инструмент для извлечения данных с сайтов,который позволяет настроить парсинг данных всего нескольких кликов мышью. Для инструмента парсинга разработан уникальный интерфейс позволяющий легко настроить парсинг данных с любого сайта человеку без знания программирования. Загрузка данных из своего интернет-магазина в таблицу -  модуль позволяет загружать данные своего интернет магазина в таблицу для дальнейшей обработки.Это очень серьезная возможность с помощью которой вы можете массово редактировать данные своего магазина и привести свой каталог товаров в нужный вид. Вы можете применять к данным своего магазина все возможности модуля Price Master, такие как форматеры, фильтры, ссылочная система и многое другое  
Такие форматы как EXCEL, CSV, XML, WORD, вы можете загружать напрямую с вашего компьютера или по ссылке на прайс-лист которую вам предоставит ваш поставщик. Преимуществом загрузки прайс-листов по ссылке на файл является то, что вам не нужно будет каждый раз загружать обновленный прайс-лист с вашего компьютера, а он будет загружаться автоматически с сервера вашего поставщика.   В тех случаях когда у поставщика нет возможности предоставить вам ссылку на прайс-лист, предусмотрена возможность массового обновления файлов прайс-листов, которая позволяет вам обновлять прайс-листы в несколько кликов. Разметка данных:
После загрузки прайс-листа, модуль обработает данные и выведет их табличном виде. После чего вы сможете разметить колонки с данными и сопоставить их с полями вашего магазина. Модуль поддерживает мультиязычные магазины и позволяет разметить и загрузить любые данные о товарах в множество категорий и на любом языке. Поддерживается разметка вложенных категорий, связных опций, фотографий опций, и многого другого...  
 
Блок предварительного просмотра:
После разметки данных, модуль позволяет вам просмотреть как будут выглядеть товары в вашем магазине перед их загрузкой. Для этого достаточно просто нажать на одну из строк в таблице, после чего данные о товаре из отмеченной строки загрузятся в каталог и в окне предварительного просмотра вы увидите товар точно в том виде в каком он будет загружен из данного источника.  


 
Форматирование данных:
Одной из главных особенностей модуля является возможность форматирования данных перед загрузкой с помощью большого арсенала инструментов - Форматеров. Ранее такие возможности были доступны только программистам, но благодаря модулю Price Master, вы сможете легко и быстро форматировать данные о товарах в нужный вам вид. Настроенные форматеры будут обрабатывать прайс-лист при каждой загрузке, таким образом при изменении прайса или добавлении в него новых товаров, прайс-лист будет обработан согласно настроенным ранее форматерам и загружен в ваш магазин в нужном вам виде.  
Форматеры - инструменты которые вы можете применять к колонкам таблицы для изменения их содержимого перед загрузкой. К одной колонке можно применить любое количество форматеров, чтобы добиться нужного результата. Ко всем форматерам можно применять фильтры, чтобы применить их только к определенным строкам.
 

 
Текстовые форматеры:
Позволяют изменять, дополнять, извлекать, дублировать, заполнять и т.д. данные в колонках. Благодаря текстовым форматерам вы можете привести данные о товарах в нужный вам вид и формат. С помощью текстовых форматеров вы можете:
Удалить или заменить лишние символы и слова в тексте Извлечь из текста нужные вам данные (такие как бренды, характеристики, ссылки, email и т.д.) Дополнить данные (добавить префиксы и постфиксы к данным) форматером склейки данных Привести данные к нужному регистру (нижний, верхний, первая буква заглавная) форматером замены Заполнить пустые ячейки данными из других колонок форматером заполнения Разбить данные на несколько колонок форматером разбиения Подтягивать другие данные из таблицы или из других источников форматером "Подтяжка данных" и многое и многое другое...
Числовые форматеры: 
Дают возможность выполнять математические операции с числами в колонках. Они полезны для работы с ценами, скидками, наценками на товары, для работой с курсами валют и так далее. С помощью числовых форматеров вы можете выполнять операции:
Сложения Вычитания Умножения Деления Округления Получать случайные числа (полезно для назначения рандомных скидок на товары) HTML-форматеры: 
Это набор инструментов для работы с HTML-кодом. С помощью HTML-фоматеров вы можете:
Преобразовать HTML в обычный текст Удалить все ссылки из HTML (часто поставщики добавляют ссылки в описании товара ведущие на их сайт - это плохо сказывается на вашей сео-оптимизации сайта) Удалить YouTube видео из HTML Превратить текст в ссылку (используется для улучшения сео-оптимизации сайта)  
Форматеры генерации данных:
Предназначены для генерации недостающих данных о товарах. Вы сможете генерировать уникальные тексты на любом языке при помощи искусственного интеллекта, генерировать тексты по шаблону, генерировать сео-ссылки на товары и уникальные артикулы.   
Форматер генерации артикула товара - часто бывает так что в прайс-листе поставщика отсутствует артикул, форматер генерации может создавать уникальный артикул для каждого товара основываясь на колонках прайс-листа. Форматер генерации сео ссылок - позволяет формировать на основе текста уникальные человекопонятные ссылки для ваших товаров. Форматер Chat GPT - это мощнейший форматер позволяющий использовать всю силу искусственного интеллекта от OpenAI, который позволяет создавать тексты на любую тематику и на любом языке. С его помощью вы можете создавать уникальные описания товаров, создавать уникальные мета-заголовки и мета-описания для товаров, перефразировать тексты, извлекать данные из текста и многое другое. В форматере есть возможность выбрать нейронную модель для генерации текста, и гибко настроить параметры генерации текста. Форматер Генерации текста - позволяет создавать уникальные тексты на основе заданных пользователем шаблонов.  
Форматер разбивки листа:
 Часто бывает так что структура прайс-листа поставщика  не позволяет загрузить данные о товарах . Форматер разбивки листа позволяет разбить данные о товарах на несколько листов, чтобы загрузить их в ваш магазин.  
Форматер перевода текста:
Позволяет переводить тексты на любой язык используя сервисы перевода Google и DeepL, оба этих сервиса дают бесплатную квоту на перевод текстов до 500 000 символов в месяц. Благодаря форматеру перевода вы можете с легкостью перевести все данные о товарах на любой язык и загрузить их в ваш магазин.  
 
Форматер парсинга:
Это еще одна уникальная разработка, которая позволяет извлекать любые данные с сайтов и загружать их в ваш магазин. С помощью форматера парсинга вы можете извлекать данные о товарах, категориях, производителях, атрибутах, опциях, ценах, описаниях, изображениях, характеристиках и многое другое с других сайтов. Для этого достаточно просто указать ссылку на страницу с которой вы хотите извлечь данные, и настроить правила извлечения данных. В форматере разработан уникальный интерфейс позволяющий легко визуально выбрать данные на странице и настроить правила их извлечения.  

 
 
Форматер фильтрации:
Позволяет фильтровать строки в таблице по заданным условиям. С его помощью вы можете отфильтровать товары и оставить только те, которые соответствуют вашим требованиям для дальнейшего импорта в ваш интернет-магазин.  
 
Ссылочная система:
Ссылочная система - это уникальная возможность модуля Price Master, которая позволяет использовать ссылки на колонки и ячейки из всех загруженных в модуль прайс-листов. Вы можете использовать ссылки на колонки и ячейки в форматерах и в генераторе файлов, что позволяет создавать сложные правила форматирования данных, создавать настроечные таблицы и многое другое.  
 
Интеграция данных:
После разметки все уникальные данные из загруженного прайс-листа о категориях, производителях, характеристиках, опциях... загрузятся во вкладку  "Интеграции" и вы сможете настроить сопоставление(связь) данных о товарах с данными вашего магазина.   

 
Настройки загрузки:
Во вкладке "Настройки загрузки" вы можете очень гибко настроить критерии для импорта и обновления товаров в каталог вашего интернет-магазина.  

 
 
 
Генерация файлов:
Генератор файлов в модуле Price Master  позволяет создавать прайс-листы и фиды данных практически любой структуры для ваших клиентов и для экспорта товаров на любые площадки и маркетплейсы. Генератор файлов спроектирован таким образом, что он автоматически формирует файлы используя заданный пользователем шаблон.
Для создания шаблона файла, вам нужно заполнить шаблон переменными(такими как название товара, цена, описание, категория и т.д.). Переменные доступны на всех языках вашего магазина то есть вы можете создавать прайс-листы и фиды данных на любом языке.
После создания шаблона, вы можете его использовать во всех загруженных прайс-листах и генерировать файлы в один клик. Так-же вы можете поставить генерацию файлов на автоматическую загрузку по расписанию. Таким образом у вас всегда будут актуальные прайс-листы для выгрузки на площадки и маркетплейсы.
Поддерживаемые форматы файлов: 
EXCEL(Xlsx) CSV XML(YML и любые другие форматы XML)  
EXCEL(Xlsx)
Для настройки шаблона вам нужно скачать стандартный файл шаблона EXCEL к себе на компьютер, при необходимости стилизовать его, заполнить необходимыми переменными и загрузить обратно в модуль. Прайс-листы в формате EXCEL могут содержать фотографии товаров, что позволяет создавать красивые и информативные прайс-листы для ваших клиентов. Вы можете создавать любое количество колонок, стилизовать шапку и строки таблицы по своему усмотрению.  

 
CSV
CSV - простой и легкий формат хранения данных, который состоит из строк и столбцов разделенных запятыми, расшифровывается как Comma Separated Values. Многие маркетплейсы принимают формат CSV для загрузки товаров. Шаблон для этого формата создается очень просто и быстро, и это делается прямо через интерфейс модуля.  

 
XML(YML)
XML(YML) - практически любой структуры и для любых площадок и маркетплейсов. Шаблон для формата XML создается также через интерфейс модуля. В формате XML можно создавать фиды данных для экспорта ваших товаров на Яндекс.Маркет, Google Merchant, Prom.ua, Rozetka, Hotline и многие другие площадки.  

 
Планировщик, cтатистика загрузок:
Модуль Price Master имеет встроенный планировщик, который позволяет настроить автоматическую загрузку прайс-листов по расписанию. Через удобный интерфейс вы можете очень гибко настроить расписание загрузки прайс-листов и визуально наблюдать распределение задач на временной шкале.  
После загрузки прайс-листа модуль сохраняет статистику загрузки и обработки данных. В истории загрузок вы можете увидеть детальный отчет о количестве загруженных товаров, количестве ошибок и предупреждений, времени запуска и времени выполнения задачи.

 
Встроенная документация:
Документация встроена прямо в модуль и все элементы снабжены подробными подсказками, а все ключевые элементы модуля снабжены ссылками на целевую страницу документации. В документации вы найдете подробные инструкции по использованию всех элементов модуля, а так же видеодокументацию на английском, украинском и русском языках.  

 
 
Система обновлений:
Модуль Price Master имеет встроенную систему обновлений, которая позволяет вам получать уведомления о новых версиях модуля и обновлять модуль в один клик.  

 
Удобный интерфейс:
Весь интерфейс модуля спроектирован максимально удобным и интуитивно понятным. Все элементы модуля снабжены подробными подсказками, которые ведут на целевую страницу документации. Интерфейс модуля переведен более чем на 30 языков. В модуле предусмотрена возможность переключения языка интерфейса в не зависимости от языка административной панели вашего магазина.  
Скорость работы:
Код модуля оптимизирован для работы с большими объемами данных. Модуль работает быстро и стабильно даже при загрузке тысяч товаров. Для меньшего потребления ресурсов сервера, модуль использует пакетную обработку данных, что позволяет загружать и обрабатывать данные по частям.  
Поддержка версий Opencart, OcStore, PHP:
Модуль проверен и оттестирован на всех популярных версиях Opencart и OcStore, а так же на всех популярных версиях PHP.  
Версии OpenСart:
2.0.1.1 2.1.0.1 2.1.0.2 2.2.0.0 2.3.0.2 2.3.0.3 3.0.0.0 3.0.3.0 3.0.4.0 Версии ocStore:
2.1.0.2 2.3.0.2 2.3.0.2 2.3.0.2.3 2.3.0.2.4 3.0.2.0 3.0.3.7  Версии PHP:
5.6 7.2 7.3 7.4 8.1 8.2  
Более подробную информацию о модуле вы можете найти в документации. 
 
Первая лицензия на модуль "Price Master" выдается на 1 год, для одного доменного имени.  Лицензия в себя включает, работу модуля, получение обновлений и техническую поддержку. После истечения срока лицензии, модуль перестанет работать. Продление лицензии еще на 1 год составляет 30 USD. Перед покупкой модуля ознакомьтесь с  лицензионным соглашением . Для продления лицензии вам нужно будет обратится к разработчику по адресу: oc.pricemaster@gmail.com

Плагин позволяет создать витрину интернет-магазина с каталогом товаров, их описаниями и характеристиками, а также ценами с оригинального маркетплейса. Получение информации осуществляется посредством АПИ. Товары обновляются автоматически.
Интеграция Opencart с Ключом OT API, разработанная компанией OpenTrade Commerce.

Ключ OT API может передавать на ваш сайт OpenCart:
Каталог товаров с выбранных вами маркетплейсов.
Информацию о товарах (название, цвет, вес, цену, описание и другие характеристики).
Перевод информации на необходимый вам язык.
 
Можно подключить товары следующих популярных торговых площадок:
Таобао/TMall
1688.com
Alibaba
Ebay
AliExpress
Amazon
Pinduoduo
Shein
Trendyol
 
Обратите внимание! В плагин не включен Ключ ОТ API, который необходимо купить у менеджеров компании OpenTrade Commerce. Подробнее о тарифах Ключа OT API https://otcommerce.ru/key-payments/service-payments/
 
Поддержка Ключа OT API в саппорте OpenTrade Commerce и специальных чатах в Skype.
 
Если у вас есть вопросы по работе Ключа OT API, то обращайтесь к операторам на сайте https://otcommerce.ru/ или пишите на почту info@otcommerce.com.

Модуль для автоматического скачивания прайса с вашей почты из писем поставщиков.
Возможность вытягивать прайсы из почты Yandex, Mail - (Почта MAIL временно не поддерживается), Gmail Возможность указать несколько поставщиков, количество не ограничено Возможность назначения имени файла для каждого поставщика отдельно Возможность указать в какую папку необходимо скачать Для автоматизации необходима настройка крона на хостинге Добавлены дополнительные возможности:
Поиск файлов в письмах поставщика по названиям и переименование каждого найденного при скачивания и сохранения Возможность указать разрешенные расширения файлов Возможность указать ограничение времени выполнения скрипта set_time_limit Почта MAIL временно не поддерживает!!!
 
Лицензия на модули
Приобретая модули вы полностью соглашаетесь с условиями данной лицензии и подтверждаете, что ознакомились с ними. Модули распространяются " как есть ". Разработчик не несет никакой ответственности за возможный ущерб, полученный по вине или с помощью модуля или его файлов. Одна приобретаемая копия модуля предназначена для использования на одном, указанном при покупке или при получении лицензии, домене. Дистрибутив модуля и обновления приобретаются только для одной, указанной при покупке или при получении лицензии, версии движка. Ее можно изменить только один раз для одной лицензии, при этом будут доступны только обновления для новой версии движка. Лицензию на тестовый домен можно получить и заменить в любое время, при этом тестовый домен должен быть явным, т.е. быть поддоменом основного домена лицензии (например, test.site.com или dev.site.com) или техническим доменом хостера или доменом, содержащим в своем названии явно выраженную тестовую суть. Выдача лицензий и поддержка производится в рабочие дни с 9 до 18 по МСК. Ответ на запрос может быть получен не позднее 72 часов в рабочие дни, но обычно составляет не более 15 минут. При создании запроса по одному из каналов связи не надо дублировать его во все возможные каналы, т.к. ни у какого из них нет приоритетного статуса. Все запросы поддержки обрабатываются в порядке живой очереди по всем каналам одновременно. При получении одинаковых запросов поддержки по нескольких каналам связи, такой запрос будет перенесен на следующий рабочий день не зависимо от занятости. Срок поддержки составляет 3 месяца со дня покупки. После этого срока поддержка оказыватся только при наличии объективного отзыва на модуль по месту покупки либо продлевается платно. Единственной причиной для возврата средств является грубая ошибка в работе модуля, которая была доказана на чистом движке (без единого стороннего модуля, модификатора или правки кода) и дефолтном шаблоне. Суммой возврата будет являться стоимость модуля по месту покупки и на момент покупки за вычетом комиссии площадки. При этом лицензия на модуль будет заблокирована, а клиент обязуется никогда не использовать модуль и его файлы, а также в течение суток удалить все полученные файлы и дистрибутив модуля. При этом разработчик оставляет за собой право отказать данному клиенту в поддержке по всем лицензиям, если у клиента есть или будут приобретены прочие лицензии на модули разработчика. Запрещено передавать, перепродавать или любым другим способом распространять модуль, а также модифицировать код модуля и обращаться за поддержкой после модификации модуля. В случае хамского общения, необоснованных требований, голословных обвинений, нарушения лицензии модуля, публикации необъективного отзыва или клеветы, разработчик имеет право отозвать лицензию с прекращением поддержки и прекращением предоставления обновлений модуля. Все права на модуль и его файлы принадлежат разработчику.