Последние темы


Экспорт/импорт данных из таблиц пакетов MIGX db через плагин CatalogFill

  • В описании плагина CatalogFill говорится о возможности экспорта/импорта данных таблиц MIGX db (собственно это и стало основной причиной его покупки)
    но ни в инструкции, ни в админке не было описания как это делать...
    Подскажите, пожалуйста, как экспортировать и импортировать данные?

  • Смотрите пример конфигурации "migx_catalog". Там есть комментарии.

  • я так понимаю, что речь идет о конфигурации MIGX?
    где её взять?

  • Нет, речь идет о конфигурации импорта/экспорта. Эту конфигурацию Вы можете отредактировать под свою структуру MIGXDB.

    0_1565528192083_screenshot_039.png

  • зашибись плагин(
    и где его искать (какой файл редактировать)?
    есть ли инструкция, как его редактировать и т.п.?

  • @Devi

    0_1565548244003_screenshot_040.png

    Ок, добавлю в инструкцию такую фразу: "Для редактирования конфигурационного файла нажмите кнопку "Редактировать конфигурационный файл"..."

    https://modx-shopkeeper.ru/docs/shopkeeper-3/catalogfill

  • сделал конфигурацию, но при попытке экспорта получаю ошибку 500
    в логах ошибок следующие записи
    [2019-08-11 22:55:57] (ERROR in modProcessor::run @ /home/a0139615/domains/new.bistriki.com/public_html/core/model/modx/modprocessor.class.php : 177) Flat file processor support, used for action getstat with path /home/a0139615/domains/new.bistriki.com/public_html/core/components/catalogfill/processors/mgr/getstat.php, is deprecated since version 2.7.0.
    [2019-08-11 22:55:58] (ERROR in modProcessor::run @ /home/a0139615/domains/new.bistriki.com/public_html/core/model/modx/modprocessor.class.php : 177) Flat file processor support, used for action getFileList with path /home/a0139615/domains/new.bistriki.com/public_html/core/components/catalogfill/processors/mgr/getfilelist.php, is deprecated since version 2.7.0.
    [2019-08-11 22:56:00] (ERROR in modProcessor::run @ /home/a0139615/domains/new.bistriki.com/public_html/core/model/modx/modprocessor.class.php : 177) Flat file processor support, used for action getFileList with path /home/a0139615/domains/new.bistriki.com/public_html/core/components/catalogfill/processors/mgr/getfilelist.php, is deprecated since version 2.7.0.
    [2019-08-11 22:56:05] (ERROR in modProcessor::run @ /home/a0139615/domains/new.bistriki.com/public_html/core/model/modx/modprocessor.class.php : 177) Flat file processor support, used for action export with path /home/a0139615/domains/new.bistriki.com/public_html/core/components/catalogfill/processors/mgr/export.php, is deprecated since version 2.7.0.

    версия MODX Revo 2.7.1
    что с этим делать?

  • Во-первых в настройках системы отключить "log_deprecated".
    Далее очистить журнал ошибок и смотреть новые. Если будут ошибки, то нужно больше информации, чтобы сказать в чём причина. Показать куда хотите импортировать, какой конфиг и какой файл.

  • отключил, очистил
    далее http://joxi.ru/12MEdEvtloelG2 -> http://joxi.ru/VrwXwXZt7RN7Mm
    в журнале ошибок - пусто
    код настройки

    <?php
    
    //Название класса таблицы товаров в БД
    $cf_config['className'] = 'delivery_flight';
    //Название пакета таблицы товаров в БД
    $cf_config['packageName'] = 'delivery_schedule';
    //Название поля ID родителя
    $cf_config['parent_field'] = false;
    
    //разбивка по столбцам при импорте и экспорте (content|tv|category)
    $cf_config['content_row'] = array(
        array('ID',array('id','content')),
        array('Наименование',array('name','content')),
        array('Время',array('time','content')),
        array('Откуда',array('from','content')),
        array('Время в пути',array('duration','content')),
        array('Куда',array('to','content')),
        array('Время прибытия',array('arrival_time','content')),
        array('Стоимость',array('price','content')),
        array('Тариф',array('delivery_rate_id','content')),
        array('Сортировка',array('sort','content')),
    );
    
    //значения по умолчанию при импорте или проверка при экспорте
    $cf_config['imp_content_default'] = array(
        'content' => array(
            'deleted' => 0,
            'published' => 1,
            //'template' => 9
            'createdon' => strtotime("now")
            //'publishedon' => strtotime("now")
            //'pub_date' => strtotime("now")
            //'editedby' => 1
            //'editedon' => strtotime("now")
        ),
        'tv' => array(
            //7 => 0
        )
    );
    
    //первая строка - названия полей
    $cf_config['include_captions'] = true;
    
    //число товаров импортируемых за один раз (загрузка по группам). 0 - не ограничивать.
    $cf_config['batch_import'] = 300;
    
    //разбивать по категориям
    $cf_config['include_categories'] = false;
    
    //удалять дочерние категории при очистке и обновлении каталога
    $cf_config['delete_subcategories'] = true;
    
    //по какому полю проверять соответствие товара при обновлении. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_field'] = false;
    
    //проверять соответствие товара при обновлении по значению TV. Указать ID TV. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_tvid_val'] = false;
    
    //Добавлять товары, которые не найдены при обновлении по TV (imp_chk_tvid_val) или полю (imp_chk_field)
    $cf_config['imp_if_not_exist'] = true;
    
    //удалять HTML-теги при экспорте
    $cf_config['exp_strip_tags'] = false;
    
    //автоматически генерировать псевдоним (alias) при импорте
    //false - выключено; true - генерировать с переводом в транслит; 'notranslit' - генерировать без перевода в транслит.
    $cf_config['imp_autoalias'] = false;
    
    //Изменить значения поля для всех вложенных товаров до начала импорта.
    //Например можно отменить публикацию для всех товаров и публиковать только те, которые есть в новом прайс-листе.
    //первый массив - какие поля и на какие значения менять, второй массив - условия которые нужно проверять (можно сделать пустым)
    $cf_config['imp_before_change'] = false;//'[{"tv.inventory":0},{}]';//'[{"published":0},{"tv.pricename":"Поставщик1"}]';//false - для отмены
    
    //удалить файл после экспорта (скачивания)
    $cf_config['exp_delete_file'] = false;
    
    //кодировка CSV-файла при экспорте
    $cf_config['exp_csv_charset'] = 'UTF-8'; //'windows-1251'
    
    //Импортировать (обновлять) пустые значения
    $cf_config['imp_empty'] = true;
    
    //Имя файла процессора, который использовать для импорта. Если пусто, используется стандартный процессор "import".
    $cf_config['imp_custom_processor'] = '';
    
    //путь (xpath) в XML структуре до товаров
    $cf_config['imp_xml_itemsparent_path'] = '';//'/catalog/shop/offers';
    
    //Структура XML файла для импорта
    $cf_config['imp_xml_structure'] = '';
    
    //тестирование конфигурации (без записи в БД). Отчёты -> Журнал ошибок.
    $cf_config['imp_testmode'] = true;
    
    //функция для фильтрации значений при ИМПОРТЕ
    function filter_import($value_arr){
        $output_arr = $value_arr;
        /*
        if(isset($output_arr['content']['pagetitle']))
            $output_arr['content']['pagetitle'] = mb_strtoupper($output_arr['content']['pagetitle'], 'UTF-8');
        */
        
        return $output_arr;
    }
    
    
    //функция для фильтрации значений при ЭКСПОРТЕ
    function filter_export($value_arr,$doc_id=0){
        $output_arr = $value_arr;
        //var_dump($value_arr,$output_arr);
        //exit;
        /*
        if(isset($output_arr['price']))
            $output_arr[1] = floatval($output_arr[1]) - 200;
        */
        return $output_arr;
    }
    
    
    ?>
    

    shema пакета, для которого написана настройка

    <model package="delivery_schedule" baseClass="xPDOObject" platform="mysql" defaultEngine="MyISAM" version="1.1">
        <object class="delivery_rate" table="delivery_rates" extends="xPDOSimpleObject">
            <field key="name" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="color" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="desc" dbtype="text" phptype="string" null="false" default="" />
            <field key="sort" dbtype="int" precision="10" phptype="integer" null="false" default="500"/>
    
            <field key="deleted" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="0" />
            <field key="published" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="1" />
            <field key="createdon" dbtype="datetime" phptype="datetime" null="true"/>
        </object>
        <object class="delivery_flight" table="delivery_flights" extends="xPDOSimpleObject">
            <field key="name" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="from" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="time" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="duration" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="to" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="arrival_time" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="price" dbtype="varchar" precision="255" phptype="string" null="false" default=""/>
            <field key="sort" dbtype="int" precision="10" phptype="integer" null="false" default="500"/>
    
            <field key="delivery_rate_id" dbtype="int" precision="10" phptype="integer" null="false" default="0"/>
    
            <field key="deleted" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="0" />
            <field key="published" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="1" />
            <field key="createdon" dbtype="datetime" phptype="datetime" null="true"/>
    
            <aggregate alias="Delivery_rate" class="delivery_rate" local="delivery_rate_id" foreign="id" cardinality="one" owner="foreign" />
        </object>
    </model>
    
  • //Название поля ID родителя
    $cf_config['parent_field'] = false;
    

    Почему так? В MIGXDB документы должны иметь родителя. Иначе как вы их добавляете/редактируете в админке?

  • Участник @Andchir написал в Экспорт/импорт данных из таблиц пакетов MIGX db через плагин CatalogFill:

    MIGXDB

    какие родители в элементах migx db?
    это элементы, которые к ресурсам никак не подвязаны!
    а редактируются они через CMP

  • а редактируются они через CMP

    Покажите скриншот. Не понял что за CMP. Но если и не подвязаны, оставьте значение, которое было.
    Вот мой скриншот:
    0_1565682115311_screenshot_179.png

 

Последние комментарии

  • Y

    Когда импортирую просто нажав обновить и выбрав в целом категорию выпадет ошибка Error -1 =(

    Читать далее
  • Y

    Ясненько =(
    В общем, я решил проблему с разделением на категории(просто с помощью python разсортировал все строки с n идентификатором в n.xml файл и импортировал по отдельности)
    Только вот с заполнением проблема.
    Старый файл был такого вида:

    <data> <Title>pagetitle</Title> </data>

    Вот так выглядит мой файл которым я хочу обновить импортированные ранее товары(не добавляя новых товаров а только собрав из файла нужные строки с данными и импортировав их к уже созданным старым файлом товарам):

    <data> <Color> <Color1/> <Color4>Brown</Color4> <Color5>Cloudy Gray</Color5> </Color> <Price>4.75</Price> <Title>Название товара</Title> <bonus_info> <bonus_info1>blabla</bonus_info1> <bonus_info2>blabla</bonus_info> </bonus_info> </data>

    Где 1 <data> на 1 строку
    Вот мой конфиг:

    <?php //разбивка по столбцам при импорте и экспорте (content|tv|category) $cf_config['content_row'] = array( //array('Title',array(3,'tv')), //array('Price',array(2,'tv')) ); //значения по умолчанию при импорте или проверка при экспорте $cf_config['imp_content_default'] = array( 'content' => array( 'deleted' => 0, 'published' => 1, 'description' => '', 'template' => 5 // ID шаблона товара //'createdon' => strtotime("now") //'publishedon' => strtotime("now") //'pub_date' => strtotime("now") //'editedby' => 1 //'editedon' => strtotime("now") ), 'tv' => array( //7 => 0 ) ); //первая строка - названия полей $cf_config['include_captions'] = true; //число товаров импортируемых за один раз (загрузка по группам). 0 - не ограничивать. $cf_config['batch_import'] = 500; //разбивать по категориям $cf_config['include_categories'] = false; //удалять дочерние категории при очистке и обновлении каталога $cf_config['delete_subcategories'] = true; //по какому полю проверять соответствие товара при обновлении. false - не проверять (очистка категории при обновлении). $cf_config['imp_chk_field'] = 'pagetitle'; //проверять соответствие товара при обновлении по значению TV. Указать ID TV. false - не проверять (очистка категории при обновлении). $cf_config['imp_chk_tvid_val'] = false; //Добавлять товары, которые не найдены при обновлении по TV (imp_chk_tvid_val) или полю (imp_chk_field) $cf_config['imp_if_not_exist'] = false; //удалять HTML-теги при экспорте $cf_config['exp_strip_tags'] = false; //автоматически генерировать псевдоним (alias) при импорте //false - выключено; true - генерировать с переводом в транслит; 'notranslit' - генерировать без перевода в транслит. $cf_config['imp_autoalias'] = false; //Изменить значения поля для всех вложенных товаров до начала импорта. //Например можно отменить публикацию для всех товаров и публиковать только те, которые есть в новом прайс-листе. //первый массив - какие поля и на какие значения менять, второй массив - условия которые нужно проверять (можно сделать пустым) $cf_config['imp_before_change'] = false;//'[{"tv.inventory":0},{}]';//'[{"published":0},{"tv.pricename":"Поставщик1"}]';//false - для отмены //удалить файл после экспорта (скачивания) $cf_config['exp_delete_file'] = false; //кодировка CSV-файла при экспорте $cf_config['exp_csv_charset'] = 'UTF-8'; //'windows-1251' //Импортировать (обновлять) пустые значения $cf_config['imp_empty'] = true; //Имя файла процессора, который использовать для импорта. Если пусто, используется стандартный процессор "import". $cf_config['imp_custom_processor'] = ''; //путь (xpath) в XML структуре до товаров $cf_config['imp_xml_itemsparent_path'] = '';//'/catalog/shop/offers'; //Структура XML файла для импорта $cf_config['imp_xml_structure'] = <<<EOF <data> <Color> <Color1>tv 10<Color1/> <Color2>tv11</Color2> <Color3>tv12</Color3> <Color3>tv13</Color3> </Color> <Price>tv4</Price> <Title>pagetitle</Title> <bonus_info> <bonus_info1>tv7</bonus_info1> <bonus_info2>tv8</bonus_info2> <bonus_info3>tv9</bonus_info3> </bonus_info> </data> EOF; //тестирование конфигурации (без записи в БД). Отчёты -> Журнал ошибок. $cf_config['imp_testmode'] = false; //функция для фильтрации значений при ИМПОРТЕ function filter_import($value_arr){ $output_arr = $value_arr; /* if(isset($output_arr['content']['pagetitle'])) $output_arr['content']['pagetitle'] = mb_strtoupper($output_arr['content']['pagetitle'], 'UTF-8'); */ return $output_arr; } //функция для фильтрации значений при ЭКСПОРТЕ function filter_export($value_arr,$doc_id=0){ $output_arr = $value_arr; //var_dump($value_arr,$output_arr); //exit; /* if(isset($output_arr['price'])) $output_arr[1] = floatval($output_arr[1]) - 200; */ return $output_arr; } ?>

    Читать далее
  • https://e-store.shopkerx.net/katalog/modx_extras/catalogfill
    В описании написано:

    XML - только импорт и только один уровень вложенности

    Это означает, что для XML категории не работают. Всё импортируется в одну категорию, которая указывается при импорте.

    Возможно, я не понял в чём конкретно проблема. Также нужно показать полный конфиг.

    Читать далее
  • Y

    При попытке импортировать данный файл появляется ошибка

    Error -1

    Читать далее