Последние темы


shopkeeper+migx+catalogfill импорт числового формата с дробной частью

  • Несколько параметров товара необходимо представлять десятичными дробями.
    Для этого в migx созданы поля типа <field key="parameter" dbtype="double" null="true" default="" />
    Экспорт происходит удачно. При импорте дробные части пропадают.

  • Мало информации.

  • схема

    <?xml version="1.0" encoding="UTF-8"?>
    <model package="shoppompa" baseClass="xPDOObject" platform="mysql" defaultEngine="MyISAM" version="1.1">
        <object class="ShopPompaContent" table="shoppompa_content" extends="xPDOSimpleObject">
    	<field key="resource_id" dbtype="int" precision="10" phptype="int" null="false" index="index" />
    	<field key="type" dbtype="text" null="true" default="" />
    	<field key="priceold" dbtype="float" null="true" default="" />
    	<field key="purpose" dbtype="text" null="true" default="" />
    	<field key="fuel" dbtype="text" null="true" default="" />
    	<field key="performance" dbtype="double" null="true" default="" />
    	<field key="diameter" dbtype="text" null="true" default="" />
    	<field key="depthsuction" dbtype="double" null="true" default="" />
    	<field key="heightlift" dbtype="double" null="true" default="" />
    	<field key="consum" dbtype="double" null="true" default="" />
    	<field key="volume" dbtype="double" null="true" default="" />
    	<field key="engine" dbtype="text" null="true" default="" />
    	<field key="weight" dbtype="double" null="true" default="" />
    	<field key="country" dbtype="text" null="true" default="" />
    	<field key="guarant" dbtype="text" null="true" default="" />
    	<field key="pagetitle" dbtype="varchar" precision="255" phptype="string" null="false" default="" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="longtitle" dbtype="varchar" precision="255" phptype="string" null="false" default="" index="fulltext" indexgrp="shoppompa_content_ft_idx"  />
    	<field key="alias" dbtype="varchar" precision="255" phptype="string" null="true" default="" index="index" />
    	<field key="deleted" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="deletedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="deletedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="introtext" dbtype="text" phptype="string" null="true" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="content" dbtype="mediumtext" phptype="string" null="true" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="template" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="menuindex" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="editedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="editedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="createdon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="createdby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="publishedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="unpublishedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="published" dbtype="tinyint" precision="1" attributes="unsigned" phptype="boolean" null="false" default="0" index="index" />
    	<field key="publishedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="hidemenu" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="0" index="index" />
    	
    	<field key="price" dbtype="text" null="true" default="" />
    	<field key="image" dbtype="varchar" precision="255" null="true" default="" />
    	<field key="inventory" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	<field key="articul" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	<field key="param1" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	
    	<index alias="resource_id" name="resource_id" primary="false" unique="false" type="BTREE">
                <column key="resource_id" length="" collation="A" null="true" />
            </index>
    	<index alias="alias" name="alias" primary="false" unique="false" type="BTREE">
                <column key="alias" length="" collation="A" null="true" />
            </index>
            <index alias="published" name="published" primary="false" unique="false" type="BTREE">
                <column key="published" length="" collation="A" null="false" />
            </index>
    	<index alias="hidemenu" name="hidemenu" primary="false" unique="false" type="BTREE">
                <column key="hidemenu" length="" collation="A" null="false" />
            </index>
    	
    	<index alias="shoppompa_content_ft_idx" name="shoppompa_content_ft_idx" primary="false" unique="false" type="FULLTEXT">
                <column key="pagetitle" length="" collation="A" null="false" />
                <column key="longtitle" length="" collation="A" null="false" />
                <column key="introtext" length="" collation="A" null="true" />
                <column key="content" length="" collation="A" null="true" />
            </index>
    	
        </object>
    </model>
    

    файл импорта

    <?php
    //Название класса таблицы товаров в БД
    $cf_config['className'] = 'ShopPompaContent';
    //Название пакета таблицы товаров в БД
    $cf_config['packageName'] = 'shoppompa';
    //Название поля ID родителя
    $cf_config['parent_field'] = 'resource_id';
    
    //разбивка по столбцам при импорте и экспорте (content|tv|category)
    $cf_config['content_row'] = array(
        array('Наименование',array('pagetitle','content')),
        array('Псевдоним',array('alias','content')),
        array('Краткое описание',array('introtext','content')),
        array('Подробное описание',array('content','content')),
        array('Картинка',array('image','content')),
        array('Цена',array('price','content')),
        array('Цена старая',array('priceold','content')),
        array('Назначение',array('purpose','content')),
        array('Топливо мотопомпы',array('fuel','content')),
        array('Максимальная производительность',array('performance','content')),
        array('Диаметр входа/выхода',array('diameter','content')),
        array('Глубина всасывания',array('depthsuction','content')),
        array('Высота подъема',array('heightlift','content')),
        array('Расход топлива при 75% нагрузке',array('consum','content')),
        array('Объем топливного бака',array('volume','content')),
        array('Двигатель',array('engine','content')),
        array('Масса',array('weight','content')),
        array('Страна',array('country','content')),
        array('Гарантия',array('guarant','content'))
    );
    
    //значения по умолчанию при импорте или проверка при экспорте
    $cf_config['imp_content_default'] = array(
        'content' => array(
            //'deleted' => 0,
            //'published' => 1,
           // 'template' => 9
            //'createdon' => strtotime("now")
            //'publishedon' => strtotime("now")
            //'pub_date' => strtotime("now")
            //'editedby' => 1
            //'editedon' => strtotime("now")
        ),
        'tv' => array(
            //7 => 0
        )
    );
    
    //первая строка - названия полей
    $cf_config['include_captions'] = true;
    
    //число товаров импортируемых за один раз (загрузка по группам). 0 - не ограничивать.
    $cf_config['batch_import'] = 300;
    
    //разбивать по категориям
    $cf_config['include_categories'] = false;
    
    //удалять дочерние категории при очистке и обновлении каталога
    $cf_config['delete_subcategories'] = true;
    
    //по какому полю проверять соответствие товара при обновлении. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_field'] = 'pagetitle';
    
    //проверять соответствие товара при обновлении по значению TV. Указать ID TV. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_tvid_val'] = false;
    
    //Добавлять товары, которые не найдены при обновлении по TV (imp_chk_tvid_val) или полю (imp_chk_field)
    $cf_config['imp_if_not_exist'] = true;
    
    //удалять HTML-теги при экспорте
    $cf_config['exp_strip_tags'] = false;
    
    //автоматически генерировать псевдоним (alias) при импорте
    //false - выключено; true - генерировать с переводом в транслит; 'notranslit' - генерировать без перевода в транслит.
    $cf_config['imp_autoalias'] = true;
    
    //Изменить значения поля для всех вложенных товаров до начала импорта.
    //Например можно отменить публикацию для всех товаров и публиковать только те, которые есть в новом прайс-листе.
    //первый массив - какие поля и на какие значения менять, второй массив - условия которые нужно проверять (можно сделать пустым)
    $cf_config['imp_before_change'] = false;//'[{"tv.inventory":0},{}]';//'[{"published":0},{"tv.pricename":"Поставщик1"}]';//false - для отмены
    
    //удалить файл после экспорта (скачивания)
    $cf_config['exp_delete_file'] = false;
    
    //кодировка CSV-файла при экспорте
    $cf_config['exp_csv_charset'] = 'UTF-8'; //'windows-1251'
    
    //Импортировать (обновлять) пустые значения
    $cf_config['imp_empty'] = true;
    
    //Имя файла процессора, который использовать для импорта. Если пусто, используется стандартный процессор "import".
    $cf_config['imp_custom_processor'] = '';
    
    //путь (xpath) в XML структуре до товаров
    $cf_config['imp_xml_itemsparent_path'] = '';//'/catalog/shop/offers';
    
    //Структура XML файла для импорта
    $cf_config['imp_xml_structure'] = '';
    
    //тестирование конфигурации (без записи в БД). Отчёты -> Журнал ошибок.
    $cf_config['imp_testmode'] = false;
    
    //функция для фильтрации значений при ИМПОРТЕ
    function filter_import($value_arr){
        $output_arr = $value_arr;
        /*
        if(isset($output_arr['content']['pagetitle']))
            $output_arr['content']['pagetitle'] = mb_strtoupper($output_arr['content']['pagetitle'], 'UTF-8');
        */
        
        return $output_arr;
    }
    
    
    //функция для фильтрации значений при ЭКСПОРТЕ
    function filter_export($value_arr,$doc_id=0){
        $output_arr = $value_arr;
        //var_dump($value_arr,$output_arr);
        //exit;
        /*
        if(isset($output_arr['price']))
            $output_arr[1] = floatval($output_arr[1]) - 200;
        */
        return $output_arr;
    }
    
    
    ?>
    

    при экспорте поля типа

    <field key="volume" dbtype="double" null="true" default="" />
    

    выгружаются в дробном виде типа 12.3 (это хорошо)
    при импорте из того же файла обратно дробная часть пропадает, остаётся 12 (а это плохо)

  • Не хватает информации что в файле, который импортируете. Скорее всего там цифры с запятой, должна быть точка.

  • если экспортировать файл с расширением csv, разделители - точки, если xls - запятые.
    при импорте я пробовал в роли разделителей и запятые и точки. результат одинаков - дробной части после загрузки нет.

  • пробовал даже так: экспортировал файл и его же импортировал.

  • всё ещё мало информации? или непонятно излагаю?

  • дробной части после загрузки нет

    При импорте из CSV тоже? Можете дать ваши файлы?

  • судя по всему причина была в кодировке.
    файлы .csv, созданные на винде редактировались и пересохранялись на маке. появился косяк с кодировкой текста, видимо он и привёл к такому результату. (проблему с кодировкой планировал решить после, но как оказалось, она-то и была первостепенной):)
    решение: файлы были сохранены в .xlsx ,в этом формате отредактированы и импортированы.
    СПАСИБО за внимание к моей проблеме.

 

Последние комментарии

  • @Andchir Чета не додумался. Спасибо огромное, завелось.

    Читать далее
  • Потому что в этой функции нет объекта $modx. Можно попробовать добавить такую строчку вверху функции (внутри):

    global $modx;

    Читать далее
  • Добрый день.
    Задача: Есть таблица где записываются id данных из других созданных таблиц.
    Нужно в функции filter_export и filter_import объединить данные из разных таблиц.

    Как я пробывал решить свою задачку:

    function filter_export($value_arr,$doc_id=0) { //var_dump($output_arr); //exit; $output_arr = $value_arr; if(isset($output_arr['execution'])) { $ids = $output_arr['execution']; $result = $modx->query("SELECT * FROM LKp3KJ_my_execution WHERE id = $ids"); $row = $result->fetch(PDO::FETCH_ASSOC); $output_arr['execution'] = $row[title]; } /* if(isset($output_arr['price'])) $output_arr[1] = floatval($output_arr[1]) - 200; */ return $output_arr; }

    В ответ получаю 500 ошибку на странице импорт/экспорт.

    Читать далее
  • Спасибо за содействие! Приношу извинения за неудобства.

    Читать далее