shopkeeper+migx+catalogfill импорт числового формата с дробной частью



  • Несколько параметров товара необходимо представлять десятичными дробями.
    Для этого в migx созданы поля типа <field key="parameter" dbtype="double" null="true" default="" />
    Экспорт происходит удачно. При импорте дробные части пропадают.


  • Администраторы

    Мало информации.



  • схема

    <?xml version="1.0" encoding="UTF-8"?>
    <model package="shoppompa" baseClass="xPDOObject" platform="mysql" defaultEngine="MyISAM" version="1.1">
        <object class="ShopPompaContent" table="shoppompa_content" extends="xPDOSimpleObject">
    	<field key="resource_id" dbtype="int" precision="10" phptype="int" null="false" index="index" />
    	<field key="type" dbtype="text" null="true" default="" />
    	<field key="priceold" dbtype="float" null="true" default="" />
    	<field key="purpose" dbtype="text" null="true" default="" />
    	<field key="fuel" dbtype="text" null="true" default="" />
    	<field key="performance" dbtype="double" null="true" default="" />
    	<field key="diameter" dbtype="text" null="true" default="" />
    	<field key="depthsuction" dbtype="double" null="true" default="" />
    	<field key="heightlift" dbtype="double" null="true" default="" />
    	<field key="consum" dbtype="double" null="true" default="" />
    	<field key="volume" dbtype="double" null="true" default="" />
    	<field key="engine" dbtype="text" null="true" default="" />
    	<field key="weight" dbtype="double" null="true" default="" />
    	<field key="country" dbtype="text" null="true" default="" />
    	<field key="guarant" dbtype="text" null="true" default="" />
    	<field key="pagetitle" dbtype="varchar" precision="255" phptype="string" null="false" default="" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="longtitle" dbtype="varchar" precision="255" phptype="string" null="false" default="" index="fulltext" indexgrp="shoppompa_content_ft_idx"  />
    	<field key="alias" dbtype="varchar" precision="255" phptype="string" null="true" default="" index="index" />
    	<field key="deleted" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="deletedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="deletedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="introtext" dbtype="text" phptype="string" null="true" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="content" dbtype="mediumtext" phptype="string" null="true" index="fulltext" indexgrp="shoppompa_content_ft_idx" />
    	<field key="template" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="menuindex" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="editedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="editedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="createdon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="createdby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="publishedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="unpublishedon" dbtype="int" precision="20" phptype="timestamp" null="false" default="0" />
    	<field key="published" dbtype="tinyint" precision="1" attributes="unsigned" phptype="boolean" null="false" default="0" index="index" />
    	<field key="publishedby" dbtype="int" precision="10" phptype="integer" null="false" default="0" />
    	<field key="hidemenu" dbtype="tinyint" precision="1" attributes="unsigned" phptype="integer" null="false" default="0" index="index" />
    	
    	<field key="price" dbtype="text" null="true" default="" />
    	<field key="image" dbtype="varchar" precision="255" null="true" default="" />
    	<field key="inventory" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	<field key="articul" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	<field key="param1" dbtype="varchar" precision="255" phptype="string" null="false" default="" />
    	
    	<index alias="resource_id" name="resource_id" primary="false" unique="false" type="BTREE">
                <column key="resource_id" length="" collation="A" null="true" />
            </index>
    	<index alias="alias" name="alias" primary="false" unique="false" type="BTREE">
                <column key="alias" length="" collation="A" null="true" />
            </index>
            <index alias="published" name="published" primary="false" unique="false" type="BTREE">
                <column key="published" length="" collation="A" null="false" />
            </index>
    	<index alias="hidemenu" name="hidemenu" primary="false" unique="false" type="BTREE">
                <column key="hidemenu" length="" collation="A" null="false" />
            </index>
    	
    	<index alias="shoppompa_content_ft_idx" name="shoppompa_content_ft_idx" primary="false" unique="false" type="FULLTEXT">
                <column key="pagetitle" length="" collation="A" null="false" />
                <column key="longtitle" length="" collation="A" null="false" />
                <column key="introtext" length="" collation="A" null="true" />
                <column key="content" length="" collation="A" null="true" />
            </index>
    	
        </object>
    </model>
    

    файл импорта

    <?php
    //Название класса таблицы товаров в БД
    $cf_config['className'] = 'ShopPompaContent';
    //Название пакета таблицы товаров в БД
    $cf_config['packageName'] = 'shoppompa';
    //Название поля ID родителя
    $cf_config['parent_field'] = 'resource_id';
    
    //разбивка по столбцам при импорте и экспорте (content|tv|category)
    $cf_config['content_row'] = array(
        array('Наименование',array('pagetitle','content')),
        array('Псевдоним',array('alias','content')),
        array('Краткое описание',array('introtext','content')),
        array('Подробное описание',array('content','content')),
        array('Картинка',array('image','content')),
        array('Цена',array('price','content')),
        array('Цена старая',array('priceold','content')),
        array('Назначение',array('purpose','content')),
        array('Топливо мотопомпы',array('fuel','content')),
        array('Максимальная производительность',array('performance','content')),
        array('Диаметр входа/выхода',array('diameter','content')),
        array('Глубина всасывания',array('depthsuction','content')),
        array('Высота подъема',array('heightlift','content')),
        array('Расход топлива при 75% нагрузке',array('consum','content')),
        array('Объем топливного бака',array('volume','content')),
        array('Двигатель',array('engine','content')),
        array('Масса',array('weight','content')),
        array('Страна',array('country','content')),
        array('Гарантия',array('guarant','content'))
    );
    
    //значения по умолчанию при импорте или проверка при экспорте
    $cf_config['imp_content_default'] = array(
        'content' => array(
            //'deleted' => 0,
            //'published' => 1,
           // 'template' => 9
            //'createdon' => strtotime("now")
            //'publishedon' => strtotime("now")
            //'pub_date' => strtotime("now")
            //'editedby' => 1
            //'editedon' => strtotime("now")
        ),
        'tv' => array(
            //7 => 0
        )
    );
    
    //первая строка - названия полей
    $cf_config['include_captions'] = true;
    
    //число товаров импортируемых за один раз (загрузка по группам). 0 - не ограничивать.
    $cf_config['batch_import'] = 300;
    
    //разбивать по категориям
    $cf_config['include_categories'] = false;
    
    //удалять дочерние категории при очистке и обновлении каталога
    $cf_config['delete_subcategories'] = true;
    
    //по какому полю проверять соответствие товара при обновлении. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_field'] = 'pagetitle';
    
    //проверять соответствие товара при обновлении по значению TV. Указать ID TV. false - не проверять (очистка категории при обновлении).
    $cf_config['imp_chk_tvid_val'] = false;
    
    //Добавлять товары, которые не найдены при обновлении по TV (imp_chk_tvid_val) или полю (imp_chk_field)
    $cf_config['imp_if_not_exist'] = true;
    
    //удалять HTML-теги при экспорте
    $cf_config['exp_strip_tags'] = false;
    
    //автоматически генерировать псевдоним (alias) при импорте
    //false - выключено; true - генерировать с переводом в транслит; 'notranslit' - генерировать без перевода в транслит.
    $cf_config['imp_autoalias'] = true;
    
    //Изменить значения поля для всех вложенных товаров до начала импорта.
    //Например можно отменить публикацию для всех товаров и публиковать только те, которые есть в новом прайс-листе.
    //первый массив - какие поля и на какие значения менять, второй массив - условия которые нужно проверять (можно сделать пустым)
    $cf_config['imp_before_change'] = false;//'[{"tv.inventory":0},{}]';//'[{"published":0},{"tv.pricename":"Поставщик1"}]';//false - для отмены
    
    //удалить файл после экспорта (скачивания)
    $cf_config['exp_delete_file'] = false;
    
    //кодировка CSV-файла при экспорте
    $cf_config['exp_csv_charset'] = 'UTF-8'; //'windows-1251'
    
    //Импортировать (обновлять) пустые значения
    $cf_config['imp_empty'] = true;
    
    //Имя файла процессора, который использовать для импорта. Если пусто, используется стандартный процессор "import".
    $cf_config['imp_custom_processor'] = '';
    
    //путь (xpath) в XML структуре до товаров
    $cf_config['imp_xml_itemsparent_path'] = '';//'/catalog/shop/offers';
    
    //Структура XML файла для импорта
    $cf_config['imp_xml_structure'] = '';
    
    //тестирование конфигурации (без записи в БД). Отчёты -> Журнал ошибок.
    $cf_config['imp_testmode'] = false;
    
    //функция для фильтрации значений при ИМПОРТЕ
    function filter_import($value_arr){
        $output_arr = $value_arr;
        /*
        if(isset($output_arr['content']['pagetitle']))
            $output_arr['content']['pagetitle'] = mb_strtoupper($output_arr['content']['pagetitle'], 'UTF-8');
        */
        
        return $output_arr;
    }
    
    
    //функция для фильтрации значений при ЭКСПОРТЕ
    function filter_export($value_arr,$doc_id=0){
        $output_arr = $value_arr;
        //var_dump($value_arr,$output_arr);
        //exit;
        /*
        if(isset($output_arr['price']))
            $output_arr[1] = floatval($output_arr[1]) - 200;
        */
        return $output_arr;
    }
    
    
    ?>
    

    при экспорте поля типа

    <field key="volume" dbtype="double" null="true" default="" />
    

    выгружаются в дробном виде типа 12.3 (это хорошо)
    при импорте из того же файла обратно дробная часть пропадает, остаётся 12 (а это плохо)


  • Администраторы

    Не хватает информации что в файле, который импортируете. Скорее всего там цифры с запятой, должна быть точка.



  • если экспортировать файл с расширением csv, разделители - точки, если xls - запятые.
    при импорте я пробовал в роли разделителей и запятые и точки. результат одинаков - дробной части после загрузки нет.



  • пробовал даже так: экспортировал файл и его же импортировал.



  • всё ещё мало информации? или непонятно излагаю?


  • Администраторы

    дробной части после загрузки нет

    При импорте из CSV тоже? Можете дать ваши файлы?



  • судя по всему причина была в кодировке.
    файлы .csv, созданные на винде редактировались и пересохранялись на маке. появился косяк с кодировкой текста, видимо он и привёл к такому результату. (проблему с кодировкой планировал решить после, но как оказалось, она-то и была первостепенной):)
    решение: файлы были сохранены в .xlsx ,в этом формате отредактированы и импортированы.
    СПАСИБО за внимание к моей проблеме.



Последние темы

Похоже, подключение к Форум | MODX Shopkeeper было разорвано, подождите, пока мы пытаемся восстановить соединение.