Модификация для нормальной загрузки через CSV

[tug]

Тема ушла сюда: http://joomlaforum.ru/index.php/topic,150010.0.html

В этой теме пишем свой мнение о том, что я скажу ниже.  

Нормальная заливка это ...:

• возможность заливать любые данные через CSV, т.е. товары, типы, параметры, категории, производителей, налоги, хуёги и пр.
• возможность прямо в csv указывать поля, которые нужно обрабатывать.
• когда в админке Вам нужно только указать файл и нажать "Upload".
• возможность кастомизировать заливку и добавлять новые модули и не только для VirtueMart.

Спасибо всем, кто проспонсировал проект в тяжелое так сказать время.

[tug]

Tug, когда будет ролик? У меня что-то вообще ничё не получается =((((

Сожалею, пока не получается выделить мимнутку...

А от чего зависит "удачный расклад"???

От того, какой я кодер =)

[Aleshka]

Так если удачно сложится. Я час перделываю шаблон VirtueMart под себя, если справлюсь за сегодня, то постараюсь модифицировать твою прикольную штучку.

От того, какой я кодер =)

Проверим какой ты кодер .
Кстати tug,  а как делать ролик, может если будет немного времени  я сделаю. Правда не обещаю за сегодня и за завтра сделать.

[tug]

Берешь прогу для записи с экрана и пишешь =)
Блин я же вчера ещё сделал и вроде даже сюда кинул =((( странно, может удалили?

Вобщем оказалось, что кодер я неплохой. Чтобы из последней версии расширения получить что-то, что будет добавлять цены для разных групп и разных количеств товара нужно найти файл ps_simple_csv_aliases.php и строку №123:
заменить на

Код:

'/Цена для группы "(.+?)"(?:(?:.*?)(\d+)(?:.*?)(\d+))?/' => 'product_prices|shopper_group_name|price_quantity_start|price_quantity_end',

Формат колонок:
Цена для группы "<название группы покупателей, сначала это обычно -default->"[[что угодно]<число от>[что угодно]<число до>]

Правильно: Цена для группы "-default-" количество от 3 до 7
Неправильно: Цена для группы "-default-" количество от 3
Правильно: Цена для группы "-default-" 3 - 7
Правильно: Цена для группы "-default-", 3 7
Правильно: Цена для группы "-default-"

[Gruz]

У меня не получается при импорте убивать товары, отсутствующие в прайсу.
В доке написано: "Автоматическая проверка товаров и категорий. Если в Вашем csv нет каких-то товаров Вы можете указать опцию "Проверять товары" и товары, которых в csv нет, но есть в базе будут автоматически скрыты"
Делаю импорт, ставлю галочку, но старые товары висят без изменений.

Где собака порылась?

Юзаю:
simple_csv_1_beta_4
VM 1.0.10
Joomla 1.0.12

З.Ы. По идее, если я пустой прайс имортну с галочкой, то должны бы были вырубиться все товары.

[tug]

очередное обновление

Simple CSV Upload 1 beta 5

• Исправлена ошибка из-за которой не указанные в csv товары не скрывались при включенной опции "Проверять товары"
• Исправлена ошибка из-за которой неправильно работало обновление сложных цен (цен для разных групп и с количеством)
• Мелкие улучшения кода

Пользуйтесь. Пишите, что хотели бы видеть, после выпуска релиза будет выпущен ролик и все работы по улучшению расширения будут направлены на сторонние компоненты.

[Gruz]

Было би неплохо, чтобы можно было указывать категории, для которых опция проверять товары действует, а для которых нет. Хотя может это и очень специфически.

У меня часть магазина загружается из прайса, а часть раньше была набита ручками, с описаниями, но в прайсе её нет. Если поднимаю из прайса, то набитые ручками вырубаются.

[Joewe]

Обновил с первой версии до пятой У меня все равно удаляются параметры категории и производитель при загрузке двух колонок (артикул и цена товара)

[tug]

Проверил, действительно по моей невнимательности производитель сбрасывался.
Чтобы исправить это в файле "ps_simple_csv.php"
Замените строку 883 на

Код:

if( $csv_data['manufacturer_id'] ) {

А вот категории нормально у меня отработали.
Опишите поподробней какие параметры категорий сбрасываются?

[yugin]

Добрый день!
Господа, подскажите такой вопрос: почему при заливке в наименовании товаров количество символов обрезается до 64? Вроде должно быть 255. Или я ошибаюсь? При чем получается не только при заливке, но и если вбивать товар вручную.
Заранее благодарю

[tug]

64 символа, это ограничение по базе.

[yugin]

спасибо, уже что-то. а то долго разбирался. а как-то можно увеличить? хотя бы до 255? прошу прощения, если вопрос глупый

[Gruz]

Видимо в PHPMyAdmin изменить тип поля на более подходящий.
Посмотри, сориентируешся.

[yugin]

попробую, спасибо ОГРОМНОЕ! тока вот еще трабл возник - при загрузке товаров, цены длиной более 3-х символов, превращаются в 1 символ. например, 1500 руб. превращаются в 1 руб. 2000 руб. - в 2 руб. и так далее. Уж тут совсем недоумеваю. Искал на форуме, вроде ни у кого такой проблемы не было. если все же где-то есть про данную проблему, дайте ссылочку, плиз.
Заранее благодарю.

[tug]

Как грузите? Покажите кусочек CSV.

[Aleshka]

Формат колонок:
Цена для группы "<название группы покупателей, сначала это обычно -default->"[[что угодно]<число от>[что угодно]<число до>]

Правильно: Цена для группы "-default-" количество от 3 до 7
Неправильно: Цена для группы "-default-" количество от 3
Правильно: Цена для группы "-default-" 3 - 7
Правильно: Цена для группы "-default-", 3 7
Правильно: Цена для группы "-default-"

А можно подробней написать как я должен называть колонки для того чтобы указать несколько цен для разного количества товара? А то что-то я не могу пока понять как это делать.

[Aleshka]

Не пойму не заносится у меня цена и все. В какой файл нужно вносить цены, как я понимаю в "товар". Я прав?

[Aleshka]

Сталкнулся с такой проблемой!!!!
А как мне сделать, чтобы у каждого товара была свой придел цен и количество продаж. Поясню на примере, у меня есть иглы (стандартный пример), и одни иглы я продаю по таким расценкам (1-5 шт. = 600 руб, 6-10шт=550 руб, более 10 шт = 500 руб). А как мне сделать если я хочу еще и другие иглы продавать (1-5 шт = 600 руб и все что свыше по 500руб). Попробывал такое сделать ничего не получается все что свыше 5 проставляется нулями!!!!! Надеюсь вопрос я ясно изложил???

[tug]

Создаешь в товарах колонку
например "Цена для группы "-default-" количество от 3 до 7"
(-default- это стандартное название основной группы покупателей в Virtuemart, если вы ничего не меняли)
дальше в товарах пишешь цену.

Если нужно сделать, чтобы всё что больше пиши так "Цена для группы "-default-" количество от 5 до 99999"

[yugin]

Как грузите? Покажите кусочек CSV.

в csv включены всего 4 поля - артикул, наименование, путь и цена.
вот пример (в файле)

[tug]

Измините формат колонки в вашем редакторе.
Для добавления в базу значение преобразуется в числовой формат, делается это очень грубо.
"5 000,00" это только по вашему 5 тысяч, для базы это просто "5".

Символом разделителя целой и дробной части должна быть точка.

[Aleshka]

Создаешь в товарах колонку
например "Цена для группы "-default-" количество от 3 до 7"
(-default- это стандартное название основной группы покупателей в Virtuemart, если вы ничего не меняли)
дальше в товарах пишешь цену.

Да все сделал получилось, спасибо.

Если нужно сделать, чтобы всё что больше пиши так "Цена для группы "-default-" количество от 5 до 99999"

А вот тут у меня возникла проблема, час расскажу подробней.
Все будет относится к примеру файла для инсулиновых шприцев и игл. Возьмем для примера  иглы. Итак, существуют разные цены для разного количества покупок. Для одних игл цена состоит из из двух диапазон цен, а для некоторых из четырех. Например, для одних цена составляет 1-5 шт стоит 600 руб, все что выше стоит 550 руб. А  для других 1-5 шт стоит 550 руб, 6-10 шт стоит 525 руб, 11-100 штук 500 руб, а количество более 100 шт стоит 450 руб. Вот здесь  и возникает трудности. А как мне все это правильно зависти в csv- файл. Вот если я делаю такой вариант:

"Цена для группы "-default-" количество от 1 до 5" (какая-то цена); "Цена для группы "-default-" количество от 6 до 10" (какая-то цена); "Цена для группы "-default-" количество от 11 до 100"(какая-то цена); "Цена для группы "-default-" количество от 101"(какая-то цена)

Но как мне указать, что для каких-то игл нужно указать все 4 цены, а для каких-то только 2. Если я выставляю две цены, а остальные поля оставляю пустыми, то все три цены остаются заполненные нулями. Пример, для игл я ввожу цену для количества от 1-5 и затем цену для количества от 100 штук. Остальные колонки я оставляю не заполненными, другими словами  "Цена для группы "-default-" количество от 6 до 10"  оставляю пустым; "Цена для группы "-default-" количество от 11 до 100"оставляю пустым. И после того как импортирую csv-файл то в тех товарах где я указал 4 цены все нормально, а вот где только две, там первая цена выставляется нормально, а дальше содержит 3 ценовые категории и содержат 0. 
Tug,   посоветуйте как мне сделать чтобы колонки которые не содержат значения или содержат нули не заполнялись и не были видны???

[tug]

Посмотрите как сделано для разных типов товаров.
CSV как бы начинается заново. Воспользуйтесь этой возможностью и  используйте только необходимые поля в новом определении.
Если у Вас есть другие идеи я их послушаю. Например есть идея игнорировать пустые значения цены или игнорировать значение в колонке с каким-то определенным символом, например "-"...

[Aleshka]

Если у Вас есть другие идеи я их послушаю. Например есть идея игнорировать пустые значения цены или игнорировать значение в колонке с каким-то определенным символом, например "-".

Да идеи есть уже есть и решения, но решение не знаю правильное или нет. Но оно работает. Вот мои модификации может кому-то надо. Заходим в файл ps_simple_csv.php и переходим на строчку 1032:

if( !$csv_price['product_price'] ) $csv_price['product_price'] = $csv_price['value'];

И за ней вставляем следующее условие:

if ($csv_price['product_price'] != 0) {

И закрываем скобку "}" в строке 1036, т.е строка будет иметь следующий вид:

if( !$csv_price['price_quantity_end'] ) $csv_price["price_quantity_end"] = 0;}

Получилось может и коряво но у меня работает. А если коряво то прошу простить php я только осваиваю.
Tug, ну Вы и наворотили с регулярными выражениями. До сих пор не пойму как они работают, хотя вроде perl на начальном уровне знаю не плохо. В файле php_simple_csv_aliase.php

$product_dynamic_fields = array (
   '/Цена для группы "(.+?)"(??:.*?)(\d+)(?:.*?)(\d+))?/' => 'product_prices|shopper_group_name|price_quantity_start|price_quantity_end',
   '/(.+);(.+)/' => 'product_types|product_type_name|product_parameter_name',
);

[Aleshka]

Забыл сказать самое главное это условие которое я добавил позволяет игнорировать 0 значения. Т.е в этом случае в базу нчего вносится не будет.

[yugin]

Измините формат колонки в вашем редакторе.
Для добавления в базу значение преобразуется в числовой формат, делается это очень грубо.
"5 000,00" это только по вашему 5 тысяч, для базы это просто "5".

Символом разделителя целой и дробной части должна быть точка.

Огромное спасибо! Так и сделаю

[Aleshka]

Сталкнулся с проблемой, при заливке большого количества файлов около  1300 позиций мой apache 2.2.2. Начинает есть память   при заливке вижу что он потребляет свыше 150 Мб. Как это можно исправить?

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 8650712 bytes) in /usr/local/www/apache22/data/administrator/components/com_virtuemart/classes/ps_simple_csv.php on line 434

Причем ошибки возникают в разных местах данного файла.

[tug]

Попробуйте поискать проблему в слишком большом количестве данных в одной строке csv.
На моей практике только это приводило к такому поеданию памяти.

[hedaya]

Привет.  Tug, вот здесь (http://joomlaforum.ru/index.php/topic,4392.0.html) ты говорил, что можешь очень полезную фичу прикрутить к модулю. Есть ли это в ближайших планах? =)

[}{oTT@6b)4]

Tug, а с этим можно чтото сделать?

Замечание: PHP работает в режиме Safe Mode. Влияние данного расширения на функциональность модуля на данный момент не изучена. За дополнительной информацией обратитесь на joomlaforum.ru - http://joomlaforum.ru/index.php/topic,8340.new.html#new

Ошибка: Error: Specified local file doesn't exist.

И ещё.... влиет ли опция PHP register_globals на данный модуль?

[tug]

Привет.  Tug, вот здесь (http://joomlaforum.ru/index.php/topic,4392.0.html) ты говорил, что можешь очень полезную фичу прикрутить к модулю. Есть ли это в ближайших планах? =)

Спасибо за напоминание, хорошая идея, попробую реализовать на этой неделе.

Tug, а с этим можно чтото сделать?

Сменить хостинг или прогнуть хосетра на нормальное php