Кодировка RSS

[DIvan]

Народ, помогите начинающему!
Имеется:
Joomla! 1.0.8.02 RUS Paranoia! MCE
Apache/2.0.47 (Win32)
MySQL 4.0.18-nt
PhP 5.1.2
Все работает на локальном хосте, проблем нет.
Хочу сделать ленту RSS на главной странице. Завожу newsfeed от http://news.finance.ua/ru/rss, затем делаю новый пункт главного меню как "Ссылка - RSS-лента" на созданный newsfeed. При выборе этого пункта на фронт-энде все просто отлично.
Если же я пытаюсь создать новый модуль, прописать ему RSS URL и опубликовать на главной странице (top), то вместо русских букв вижу знаки вопроса
В теле RSS кодировка Win-1251 прописана в явном виде.

Читал доку, ее крайне мало, даже на английском. Мне так и не удалось до конца понять, как же нужно правильно публиковать newsfeed'ы. Факт публикации в менеджере RSS - экспорта еще не делает ленту новостей видимой где-либо на сайте. Каков "канонический" подход в этом случае?
Заранее спасибо!

[Old_Fixer]

Та же проблема! Проверил на Joomla v1.0.10 - сплошные вопросики! Где копать?
PHP 5.1.1 Apache 2.0.55

[alladin111]

И у меня тоже вопросы, даже на офицальной английской версии.

[smart]

И у меня тоже вопросы, даже на офицальной английской версии.

на оригинальной это нормально — ставь Joomla Paranoia

[Nicolas]

Таже причина замечена....
как я догадываюсь это PHP 5 линейки

[Garun]

Я уже пытался дать ответ на этот вопрос. То ли был глюк и мой пост не сохранился, то ли его почему то удалили ... но на форуме

Joomla(Re) есть такой хак... я не знаю подойдет ли это решение для Paranoia, но может кто то сделает хак для неё:
Какое-то решение проблем с парсером, который не умеет читать русские буквы для php5 и кодировки windows-1251.
Итак. Имеем исходную тему - если мы создаем модуль и в нем указываем url rss-фида написанного в кодировке windows-1251, то на выходе имеем неприятный баг - знаки вопроса вместо буковок. Для решения этого можно попробовать применить следующий патч. Патч будет работать только для php5 с поддержкой iconv.

Прежде всего далем бэкап всех изменяемых файлов. Не факт что это сработает.

Идем в \includes\domit\xml_domit_rss_shared.php и ищем функцию function getTextFromFile() в ее конец вставляем вот что
Цитировать
         if ($fileContents == '') {
            $this->establishConnection($filename);
            $response =& $this->httpConnection->get($filename);

            if ($response != null) {
               $fileContents = $response->getResponse();
            }
         }
      }

      preg_match("|<?xml.*encoding=\"(.*)\".*>|Umsi",$fileContents,$m);
      $fileContents = iconv($m[1],'utf-8',$fileContents);
      $fileContents = str_replace($m[1],'utf-8',$fileContents);

      return $fileContents;
   } //getTextFromFile

Далее в этом же файле ищем функцию function getElementText($elementName) и пишем
Цитировать
   function getElementText($elementName) {
      $elementName = strtolower($elementName);
      return iconv('utf-8','windows-1251',$this->_getElementText($elementName, $this->DOMIT_RSS_indexer));
       return $this->_getElementText($elementName, $this->DOMIT_RSS_indexer);
   } //getElementText

Теперь открываем /includes/frontend.html.php и функцию function modoutput_feed() в ней надо удалить все вхождения
$что_то_там = mosCommonHTML::newsfeedEncoding( $rssDoc, $что_то_там );
Я удалил их для переменных (в скобочках указана приблизительная строка): $feed_title(173), $feed_descrip(189), $item_title(226), $text (253)[/list]

Тоже самое решение для компонента com_newsfeeds (и снова для пхп5)
Нужено сделать тот же саый хак rss-xml парсера (\includes\domit\xml_domit_rss_shared.php) и удалить строчки (всего их четыре) в файле /components/com_newsfeeds/newsfeeds.html.php в функции function showNewsfeeds()
$feed_title = mosCommonHTML::newsfeedEncoding( $rssDoc, $feed_title );
+ для переменных $feed_descrip, $item_title, $text.

У меня всё сработало!

[Aysek]

На странице было 2 модуля. Один с новостями с сайта, другой с внешнего ресурса.
После изменений вопросы исчезли остался только текст, но исчез и второй модуль с новостями с сайта.

В чём может быть причина и как исправить?

[Aysek]

В каких файлах(ле) нужно добавить эти вставки? (если можно полный путь до файла):
"echo $utf8_content;  // вывод контента в utf8 - формате
echo normal($utf8_content);  // вывод контента utf8 в 1251 формате"

Где взять файл andyr_lib.php?

[Aysek]

Я плохо разираюсь в коде

Хе... в сборке вроде все уже пропатчено...

Это значит, что вставки уже сделаны в примере  Garun?
"echo $utf8_content;  // вывод контента в utf8 - формате
echo normal($utf8_content);  // вывод контента utf8 в 1251 формате"

Он идет как составная часть сборки, путь: /administrator/includes/andyr_lib.php

То есть andyr_lib.php уже есть в сборки Joomla 1.0.12 LE 2007, так? 
Как подключить этот файл?

[Aysek]

include_once ($GLOBALS['mosConfig_absolute_path'] .'/administrator/includes/andyr_lib.php');

Куда это надо вставить?  :-)

[SergejP]

Есть еще один встроенный перекодировщик для RSS новостей... И внем ошибка, в результате чего он неправильно работает, т.е. декодирует тогда когда не надо

Чтобы это исправить открываем файл хост/includes/joomla.php и ищем там функцию newsfeedEncoding( $rssDoc, $text )

После чего находим в этой функции следующий текст:

      if ( phpversion() >= 5 ) {
      // handling for PHP 5
         if ( _JOS_FEED_ENCODING ) {
         // handling for utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
            // utf-8 page
               $encoding = 'html_entity_decode';
            } else {
            // non utf-8 page
               $encoding = 'utf8_decode';
            }
         } else {
         // handling for non utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
               // utf-8 page
               $encoding = '';
            } else {
               // non utf-8 page
               $encoding = 'utf8_decode';
            }
         }
      } else {
   
 и меняем выделенные строки местами...
В итоге должно получиться следующее


      if ( phpversion() >= 5 ) {
      // handling for PHP 5
         if ( _JOS_FEED_ENCODING ) {
         // handling for utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
            // utf-8 page
               $encoding = 'html_entity_decode';
            } else {
            // non utf-8 page
               $encoding = 'utf8_decode';
            }
         } else {
         // handling for non utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
               // utf-8 page
               $encoding = 'utf8_decode';
            } else {
               // non utf-8 page
               $encoding = '';
            }
         }
      } else {

Это для 5-го PHP для 4 возможно то же что-то придется поменять... Там ниже для этого свой кусочек...

[EaglE63]

Получилось!

А как теперь исправить, что вместо «кавычек» стали отображаться [кавычкиk ?

[Swoper]

Есть еще один встроенный перекодировщик для RSS новостей... И внем ошибка, в результате чего он неправильно работает, т.е. декодирует тогда когда не надо

Чтобы это исправить открываем файл хост/includes/joomla.php и ищем там функцию newsfeedEncoding( $rssDoc, $text )

После чего находим в этой функции следующий текст:

      if ( phpversion() >= 5 ) {
      // handling for PHP 5
         if ( _JOS_FEED_ENCODING ) {
         // handling for utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
            // utf-8 page
               $encoding = 'html_entity_decode';
            } else {
            // non utf-8 page
               $encoding = 'utf8_decode';
            }
         } else {
         // handling for non utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
               // utf-8 page
               $encoding = '';
            } else {
               // non utf-8 page
               $encoding = 'utf8_decode';
            }
         }
      } else {
   
 и меняем выделенные строки местами...
В итоге должно получиться следующее


      if ( phpversion() >= 5 ) {
      // handling for PHP 5
         if ( _JOS_FEED_ENCODING ) {
         // handling for utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
            // utf-8 page
               $encoding = 'html_entity_decode';
            } else {
            // non utf-8 page
               $encoding = 'utf8_decode';
            }
         } else {
         // handling for non utf-8 feed
            if ( _JOS_SITE_ENCODING ) {
               // utf-8 page
               $encoding = 'utf8_decode';
            } else {
               // non utf-8 page
               $encoding = '';
            }
         }
      } else {

Спасибо. этот вариант помог с решением проблемы .. сборка Lavr Edition

[xshish]

Добрый день!
На мастерхосте поставил Joomla! 1.0.12 Lavra Edition 2007
Пытаюсь импортирвать новости отсюда http://www.rasc.ru/rss/
У меня сайт в win 1251, а ту часть страницы которая из RSS  джумла выдает в KOI-8. Подскажите  пожалуйста, где проблема  ?

[Death]

Добрый день!
На мастерхосте поставил Joomla! 1.0.12 Lavra Edition 2007
Пытаюсь импортирвать новости отсюда http://www.rasc.ru/rss/
У меня сайт в win 1251, а ту часть страницы которая из RSS  джумла выдает в KOI-8. Подскажите  пожалуйста, где проблема  ?

точно такая-же проблема.
Помогите исправить.
Только у меня при получении до 12 новостей все нормально , но как только я поставлю 13 и более получаются каракули в KOI-8.
Сборка таже Лавра 1.0.12.   RSS модуль встроенный.

[c0yc]

Спасибо. этот вариант помог с решением проблемы .. сборка Lavr Edition

у меня выдает везде ошибку:
Parse error: syntax error, unexpected T_IF, expecting T_FUNCTION in /home/user_m_11_44/public_html/security/includes/joomla.php on line 5583

[6anzay]

Я уже пытался дать ответ на этот вопрос. То ли был глюк и мой пост не сохранился, то ли его почему то удалили ... но на форуме Joomla(Re) есть такой хак... я не знаю подойдет ли это решение для Paranoia, но может кто то сделает хак для неё:
Какое-то решение проблем с парсером, который не умеет читать русские буквы для php5 и кодировки windows-1251.
Итак. Имеем исходную тему - если мы создаем модуль и в нем указываем url rss-фида написанного в кодировке windows-1251, то на выходе имеем неприятный баг - знаки вопроса вместо буковок. Для решения этого можно попробовать применить следующий патч. Патч будет работать только для php5 с поддержкой iconv.

Прежде всего далем бэкап всех изменяемых файлов. Не факт что это сработает.

Идем в \includes\domit\xml_domit_rss_shared.php и ищем функцию function getTextFromFile() в ее конец вставляем вот что...

Добрый день!
Я в пхп совсем не разбираюсь, объясните популярно.
Вы пишете

Идем в \includes\domit\xml_domit_rss_shared.php и ищем функцию function getTextFromFile() в ее конец вставляем вот что

Код:

         if ($fileContents == '') {
            $this->establishConnection($filename);
            $response =& $this->httpConnection->get($filename);

            if ($response != null) {
               $fileContents = $response->getResponse();
            }
         }
      }

      preg_match("|<?xml.*encoding=\"(.*)\".*>|Umsi",$fileContents,$m);
      $fileContents = iconv($m[1],'utf-8',$fileContents);
      $fileContents = str_replace($m[1],'utf-8',$fileContents);

      return $fileContents;
   } //getTextFromFile

У меня в коде вот что

Код:

function getTextFromFile($filename) {
$fileContents = '';

if ($this->doUseHTTPClient) {
$this->establishConnection($filename);
$response =& $this->httpConnection->get($filename);

if ($response != null) {
$fileContents = $response->getResponse();
}
}
else {
if (function_exists('file_get_contents')) {
$fileContents = @file_get_contents($filename);
}
else {
require_once(DOMIT_RSS_INCLUDE_PATH . 'php_file_utilities.php');
$fileContents =& php_file_utilities::getDataFromFile($filename, 'r');
}

if ($fileContents == '') {
$this->establishConnection($filename);
$response =& $this->httpConnection->get($filename);

if ($response != null) {
$fileContents = $response->getResponse();
}
}
}

return $fileContents;
} //getTextFromFile

В каком месте в нем вставлять код?

[tsesl]

Есть еще один встроенный перекодировщик для RSS новостей... И внем ошибка, в результате чего он неправильно работает, т.е. декодирует тогда когда не надо

Чтобы это исправить открываем файл хост/includes/joomla.php и ищем там функцию newsfeedEncoding( $rssDoc, $text )

После чего находим в этой функции следующий текст:
...покусано...
 и меняем выделенные строки местами...
В итоге должно получиться следующее
...покусано...
Это для 5-го PHP для 4 возможно то же что-то придется поменять... Там ниже для этого свой кусочек...

Гораздо проще в языковом файле поиграться(true|false) с глобальной переменной "_JOS_SITE_ENCODING"...

Для этого правим language/russian.php. В самый конец добавляем

DEFINE('_JOS_SITE_ENCODING', 1);

[wwwsla]

тоже имею проблему с кодировкой RSS. Попробовал все предложенные варианты  на php 5.2.2
Получилось вместо знаков "???????..... " или пусто или что-то типа
"РђРЅСЋРєРѕРІ, Р?РіРѕСЂСЊ Денисов, Анатолий Тимощук. Р’ запасе Чонтофальскии, Радимов, РљРёРј Дон Чжин, Домингес, Риксен, Р?РѕРЅРѕРІ, ГорС?РєРѕРІ." 8-(
Может будут еще предложения.

[fianit]

еще раз сделать то, что предлагется , у меня тож php 5.2.2, помогли манипуляции с  joomla.php

[wwwsla]

а у меня после манипуляций с  joomla.php "?????????????????????..." исчезли и появилось
 такое:"РђРЅСЋРєРѕРІ, Р?РіРѕСЂСЊ Денисов, РђРЅР......." :-(

[fianit]

попробуй еще строчки такие же, но тока ниже тоже поменять местами

[sarportal]

а у меня после манипуляций с  joomla.php "?????????????????????..." исчезли и появилось
 такое:"РђРЅСЋРєРѕРІ, Р?РіРѕСЂСЊ Денисов, РђРЅР......." :-(

Сначала нужно провести вышеуказанные манипуляции с Joola.php

Потом делаем вот что :

1. идем в /includes/domit/xml_domit_rss_shared.php и строчку:
      $success = $this->node->parseXML($rssText, false);
Заменяем на
      $success = $this->node->parseXML($rssText, true);

2. в файле /includes/feedcreator.class.php если в строчке
   var $encoding = "Windows-1251 или что то другое";
заменяем на
   var $encoding = "UTF-8";

У меня все заработало! Joomla Lavra 1.0.15

[sarportal]

попробуй еще строчки такие же, но тока ниже тоже поменять местами

Ниже строчки поменять - это для PHP 4. Если бы на сервере стояло PHP 4 то изменения произведенные для PHP5 никак на отражение букв не повлияли.
А в данном случае вместо "?????????????????????..." стало "РђРЅСЋРєРѕРІ, Р?РіРѕСЂСЊ Денисов, РђРЅР......." , значит на сервере стоит PHP5 и проблема в двух вышеуказанных файлах.

[Goldie]

Балы аналогичная проблема в Joomla! 1.0.13 Stable
Решил так:
в /includes/feedcreator.class.php

поменял
   var $encoding = "ISO-8859-1";   
на
   var $encoding = "windows-1251"; 

[ulpe]

Сделал все по пунктам. Сначала знаки вопросов заменились на Р РѕСЃСЃРёР№СЃРєРёРµ РЅРѕРІРѕ, но поправил и это. Все заработало. Был доволен минут 20. Потом опять стало Р РѕСЃСЃРёР№СЃРєРёРµ РЅРѕРІРѕ. Восстановил измененые файлы, проделал операция заново. Эффект тот же. Вопщем в rss стоит юникод на остальном контенте вин1251. Помогите, пожалуйста) 

[user175]

Вышеперечисленные манипуляции а также танцы с бубном не помогли с кодировкой  - новости импортируются NewsGrabberJC - при граббинге отсуда http://www.garant.ru/rss/news/ импортируются с кракозябрами зПУХДБТУФЧЕООПЗП РБФТЙПФЙЮЕУЛПЗП ЛМХВБ РБТФЙЙ"еДЙОБС
На сервере PHP 4 версии
Joomla! 1.0.15 Lavra Edition 2008

HELP!!!!!

[alexecon]

Гораздо проще в языковом файле поиграться(true|false) с глобальной переменной "_JOS_SITE_ENCODING"...

Для этого правим language/russian.php. В самый конец добавляем

DEFINE('_JOS_SITE_ENCODING', 1);

Не помогает (на Joomla! 1.0.15 RE)
После вставки получаем вот это:

Новости Би-Р±Рё-СЃРё - это самая свежая информация, срочные новости, видео, аудио, аналитические матеС

А без вставки:

??????? ??-??-?? - ??? ????? ?????? ??????????, ??????? ???????, ?????, ?????, ????????????? ?????????. ??????? ??-??-?? - ??? ?

В общем, хрен редьки не слаще.

[alexecon]

Я уже пытался дать ответ на этот вопрос. То ли был глюк и мой пост не сохранился, то ли его почему то удалили ... но на форуме

Joomla(Re) есть такой хак... я не знаю подойдет ли это решение для Paranoia, но может кто то сделает хак для неё:
Какое-то решение проблем с парсером, который не умеет читать русские буквы для php5 и кодировки windows-1251.
Итак. Имеем исходную тему - если мы создаем модуль и в нем указываем url rss-фида написанного в кодировке windows-1251, то на выходе имеем неприятный баг - знаки вопроса вместо буковок. Для решения этого можно попробовать применить следующий патч. Патч будет работать только для php5 с поддержкой iconv.

Прежде всего далем бэкап всех изменяемых файлов. Не факт что это сработает.

Идем в \includes\domit\xml_domit_rss_shared.php и ищем функцию function getTextFromFile() в ее конец вставляем вот что
Цитировать
         if ($fileContents == '') {
            $this->establishConnection($filename);
            $response =& $this->httpConnection->get($filename);

            if ($response != null) {
               $fileContents = $response->getResponse();
            }
         }
      }

      preg_match("|<?xml.*encoding=\"(.*)\".*>|Umsi",$fileContents,$m);
      $fileContents = iconv($m[1],'utf-8',$fileContents);
      $fileContents = str_replace($m[1],'utf-8',$fileContents);

      return $fileContents;
   } //getTextFromFile

Далее в этом же файле ищем функцию function getElementText($elementName) и пишем
Цитировать
   function getElementText($elementName) {
      $elementName = strtolower($elementName);
      return iconv('utf-8','windows-1251',$this->_getElementText($elementName, $this->DOMIT_RSS_indexer));
       return $this->_getElementText($elementName, $this->DOMIT_RSS_indexer);
   } //getElementText

Теперь открываем /includes/frontend.html.php и функцию function modoutput_feed() в ней надо удалить все вхождения
$что_то_там = mosCommonHTML::newsfeedEncoding( $rssDoc, $что_то_там );
Я удалил их для переменных (в скобочках указана приблизительная строка): $feed_title(173), $feed_descrip(189), $item_title(226), $text (253)[/list]

Тоже самое решение для компонента com_newsfeeds (и снова для пхп5)
Нужено сделать тот же саый хак rss-xml парсера (\includes\domit\xml_domit_rss_shared.php) и удалить строчки (всего их четыре) в файле /components/com_newsfeeds/newsfeeds.html.php в функции function showNewsfeeds()
$feed_title = mosCommonHTML::newsfeedEncoding( $rssDoc, $feed_title );
+ для переменных $feed_descrip, $item_title, $text.[/b]

У меня всё сработало!

О, у меня тоже все сработало! Подтверждаю.
Joomla! 1.0.15 RE.

Если кому системные потроха более детально важно знать, то:

Версия базы данных:
5.0.24-standard

Версия PHP:
5.2.3

Веб-сервер:
Apache/1.3.37 (Unix) mod_perl/1.29 PHP/5.2.3 mod_ssl/2.8.28 OpenSSL/0.9.7d

Интерфейс между веб-сервером и PHP:
apache

Версия Joomla!:
Joomla! 1.0.15Стабильная версия [ Daytime ] 22 February 2008 23:00 UTC

[eavasi™]

нет у меня к сожалению это не сработало