Linux Forum — Как правильно перекодировать в UTF-8

Re: Как правильно перекодировать в UTF-8

2010-09-11T12:56:45Z

drBatty пишет:

А ещё переведите в UNIX формат перевода строки, sed 's/\r$//', может kate попросту считает, что раз перевод строки из MS-DOS, то и кодировка такая.

то что надо
благодарю

Re: Как правильно перекодировать в UTF-8

2010-09-11T11:23:10Z

Diiimonn пишет:

Это просто беспокоит и смущает сознание, гдето значит еще что-то недоконвертировано...

дык проверьте той-же sed.
в русском тексте должны быть лишь символы от \x20 до \x7f, табуляции, , , ну и русские буквы. Русские буквы для sed являются буквами, и попадают в RE /\w/. (если у вас локаль правильно установлена)

А ещё переведите в UNIX формат перевода строки, sed 's/\r$//', может kate попросту считает, что раз перевод строки из MS-DOS, то и кодировка такая.

Re: Как правильно перекодировать в UTF-8

2010-09-11T11:08:01Z

метатеги обработаны, но дело не в том как отображаются страници в браузере(а отображаются они нормально), а почему они не распознаются как утфские катей(может и другими прогами не пробовал еще).Это просто беспокоит и смущает сознание, гдето значит еще что-то недоконвертировано...

Re: Как правильно перекодировать в UTF-8

2010-09-11T10:59:17Z

Lupo Alberto пишет:

ага. надо ещё эти html'ки обработать sed'ом. Но и это ещё не всё: у вас будут проблемы, если в ссылках содержаться русские буквы.

Diiimonn, вот здесь посмотрите...

Re: Как правильно перекодировать в UTF-8

2010-09-11T10:51:24Z

А в самих исходниках страниц кодировка исправлена?
Как допустим в этой странице:

...

Как правильно перекодировать в UTF-8

2010-09-11T10:36:37Z

Здравствуйте
есть документы .html я их перекодирую из windows-1251 в utf-8 вот так:

find -maxdepth 1 -iname  "*.html"  -type f -exec bash -c "cat {} | iconv -c -f WINDOWS-1251 -t UTF-8> ./res/{}" \;

но вот проблема, после перекодировки созданные файлы открываются в программе Kate как файлы в кодировке win и все русские символы в кракозябрах.
это сигнал для меня что что-то не так я сделал.Катя должна сразу автоопределить кодировку и открыть в Утф.