Сменить кодировку файлов
Перекодирует текстовые файлы через iconv и складывает результат в отдельную папку.
Что делает скрипт
Скрипт обходит каталог, конвертирует каждый файл из указанной кодировки в нужную и сохраняет структуру подпапок. Ошибки iconv не оставляют обрезанных файлов. Исходники не меняются, а существующие результаты пропускаются без флага --force.
Быстрый старт
bash convert_encoding.sh --dir ./docs --from cp1251 --to utf-8
Скачайте файл, откройте терминал в папке со скриптом и выполните команду.
Другие варианты
bash convert_encoding.sh --dir ./docs --from cp1251 --to utf-8bash convert_encoding.sh --dir ./old --from koi8-r --to utf-8 --pattern '*.txt' --out convertedbash convert_encoding.sh --dir ./data --from iso-8859-1 --to utf-8 --force
Что понадобится
sudo apt install bash
brew install bash
convert_encoding.sh
#!/usr/bin/env bash
set -euo pipefail
usage() {
echo "Использование: $0 --dir <папка> --from <кодировка> [--to utf-8] [--pattern '*.txt'] [--out папка] [--force]"
}
dir=""
from_encoding=""
to_encoding="utf-8"
pattern="*"
out="converted"
force=0
while [[ $# -gt 0 ]]; do
case "$1" in
--dir) dir="${2:-}"; shift 2 ;;
--from) from_encoding="${2:-}"; shift 2 ;;
--to) to_encoding="${2:-}"; shift 2 ;;
--pattern) pattern="${2:-}"; shift 2 ;;
--out) out="${2:-}"; shift 2 ;;
--force) force=1; shift ;;
-h|--help) usage; exit 0 ;;
*) echo "Неизвестный аргумент: $1" >&2; usage >&2; exit 2 ;;
esac
done
if [[ -z "$dir" || ! -d "$dir" ]]; then
echo "Укажите существующую папку через --dir" >&2
exit 2
fi
if [[ -z "$from_encoding" ]]; then
echo "Укажите исходную кодировку через --from" >&2
exit 2
fi
if ! command -v iconv >/dev/null 2>&1; then
echo "Не найден iconv" >&2
exit 2
fi
dir="${dir%/}"
mkdir -p -- "$out"
converted=0
skipped=0
failed=0
while IFS= read -r -d '' file; do
relative="${file#"$dir"/}"
destination="$out/$relative"
if [[ "$destination" == "$file" ]]; then
skipped=$((skipped + 1))
echo "Пропуск, выходной путь совпадает с входным: $file"
continue
fi
mkdir -p -- "$(dirname -- "$destination")"
if [[ -e "$destination" && "$force" -eq 0 ]]; then
skipped=$((skipped + 1))
echo "Пропуск, уже есть: $destination"
continue
fi
if iconv -f "$from_encoding" -t "$to_encoding" -- "$file" > "$destination"; then
converted=$((converted + 1))
else
rm -f -- "$destination"
failed=$((failed + 1))
echo "Ошибка конвертации: $file" >&2
fi
done < <(find "$dir" -type f -name "$pattern" -print0)
echo "Готово: $converted, пропущено: $skipped, ошибок: $failed"
echo "Результаты в папке: $out"
if [[ "$failed" -gt 0 ]]; then
exit 1
fi
Скрипты работают с файлами и настройками системы. Перед запуском прочитайте код и проверьте пути. Особенно если скрипт удаляет, перезаписывает или перемещает данные.