Данные и таблицы

Посчитать статистику по CSV

Показывает через csvstat типы, минимумы, максимумы, средние и распределения колонок.

Shell Linux macOS Новичок
Скачать csv_statistics.sh
Описание

Что делает скрипт

Скрипт проверяет наличие csvstat, при необходимости выбирает колонки через csvcut и сохраняет полный отчёт в текстовый файл. csvstat сам определяет типы и считает частоты, поэтому отчёт получается подробным без написания кода на Python. Исходный CSV не изменяется.

Перед запуском
  • csvstat считает первую строку заголовком, если не указан --no-header.
Запуск

Быстрый старт

bash csv_statistics.sh --input data.csv --output statistics.txt

Скачайте файл, откройте терминал в папке со скриптом и выполните команду.

Примеры

Другие варианты

  • bash csv_statistics.sh --input sales.csv --columns amount,qty
  • bash csv_statistics.sh --input data.csv --no-header --force
Зависимости

Что понадобится

Bash 4+ Стандартные утилиты coreutils
Linux sudo apt install bash
macOS brew install bash
csvkit Утилиты csvcut и csvstat
Linux sudo apt install csvkit
macOS brew install csvkit
Исходник

csv_statistics.sh

#!/usr/bin/env bash
set -euo pipefail

usage() {
    echo "Использование: $0 --input <файл.csv> [--columns <список>] [--output <файл.txt>] [--no-header] [--force]"
}

input=""
columns=""
output="statistics.txt"
no_header=0
force=0

while [[ $# -gt 0 ]]; do
    case "$1" in
        --input) input="${2:-}"; shift 2 ;;
        --columns) columns="${2:-}"; shift 2 ;;
        --output) output="${2:-}"; shift 2 ;;
        --no-header) no_header=1; shift ;;
        --force) force=1; shift ;;
        -h|--help) usage; exit 0 ;;
        *) echo "Неизвестный аргумент: $1" >&2; usage >&2; exit 2 ;;
    esac
done

if [[ -z "$input" ]]; then
    usage >&2
    exit 2
fi
for tool in csvstat csvcut; do
    if ! command -v "$tool" >/dev/null 2>&1; then
        echo "Не найдена программа: $tool" >&2
        exit 2
    fi
done
if [[ ! -f "$input" ]]; then
    echo "Файл не найден: $input" >&2
    exit 2
fi
if [[ -e "$output" && "$force" -eq 0 ]]; then
    echo "Файл уже существует: $output. Добавьте --force" >&2
    exit 2
fi

mkdir -p "$(dirname "$output")"
tmp=$(mktemp "${output}.tmp.XXXXXX")
trap 'rm -f "$tmp"' EXIT

if [[ -n "$columns" ]]; then
    selected=$(mktemp "${TMPDIR:-/tmp}/csvstat.XXXXXX")
    trap 'rm -f "$tmp" "$selected"' EXIT
    if [[ "$no_header" -eq 1 ]]; then
        csvcut -H -c "$columns" "$input" > "$selected"
    else
        csvcut -c "$columns" "$input" > "$selected"
    fi
    csvstat "$selected" > "$tmp"
else
    if [[ "$no_header" -eq 1 ]]; then
        csvstat --no-header-row "$input" > "$tmp"
    else
        csvstat "$input" > "$tmp"
    fi
fi

mv "$tmp" "$output"
trap - EXIT

echo "Колонки: ${columns:-все}"
echo "Результат: $output"

Скрипты работают с файлами и настройками системы. Перед запуском прочитайте код и проверьте пути. Особенно если скрипт удаляет, перезаписывает или перемещает данные.

CLI 1.0.0

Скачать без браузера

Команда скачает этот файл в текущую папку. CLI работает на Windows, macOS и Linux.

scriptdock get data-csv-statistics
  • Поиск по всему каталогу
  • Python 3.10+
  • Без внешних пакетов
Скачать CLI

GUI-версия готовится. Подробнее

Категория

Данные и таблицы

CSV, JSON, SQLite, Excel, очистка, объединение и отчёты.