Разработка и Git

Большие файлы в истории Git

Находит самые крупные blob-объекты во всей истории и показывает их путь и размер.

Shell Linux macOS Продвинутый
Скачать git-large-files.sh
Описание

Что делает скрипт

Скрипт перебирает объекты всех веток и тегов, оставляет только blob-файлы больше порога и сортирует по размеру. Это помогает найти случайно добавленные видео, архивы и дампы до очистки истории. Скрипт только читает объекты и ничего не удаляет.

Перед запуском
  • Файлы находятся в истории. Для удаления нужен отдельный инструмент и согласование.
Запуск

Быстрый старт

bash git-large-files.sh --repo . --min-size 1048576 --limit 20

Скачайте файл, откройте терминал в папке со скриптом и выполните команду.

Примеры

Другие варианты

  • bash git-large-files.sh --repo . --min-size 5242880
  • bash git-large-files.sh --repo ~/src/app --limit 50
Зависимости

Что понадобится

Git 2.40+ Система контроля версий
Linux sudo apt install git
macOS brew install git
Bash 4+ Стандартные find, sed, sort и awk
Linux sudo apt install bash
macOS brew install bash
Исходник

git-large-files.sh

#!/usr/bin/env bash
set -euo pipefail

usage() {
    cat <<'EOF'
Использование: git-large-files.sh [--repo ПАПКА] [--min-size БАЙТЫ] [--limit N]
EOF
}

repo="."
min_size="1048576"
limit="20"

while [[ $# -gt 0 ]]; do
    case "$1" in
        --repo) repo="${2:-}"; shift 2 ;;
        --min-size) min_size="${2:-}"; shift 2 ;;
        --limit) limit="${2:-}"; shift 2 ;;
        -h|--help) usage; exit 0 ;;
        *) echo "Неизвестный аргумент: $1" >&2; usage >&2; exit 2 ;;
    esac
done

die() { echo "$1" >&2; exit 2; }

[[ "$min_size" =~ ^[0-9]+$ ]] || die "Параметр --min-size должен быть числом байт."
[[ "$limit" =~ ^[1-9][0-9]*$ ]] || die "Параметр --limit должен быть положительным числом."
[[ -d "$repo" ]] || die "Папка не найдена: $repo"
command -v git >/dev/null 2>&1 || die "Не найден git."
git -C "$repo" rev-parse --is-inside-work-tree >/dev/null 2>&1 || die "Это не git-репозиторий."

human_size() {
    awk -v bytes="$1" 'BEGIN {
        split("B KB MB GB TB", units, " ")
        unit = 1
        value = bytes + 0
        while (value >= 1024 && unit < 5) {
            value = value / 1024
            unit++
        }
        if (unit == 1) {
            printf "%d %s", value, units[unit]
        } else {
            printf "%.1f %s", value, units[unit]
        }
    }'
}

echo "Репозиторий: $(git -C "$repo" rev-parse --show-toplevel)"
echo "Порог: $(human_size "$min_size")"
echo

git -C "$repo" rev-list --objects --all |
    git -C "$repo" cat-file --batch-check='%(objecttype) %(objectname) %(objectsize) %(rest)' |
    awk -v min="$min_size" '
        $1 == "blob" && $3 + 0 >= min {
            path = $0
            sub(/^[^ ]+ [^ ]+ [^ ]+ /, "", path)
            printf "%s\t%s\n", $3, path
        }' |
    sort -nr |
    sed -n "1,${limit}p" |
    while IFS=$'\t' read -r size path; do
        [[ -z "$path" ]] && continue
        printf "%12s  %s\n" "$(human_size "$size")" "$path"
    done

Скрипты работают с файлами и настройками системы. Перед запуском прочитайте код и проверьте пути. Особенно если скрипт удаляет, перезаписывает или перемещает данные.

CLI 1.0.0

Скачать без браузера

Команда скачает этот файл в текущую папку. CLI работает на Windows, macOS и Linux.

scriptdock get dev-git-large-files
  • Поиск по всему каталогу
  • Python 3.10+
  • Без внешних пакетов
Скачать CLI

GUI-версия готовится. Подробнее

Категория

Разработка и Git

Git, сборка, тесты, зависимости, логи и обслуживание проектов.