Хочу разбить файл на части по гигабайту и для каждого из них посчитать md5.
Как это можно сделать без записи фрагментов файла на диск?
Ещё нужна возможность один из этих фрагментов разбить на фрагменты поменьше и посчитать для каждого из них.
Stack Overflow на русском — это сайт вопросов и ответов для программистов. Присоединяйтесь! Регистрация займёт не больше минуты.
Присоединиться к сообществуХочу разбить файл на части по гигабайту и для каждого из них посчитать md5. Как это можно сделать без записи фрагментов файла на диск?
например:
$ f=имя_файла
$ s=$((2**30)) # размер «порции»
$ n=$(($(stat -c %s $f)/$s)) # количество «порций» (размер файла/размер порции)
$ for ((p=0;p<=n;p++)); do dd if=$f bs=$s skip=$p count=1 2>/dev/null | команда; done
команда
— то, что вам требуется для обработки извлечённой порции. например, md5sum
Ещё нужна возможность один из этих фрагментов разбить на фрагменты поменьше и посчитать для каждого из них.
например:
$ f=имя_файла
$ s=$((2**10)) # размер «порции»
$ n=10 # количество «порций»
$ b=100 # сколько «порций» пропустить от начала файла
$ for ((p=b;p<=n+b-1;p++)); do dd if=$f bs=$s skip=$p count=1 2>/dev/null | команда; done
$ man dd
) в цикле и вычисляйте всё что надо.