Linux dd mbr copy

Linux dd mbr copy

dd is a core utility whose primary purpose is to convert and copy a file.

Similarly to cp, by default dd makes a bit-to-bit copy of the file, but with lower-level I/O flow control features.

For more information see dd(1) or the full documentation.

Contents

Installation

dd is part of the GNU coreutils . For other utilities in the package, please refer to Core utilities.

Disk cloning and restore

The dd command is a simple, yet versatile and powerful tool. It can be used to copy from source to destination, block-by-block, regardless of their filesystem types or operating systems. A convenient method is to use dd from a live environment, as in a Live CD.

Cloning a partition

From physical disk /dev/sda , partition 1, to physical disk /dev/sdb , partition 1:

Cloning an entire hard disk

From physical disk /dev/sda to physical disk /dev/sdb :

This will clone the entire drive, including the MBR (and therefore bootloader), all partitions, UUIDs, and data.

• bs= sets the block size. Defaults to 512 bytes, which is the «classic» block size for hard drives since the early 1980s, but is not the most convenient. Use a bigger value, 64K or 128K. Also, please read the warning below, because there is more to this than just «block sizes» -it also influences how read errors propagate. See [1] and [2] for details and to figure out the best bs value for your use case.
• noerror instructs dd to continue operation, ignoring all read errors. Default behavior for dd is to halt at any error.
• sync fills input blocks with zeroes if there were any read errors, so data offsets stay in sync.
• status=progress shows periodic transfer statistics which can be used to estimate when the operation may be complete.

The dd utility technically has an «input block size» (IBS) and an «output block size» (OBS). When you set bs , you effectively set both IBS and OBS. Normally, if your block size is, say, 1 MiB, dd will read 1024×1024 bytes and write as many bytes. But if a read error occurs, things will go wrong. Many people seem to think that dd will «fill up read errors with zeroes» if you use the noerror,sync options, but this is not what happens. dd will, according to documentation, fill up the OBS to IBS size after completing its read, which means adding zeroes at the end of the block. This means, for a disk, that effectively the whole 1 MiB would become messed up because of a single 512 byte read error in the beginning of the read: 12ERROR89 would become 128900000 instead of 120000089.

If you are positive that your disk does not contain any errors, you could proceed using a larger block size, which will increase the speed of your copying several fold. For example, changing bs from 512 to 64K changed copying speed from 35 MB/s to 120 MB/s on a simple Celeron 2.7 GHz system. But keep in mind that read errors on the source disk will end up as block errors on the destination disk, i.e. a single 512-byte read error will mess up the whole 64 KiB output block.

Backing up the partition table

Create disk image

Boot from a live medium and make sure no partitions are mounted from the source hard drive.

Then mount the external hard drive and backup the drive:

If necessary (e.g. when the resulting files will be stored on a FAT32 file system) split the disk image into multiple parts (see also split(1) ):

If there is not enough disk space locally, you may send the image through ssh:

Finally, save extra information about the drive geometry necessary in order to interpret the partition table stored within the image. The most important of which is the cylinder size.

Restore system

To restore your system:

When the image has been split, use the following instead:

Binary file patching

If one wants to replace offset 0x123AB of a file with the FF C0 14 hexadecimal sequence, this can be done with the command line:

Backup and restore MBR

Before making changes to a disk, you may want to backup the partition table and partition scheme of the drive. You can also use a backup to copy the same partition layout to numerous drives.

The MBR is stored in the the first 512 bytes of the disk. It consists of 4 parts:

1. The first 440 bytes contain the bootstrap code (boot loader).
2. The next 6 bytes contain the disk signature.
3. The next 64 bytes contain the partition table (4 entries of 16 bytes each, one entry for each primary partition).
4. The last 2 bytes contain a boot signature.

To save the MBR as mbr_file.img :

You can also extract the MBR from a full dd disk image:

To restore (be careful, this destroys the existing partition table and with it access to all data on the disk):

If you only want to restore the boot loader, but not the primary partition table entries, just restore the first 440 bytes of the MBR:

To restore only the partition table, one must use:

Remove bootloader

To erase the MBR bootstrap code (may be useful if you have to do a full reinstall of another operating system) only the first 440 bytes need to be zeroed:

Troubleshooting

Partial read

Files created with dd can end up with a smaller size than requested if a full input block is not available and the read(2) system call returns early. This can happen when reading from a pipe(7) or when reading from /dev/random and there is not enough entropy[3], or from /dev/urandom when reading more than 32 MiB[4].

It is possible, but not guaranteed, that dd will warn you about the issue:

The solution is to do as the warning says and add iflag=fullblock to the dd command. For example:

An alternative for /dev/urandom is to specify a block size smaller than 32 MiB, but a larger copy count. For example:

When reading from a pipe, an alternative to iflag=fullblock is to limit bs to the PIPE_BUF constant value, defined in /usr/include/linux/limits.h [5]. For example:

Источник

Как клонировать раздел или жесткий диск в Linux

Существует множество причин, по которым вы можете захотеть клонировать раздел Linux или даже жесткий диск. Большинство из которых связаны с созданием резервных копий ваших данных. Существует несколько способов добиться этого в Linux с помощью некоторых внешних инструментов, таких как partimage или Clonezilla.

Однако в этой статье мы рассмотрим клонирование дисков Linux с помощью инструмента под названием dd, который чаще всего используется для преобразования или копирования файлов.Поставляется dd предустановленным в большинстве дистрибутивов Linux.

Как клонировать раздел Linux

С помощью команды dd вы можете скопировать весь жесткий диск или только раздел Linux. Давайте начнем с клонирования одного из наших разделов. В моем случае у меня есть следующие диски: /dev/sdb, /dev/sdc.. Я буду клонировать файл /dev/sdb1/ в файл /dev/sdc1.

Сначала перечислите эти разделы с помощью команды fdisk, как показано ниже.

Теперь клонируйте раздел /dev/sdb1/ в /dev/sdc1, используя следующую команду dd.

Приведенная выше команда говорит dd использовать /dev/sdb1 в качестве входного файла и записать его в выходной файл /dev/sdc1.

Клонирование раздела Linux с помощью команды dd

После клонирования раздела Linux вы можете проверить оба раздела с помощью команды:

Как клонировать жесткий диск Linux

Клонирование жесткого диска Linux аналогично клонированию раздела. Однако вместо указания раздела вы просто используете весь диск целиком. Обратите внимание, что в этом случае рекомендуется, чтобы жесткий диск был того же размера (или больше), что и исходный диск.

Это должно было скопировать диск /dev/sdb с его разделами на целевой жесткий диск /dev/sdc. Вы можете проверить эти изменения, перечислив оба диска с помощью команды fdisk.

Как сделать резервную копию MBR в Linux

Команда dd также может быть использована для резервного копирования вашего MBR. Который находится в первом секторе устройства, перед первым разделом. Поэтому, если вы хотите создать резервную копию вашего MBR, просто запустите:

# dd if=/dev/sda of=/backup/mbr.img bs=512 count=1.

Приведенная выше команда говорит dd скопировать /dev/sda в /backup/mbr.img с шагом 512 байт, а опция count говорит скопировать только 1 блок.

Другими словами, вы говорите dd скопировать первые 512 байт из /dev/sda в предоставленный вами файл.

Резервное копирование MBR в Linux

Вот и все! команда dd — это мощный инструмент Linux, который следует использовать при копировании или клонировании разделов или дисков Linux. Но будьте очень осторожны так как любая неточность может стереть ваши данные.

Источник

linux-notes.org

dd (dataset definition) — утилита UNIX, служит для копирования, конвертации файлов, а так же — чтение данных. Название унаследовано от оператора DD (Dataset Definition) из языка JCL.

Поскольку в UNIX многие объекты (жёсткие/гибкие диски, COM/LPT-порты, оперативная память компьютера, память с кодом/данными каждого процесса) представлены в виде специальных файлов, спектр применения утилиты dd гораздо шире, чем кажется на первый взгляд. Регулярно возникает необходимость не просто скопировать файл или несколько файлов (для чего предназначена утилита cp), а скопировать первые n байт файла, пропустить m байт от начала, прочитать файл с дефектного носителя, транслировать содержимое файла в ASCII, «развернуть» порядок байтов в файле (Little-Endian vs. Big-Endian), просто скопировать очень большой файл или все вместе взятое. Для этой цели и служит dd.

Кроме всего прочего, данная утилита позволяет скопировать регионы из файлов «сырых» устройств, например, сделать резервную копию загрузочного сектора жёсткого диска, или прочитать фиксированные блоки данных из специальных файлов, таких, как /dev/zero или /dev/random.

Название утилиты dd иногда в шутку расшифровывают, как «disk destroyer», «data destroyer», «delete data» или «добей диск», так как утилита позволяет производить низкоуровневые операции на жёстких дисках — при малейшей ошибке (такой, как реверс параметров if и of) можно потерять часть данных на диске (или даже все данные). Есть и более «уважительное» прозвище — «disk duplicator», потому что на практике основное её применение — это копии, образы и бэкапы разделов.

• путь_к_файлу — Путь к файлу, имеджу от куда будут взяты данные.
• куда_копировать — Куда будут копироваться даные (флешка, диск, файл)
• другие_параметры — Различные параметры использования.

• bs — Данная опция служит для указания размера блока (block size), который будет читать и писать данные за один раз. Например, можно указать 512, 1m, 8m. Рекомендую не использовать большие цифры, оптимально — это 4-8мб;
• cbs — Данный параметр служит для того, чтобы указать сколько байт нужно записывать за один раз;
• count — Данная опция указывает сколько копировать блоков, а размер блока задается с bs опцией;
• conv — Опция служит чтобы преобразовать файл в соответствии с разделенными запятыми списком символов. Каждый символ может быть одним из следующих и представляет определенный тип преобразования: ascii, ebcdic, ibm, block, unblock, lcase, nocreat, excl, notrunc, ucase, swab, noerror, sync, fdatasync, fsync. Описание данных типов, будет ниже.
• ibs — Данная опция указывает на то, сколько необходимо считать байт за раз (Дефолтное значение — 512 байт);
• obs — Данная опция указывает на то, сколько необходимо записать байт за раз (Дефолтное значение — 512 байт);
• seek — Данная опция указывает на то, сколько необходимо пропустить количество байт (obs-size блоков) в начале вывода;
• skip — Данная опция указывает на то, сколько необходимо пропустить количество байт (ibs-size блоков) в начале ввода;
• status — Указывает насколько подробным нужно сделать вывод;
• iflag, oflag — Позволяет задать дополнительные флаги работы для устройства ввода и вывода, основные из них: nocache, nofollow.

• ascii — Преобразование с EBCDIC в ASCII.
• ebcdic — Преобразование с ASCII to EBCDIC.
• ibm — Преобразование с ASCII в алтернативный EBCDIC.
• blockpad — Завершение новой строкой записи с пробелами в cbs-size.
• unblock — Заменить конечные пробелы в записях размера cbs новой строкой.
• lcase — Изменить верхний регистр на нижний регистрe.
• nocreat — Не создавайть выходной файл.
• excl — Ошибка, если выходной файл уже существует.
• notrunc — Не обрезать выходной файл.
• ucase — Заменить нижний регистр на верхний.
• swab — Поменять местами каждую пару входных байтов.
• noerror — Продолжить после ошибок чтения.
• sync — Дополняет каждый входной блок значениями NUL до размера ibs; при использовании с block или unblock, используеться блок с пробелами, а не NUL.
• fdatasync — Физически записывает данные выходного файла до окончания процесса.
• fsync — Аналогично, но также пишуться метаданные.

Параметры для iflag, oflag:

• append — append mode (имеет смысл только для вывода; conv=notrunc предложение).
• direct — Использует прямой ввод/вывод (I/O) для данных.
• directory — Выдает фейл, если используете каталог.
• dsync — Использовать синхронизированность I/O для данных.
• sync — Точно так же, но и для метаданных.
• fullblock — Накапливает полные блоки ввода (iflag только).
• nonblock — Использует неблокирующий ввод/вывод (I/O).
• noatime — Не обновляет время доступа (зачастую используеться).
• noctty — Не назначает управляющий терминал из файла.
• nofollow — Не переходит по символическим ссылкам.

Для count, seek, skip, bs, cbs, ibs, obs можно использовать слудующую размерность:

Примеры утилиты dd в Unix/Linux

Начнем с самого простого — получить помощь:

Замечаение: в Unix (например на MacOS) может не работать, по этому — имееться следующее решение:

Узнать версию можно вот так:

Замечание: Работат на Linux. На Unix, возможно не будет работать.

-=== ПРИМЕР 1 ===-

Чтобы записать образ на флешку или диск, можно использовать:

-=== ПРИМЕР 2 ===-

Если необходимо скопировать диск на другой, например, можно сделать это следующим образом:

-=== ПРИМЕР 3 ===-

Так же, иногда полезно сжать данные и записать их куда-то (Проверял только с gzip, bzip2). Например, необходимо сделать бэкап. Используем bzip2 сжатие:

Или, используем gzip:

Не забываем комбинировать опции (можно использовать в этом случае: bs=8m, status=progress, conv=fsync)

PS: для рестора можно заюзать:

Можно удаленно создать бэкап, например:

Как другое решение, можно делать бекап по указанному времени и бэкапить его по сети. Например:

PS: Стоит добавить SSH ключи ssh будет работать такая схема

-=== ПРИМЕР 4 ===-

Чтобы отформатировать накопитель низкоуровневым способом используя dd, пример выглядит вот так:

PS: Можно обнулить только определенное количество байт, например:

Проверить можно тем же dd, но преобразовав данные в hex:

Должны быть 0. Или, можно проверить еще другим методом:

Можно для тестирования, взять и скопировать 10 ГБ нулей и перенаправить их в /dev/null (в никуда):

Уничтожить суперблок можно:

или еще один солюшен:

Чтобы очистить первые 113 МБ раздела:

-=== ПРИМЕР 5 ===-

MBR расположена в первых 512 байтах жесткого диска, и состоит из таблицы разделов, загрузчика и пары дополнительных байт. Иногда, ее приходится бекапить, восстанавливать и т.д. Бекап можно сделать так:

Чтобы восстановить, используем:

Если нужно сделать резервное копирование загрузочных данных MBR, исключая таблицу разделов, то пример вот:

Вернуть назад можно так:

Cкопировать MBR на дискету:

Просмотр MBR-а через dd утилиту:

-=== ПРИМЕР 6 ===-

При помощи dd можно генерировать файлы, а затем использовать их как контейнеры других файловых систем даже в зашифрованном виде. Технология следующая:
С помощью dd создается файл, забитый нулями (случайными числами забивать не рационально: долго и бессмысленно):

Заполнить диск рандомными значениями:

Затереть файл\диск n-раз, можно так (в моем случаее, будет перезапись 20 раз):

-=== ПРИМЕР 7 ===-

Создаем ISO из CD/DVD ROM-а на локальное устройство (файл на вашем диске):

Создать DVD образы раздела (полезно для резервного копирования):

После такого копирования, можно развернуть все назад следующим образом:

Создать ISO из флопика можно вот так:

-=== ПРИМЕР 8 ===-

Преобразовать формат данных файла( пример с EBCDIC в ASCII):

Преобразовать формат данных файла( пример с ASCII в EBCDIC):

-=== ПРИМЕР 9 ===-

Например у вас есть файл с текстом:

Если нужно сконвертировать содержимое файл в верхний регистр:

Если нужно сконвертировать содержимое файла в нижний регистр:

-=== ПРИМЕР 10 ===-

Для просмотра вашей виртуальной памяти служит команда:

-=== ПРИМЕР 11 ===-

Чтобы проверить какие файловые системы установлены, выполните:

-=== ПРИМЕР 12 ===-

Проверить все загруженные модули с помощью dd:

-=== ПРИМЕР 13 ===-

Для посмотра таблицы прерываний, есть команда:

-=== ПРИМЕР 14 ===-

Проверить сколько секунд работала система:

-=== ПРИМЕР 15 ===-

Чтобы проверить разделы и так же, их размеры (в кб), используем:

-=== ПРИМЕР 16 ===-

Вывод статистики памяти:

-=== ПРИМЕР 17 ===-

Хороший способ проверить наличие бэдов на устройстве с командой dd:

-=== ПРИМЕР 17 ===-

Так же, можно с данной утилитой проверить файл на вирусы (но нужен для этого, нужно установить ClamAV):

Ссылка на ClamAV:

-=== ПРИМЕР 18 ===-

Тестируем скорость чтения/записи жестких дисков:

-=== ПРИМЕР 19 ===-

Вывести файл на стандартный вывод можно вот так:

-=== ПРИМЕР 20 ===-

Нашел еще пример, с которым можно выполнить поиск какой-то строки по всему разделу (Даже если наложена секьюрити), то можно использовать LiveCD и загрузиться с ним и выполнить:

-=== ПРИМЕР 21 ===-

Чтобы считать BIOS, выполните:

-=== ПРИМЕР 22 ===-

Нашел забавный пример:

-=== ПРИМЕР 23 ===-

Убрать/проигнорировать первые 111 байтов стандартного ввода:

-=== ПРИМЕР 24 ===-

Делаем быстрое резервное копирование по сети с использованием Netcat:

-=== ПРИМЕР 25 ===-

Создаем временное пространство подкачки:

-=== ПРИМЕР 26 ===-

Определите скорость последовательного ввода-вывода вашего привода. Чтение 1 ГБ файла:

-=== ПРИМЕР 27 ===-

Можно добавить прогресс бар, например:

-=== ПРИМЕР 28 ===-

Генерируем рандомную строку с 32 символами ( задали их):

На этом у меня все, статья «Утилита dd в Unix/Linux» завершена.

Добавить комментарий Отменить ответ

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.

Источник