Файловые системы и управление дисками в Linux

Ключевые тезисы:

Файл — это структурированная информация, состоящая из данных и метаданных.
Файловые системы организуют хранение файлов, используя таблицы (содержание) для быстрого доступа.
Основные типы носителей: магнитные ленты, HDD, SSD.
Диски можно разбивать на разделы (партиции) и объединять в логические структуры (LVM, RAID).
Управление дисками и файловыми системами осуществляется через терминал с помощью специализированных утилит.

Что такое файл?

Файл — это набор информации, относящейся к одному объекту (картинка, звук, текст, видео). Состоит из:

Полезные данные — основное содержимое.
Метаданные — данные о данных (разрешение картинки, частота звука, кодировка текста), необходимые для их корректной обработки.

Эволюция систем хранения

Магнитные ленты — последовательный доступ, долговечное хранение, используется для бэкапов.
HDD (Hard Disk Drive) — запись на магнитные диски с помощью считывающей головки. Данные разбиты на сектора.
SSD (Solid State Drive) — хранение на флеш-памяти, нет движущихся частей. Высокая скорость, но ограниченный ресурс циклов записи/чтения.

Принцип работы файловых систем

Прямое последовательное чтение файлов с начала носителя неэффективно. Файловые системы решают эту проблему.

Аналогия с книгой: Чтобы найти статью, вы смотрите не все страницы, а содержание. Файловая система создает таблицу (содержание) для всех файлов.

Что хранится в таблице файловой системы (на примере ext4):

Имя файла
Время создания/изменения
Владелец и права доступа
Начальный блок на диске
Размер файла

Преимущества такого подхода:

Быстрый доступ к файлу (головка позиционируется сразу на нужный блок).
Удаление файла — это лишь удаление записи из таблицы. Данные остаются на диске до перезаписи (что позволяет восстановление).
Для безопасного удаления используется утилита shred (перезаписывает данные нулями).

Фрагментация и дефрагментация

Фрагментация — файл записывается в несколько несмежных блоков. Замедляет чтение, особенно на HDD.
Дефрагментация — перераспределение блоков файла в последовательные области для ускорения доступа.
Для SSD дефрагментация не всегда полезна, так как расходует ресурс ячеек памяти.

Директории и журналирование

Директория — это специальный файл, содержащий список файлов и других директорий.
Корневая директория (/ или root) — вершина файловой системы.
Журналируемые файловые системы (ext3, ext4, NTFS) ведут журнал операций для повышения надежности и восстановления после сбоев.

Сравнение файловых систем

У разных файловых систем разные характеристики:

Максимальная длина имени файла (FAT16: 8+3 символа, ext4: 255 байт).
Максимальный размер файла (FAT16: ~2-4 ГБ, современные системы — терабайты).
Поддержка метаданных (время создания, права доступа).
Выбор зависит от задачи (хранение множества мелких файлов, один огромный файл, скорость).

Разделы диска (Partitions)

Один физический диск можно разбить на логические разделы с разными файловыми системами.

Информация о разделах хранится в таблице разделов в начале диска.
MBR (Master Boot Record) — устаревший стандарт, до 4 разделов, до ~2 ТБ.
GPT (GUID Partition Table) — современный стандарт, много разделов, огромные объемы, резервная копия таблицы в конце диска.

Практика: основные команды для работы с дисками и файловыми системами

lsblk — список всех блочных устройств.
blkid — вывод UUID файловых систем.
df -h — информация о свободном месте на смонтированных разделах.
df -i — показывает свободное место в инодах. Важно при работе с огромным количеством мелких файлов.
parted — работа с таблицами разделов диска (создание, удаление, пометка).
mkfs — создание файловой системы (например, mkfs.ext4, mkfs.xfs).
mount / umount — монтирование и размонтирование разделов.
findmnt — список точек монтирования.
Пропись в /etc/fstab для автоматического монтирования при загрузке.

Ссылки на файлы

Ссылка — аналог ярлыка в Windows, позволяющий обращаться к файлу из другого места.

Основная команда: ln

ln [опции] <целевой_файл> <имя_ссылки> — создаёт ссылку.

Жёсткие ссылки (hard links)

Создаются по умолчанию (без ключа -s).
Важно: Это не отдельный файл, а ещё одна запись (имя), указывающая на ту же иноду (i-node) — запись в файловой системе с метаданными файла.
Одинаковые номера инод у файла и жёсткой ссылки означают, что это одна и та же область данных.
Работают только в пределах одной файловой системы (раздела).
При удалении исходного файла данные остаются доступны через жёсткую ссылку, пока есть хотя бы одна ссылка на иноду.
Количество жёстких ссылок отображается в выводе ls -l (второе поле).

Пример создания: ln file1 hardlink_to_file1

Поиск всех жёстких ссылок на файл:

find /home -samefile file1 2>/dev/null

Символьные ссылки (симлинки, symbolic links)

Создаются с ключом -s: ln -s <целевой_файл> <имя_ссылки>.
Это отдельный файл-указатель, который содержит путь к целевому файлу. Имеет свою уникальную иноду.
Могут ссылаться на файлы в других файловых системах и на директории.
При перемещении или удалении исходного файла симлинк "ломается" (становится битой ссылкой).
В выводе ls -l обозначаются буквой l в начале строки и стрелкой -> к цели.

Рекомендация: Для надёжности создавайте симлинки, указывая абсолютный путь к целевому файлу.

Поиск всех симлинков:

Все симлинки в директории: find /home -type l
Симлинки на конкретный файл: find /home -type l -ls 2>/dev/null | grep file1

LVM (Logical Volume Manager)

LVM — система абстракции над физическими дисками для гибкого управления пространством.

Уровни абстракции LVM:

Physical Volume (PV) — физический раздел или целый диск, подготовленный для LVM.
Volume Group (VG) — объединение одного или нескольких PV в общий пул хранения.
Logical Volume (LV) — логический раздел, созданный из пространства VG. На него ставится ФС и монтируется в систему.

Преимущества LVM:

Объединение нескольких дисков в один логический том.
Горячее добавление места к LV за счет свободного пространства в VG (lvextend, resize2fs).
Возможность создания снимков состояния (snapshots).

Основные команды LVM:

pvcreate, pvs, pvdisplay — работа с Physical Volume.
vgcreate, vgs, vgextend, vgreduce, vgdisplay — работа с Volume Group.
lvcreate, lvs, lvextend, lvreduce, lvremove, lvdisplay — работа с Logical Volume.

RAID-массивы (программные)

RAID — технология объединения нескольких дисков для повышения отказоустойчивости и/или производительности.

Основные типы:

RAID 0 (Stripe) — чередование. Данные разбиваются и пишутся на несколько дисков параллельно. Высокая скорость. Нет надежности: выход одного диска ведет к потере всех данных.
RAID 1 (Mirror) — зеркалирование. Данные идентично пишутся на два диска. Высокая надежность. Нет прироста скорости записи, полезная емкость = емкость одного диска.
RAID 5 — чередование с контролем четности. Требует минимум 3 диска. Компромисс между скоростью, объемом и надежностью. Сложные вычисления при восстановлении.
RAID 10 — комбинация RAID 1 и RAID 0 (зеркало + чередование).

Практика создания программного RAID 1 (mdadm):

Подготовить диски (parted, создать раздел, установить флаг raid).
Создать массив: mdadm --create /dev/md0 --level=1 --raid-devices=2 /dev/sdb1 /dev/sdc1.
Прописать конфигурацию в /etc/mdadm/mdadm.conf.
Создать ФС на /dev/md0 и смонтировать.
Обновить initramfs: update-initramfs -u.

Управление RAID-массивом:

mdadm --detail /dev/mdX — детальная информация о массиве.
mdadm --stop /dev/mdX — остановка массива.
mdadm --assemble /dev/mdX — сборка (запуск) массива.
После создания массива обязательно нужно обновить initramfs (update-initramfs -u) и добавить конфигурацию в /etc/mdadm.conf, чтобы массив собирался при загрузке.

Эмуляция сбоя и восстановление:

"Отказ" диска: mdadm /dev/md0 --fail /dev/sdb1.
Удаление диска: mdadm /dev/md0 --remove /dev/sdb1.
Добавление нового/старого диска: mdadm /dev/md0 --add /dev/sdd1.
Если система не загрузилась из-за сбоя RAID, может потребоваться пересборка в режиме восстановления: mdadm --assemble --run /dev/md0 /dev/sdb1.

Полное удаление RAID-массива:

Удалить соответствующую строку из файла конфигурации (/etc/mdadm.conf или /etc/mdadm/mdadm.conf).
Обновить конфигурацию загрузчика: update-initramfs -u.
Перезагрузиться и убедиться, что массив больше не собирается автоматически.
Для полного удаления информации о RAID можно затереть суперблоки на разделах командой mdadm --zero-superblock.

Выводы:

Файловые системы — это фундаментальный механизм организации, хранения и доступа к данным.
Linux предоставляет мощные инструменты для гибкого управления дисковым пространством: от базового разбиения на разделы до сложных абстракций LVM и отказоустойчивых RAID-массивов.
Понимание принципов работы ФС, разделов, LVM и RAID критически важно для администрирования серверов и построения надежных систем хранения.
Жёсткие ссылки — несколько имён для одного файла в пределах одной ФС. Удобны для создания "копий" без дублирования данных.
Символьные ссылки — указатели на путь к файлу. Гибче, но зависят от актуальности пути.
Для полноценного администрирования дискового пространства необходимо знать цепочку: физический диск → раздел (PV) → группа томов (VG) → логический том (LV) → файловая система.
RAID-массивы повышают отказоустойчивость или производительность, но требуют корректной настройки в системе для автоматической сборки.