GFS2 - GFS2

«Глобальная файловая система» перенаправляется сюда. Для общей концепции см. Глобальная файловая система.
GFS2
Разработчики)Красная шляпа
Полное имяГлобальная файловая система 2
Введено2005 с Linux 2.6.19
Структуры
Содержимое каталогаХеширование (небольшие каталоги, помещенные в inode)
Размещение файловрастровое изображение (группы ресурсов)
Плохие блокиНет
Пределы
Максимум. количество файловПеременная
Максимум. длина имени файла255 байт
Допустимые символы в именах файловВсе, кроме NUL
Функции
Даты записаныизменение атрибута (ctime), изменение (mtime), доступ (atime)
Разрешение датыНаносекунда
АтрибутыНезапланированные, журналируемые данные (только для обычных файлов), наследование журналируемых данных (только для каталогов), синхронная запись, только с добавлением, неизменяемость, исчерпание (только каталоги, только чтение)
Разрешения файловой системыРазрешения Unix, ACL и произвольные атрибуты безопасности
Прозрачное сжатиеНет
Прозрачное шифрованиеНет
Дедупликация данныхтолько по узлам
Другой
Поддерживается операционные системыLinux
GFS
Разработчики)Красная шляпа (ранее Sistina Software )
Полное имяГлобальная файловая система
Введено1996 г. с IRIX (1996), Linux (1997)
Структуры
Содержимое каталогаХеширование (небольшие каталоги, помещенные в inode)
Размещение файловрастровое изображение (группы ресурсов)
Плохие блокиНет
Пределы
Максимум. количество файловПеременная
Максимум. длина имени файла255 байт
Допустимые символы в именах файловВсе кроме NUL
Функции
Даты записаныизменение атрибута (ctime), изменение (mtime), доступ (atime)
Разрешение даты1 с
АтрибутыНезапланированные, журналируемые данные (только для обычных файлов), наследование журналируемых данных (только для каталогов), синхронная запись, только с добавлением, неизменяемость, исчерпание (только для каталогов, только для чтения)
Разрешения файловой системыРазрешения Unix, ACL
Прозрачное сжатиеНет
Прозрачное шифрованиеНет
Дедупликация данныхтолько по узлам
Другой
Поддерживается операционные системыIRIX (теперь устарело), FreeBSD (теперь устарело), Linux

В вычисление, то Глобальная файловая система 2 или же GFS2 это файловая система с общим диском за Linux компьютерные кластеры. GFS2 позволяет всем членам кластера иметь прямой одновременный доступ к одной и той же общей блочное хранилище, в отличие от распределенные файловые системы которые распределяют данные по кластеру. GFS2 также можно использовать как локальную файловую систему на одном компьютере.

GFS2 не имеет автономного режима работы, а также ролей клиента или сервера. Все узлы в кластере GFS2 работают как одноранговые узлы. Для использования GFS2 в кластере требуется аппаратное обеспечение чтобы разрешить доступ к общему хранилищу, и диспетчер блокировок для управления доступом к хранилищу. Диспетчер блокировок работает как отдельный модуль: таким образом, GFS2 может использовать Распределенный диспетчер блокировок (DLM) для кластер конфигурации и менеджер блокировок "nolock" для локальных файловых систем. Более старые версии GFS также поддерживают GULM, серверный диспетчер блокировок, который реализует избыточность посредством аварийного переключения.

GFS и GFS2 являются бесплатно программное обеспечение, распространяемые на условиях Стандартная общественная лицензия GNU.[1][2]

История

Разработка GFS началась в 1995 году и первоначально была разработана Университет Миннесоты профессор Мэтью О'Киф и группа студентов.[3] Первоначально он был написан для SGI с IRIX операционной системы, но в 1998 году она была перенесена на Linux так как Открытый исходный код код предоставил более удобную платформу для разработки. В конце 1999 - начале 2000 года он попал в Sistina Software, где он жил какое-то время как Открытый исходный код проект. В 2001 году Sistina сделала выбор в пользу собственного продукта GFS.

Разработчики разделили OpenGFS из последней общедоступной версии GFS, а затем улучшили ее, включив обновления, позволяющие работать с OpenDLM. Но OpenGFS и OpenDLM перестали функционировать, поскольку Красная шляпа приобрела Sistina в декабре 2003 г. и выпустила GFS и многие компоненты кластерной инфраструктуры под GPL в конце июня 2004 г.

Красная шляпа впоследствии профинансировано дальнейшее развитие, направленное на исправление ошибок и стабилизацию. Дальнейшее развитие, GFS2[4][5] происходит от GFS и был включен вместе с его распределенный менеджер блокировок (совместно с GFS) в Linux 2.6.19. Red Hat Enterprise Linux 5.2 включила GFS2 в качестве модуля ядра для ознакомительных целей. С обновлением 5.3 GFS2 стал частью пакета ядра.

По состоянию на 2009 год, GFS является частью Fedora, Red Hat Enterprise Linux 5.3 и выше и связанные CentOS Дистрибутивы Linux. Пользователи могут покупать коммерческая поддержка для запуска полностью поддерживаемой GFS поверх Red Hat Enterprise Linux. С Red Hat Enterprise Linux версия 5.3, Расширенная платформа Red Hat Enterprise Linux включает поддержку GFS без дополнительных затрат.

В следующем списке перечислены некоторые номера версий и основные представленные функции:

Аппаратное обеспечение

Дизайн GFS и целей GFS2 SAN -подобная среда. Хотя их можно использовать как файловую систему с одним узлом, для полного набора функций требуется SAN. Это может принимать форму iSCSI, FibreChannel, AoE, или любое другое устройство, которое может быть представлено под Linux как блочное устройство, совместно используемое несколькими узлами, например DRBD устройство.

В DLM требует IP сеть, по которой можно общаться. Обычно это просто Ethernet, но, опять же, есть много других возможных решений. В зависимости от выбора SAN, это можно комбинировать, но обычная практика[нужна цитата ] включает отдельные сети для DLM и хранение.

GFS требует ограждение железо какое-то. Это требование кластерной инфраструктуры, а не самой GFS / GFS2, но оно требуется для всех многоузловых кластеров. Обычные опции включают выключатели питания и контроллеры удаленного доступа (например, DRAC, IPMI, или же МОТ ). Фехтование используется, чтобы гарантировать, что узел, который, по мнению кластера, отказал, не может внезапно снова начать работать, пока другой узел восстанавливает журнал для отказавшего узла. При необходимости он также может автоматически перезапустить отказавший узел после завершения восстановления.

Отличия от локальной файловой системы

Хотя разработчики GFS / GFS2 стремились максимально точно имитировать локальную файловую систему, существует ряд различий, о которых следует помнить. Некоторые из них связаны с существующими интерфейсами файловой системы, которые не позволяют передавать информацию, относящуюся к кластеру. Некоторые из них связаны со сложностью эффективной реализации этих функций в кластерной манере. Например:

  • В стадо() системный вызов GFS / GFS2 не прерывается сигналы.
  • В fcntl () Системный вызов F_GETLK возвращает PID любой блокирующей блокировки. Поскольку это файловая система кластера, этот PID может относиться к процессу на любом из узлов, на которых смонтирована файловая система. Поскольку цель этого интерфейса состоит в том, чтобы разрешить передачу сигнала процессу блокировки, это больше невозможно.
  • Аренда не поддерживается модулем блокировки lock_dlm (кластер), но они поддерживаются при использовании в качестве локальной файловой системы.
  • уведомлять будет работать на основе «того же узла», но его использование с GFS / GFS2 не рекомендуется
  • inotify также будет работать на основе «того же узла» и также не рекомендуется (но в будущем может появиться поддержка)
  • сращивание поддерживается только в GFS2

Другое главное отличие, которое разделяют все аналогичные файловые системы кластера, заключается в том, что механизм управления кешем, известный как glocks (произносится как Gee-locks) для GFS / GFS2, оказывает влияние на весь кластер. Каждый индекс в файловой системе есть два связанных с ней глока. Один (называемый iopen glock) отслеживает, в каких процессах открыт индексный дескриптор. Другой (глок inode) управляет кешем, относящимся к этому inode. Глок имеет четыре состояния: UN (разблокирован), SH (общий - блокировка чтения), DF (отложенный - блокировка чтения несовместима с SH) и EX (исключительная). Каждый из четырех режимов отображается непосредственно на DLM режим блокировки.

В режиме EX индексному дескриптору разрешено кэшировать данные и метаданные (что может быть «грязным», т.е. ожидающим обратной записи в файловую систему). В режиме SH индексный дескриптор может кэшировать данные и метаданные, но не должен быть грязным. В режиме DF inode разрешено кэшировать только метаданные, и, опять же, он не должен быть грязным. Режим DF используется только для прямого ввода / вывода. В режиме UN индексный дескриптор не должен кэшировать какие-либо метаданные.

Чтобы операции, изменяющие данные или метаданные inode, не мешали друг другу, используется блокировка EX. Это означает, что определенные операции, такие как создание / отключение файлов от одно и тоже каталог и записывает в одно и тоже файл должен быть, как правило, ограничен одним узлом в кластере. Конечно, выполнение этих операций с нескольких узлов будет работать должным образом, но из-за необходимости частой очистки кешей это будет не очень эффективно.

Единственный наиболее часто задаваемый вопрос о производительности GFS / GFS2 - почему производительность почтовых серверов может быть низкой. Решение состоит в том, чтобы разбить почтовый ящик на отдельные каталоги и попытаться сохранить (насколько это возможно) каждый узел, читающий и записывающий в частный набор каталогов.

Ведение журнала

GFS и GFS2 являются журналируемые файловые системы; и GFS2 поддерживает такой же набор режимов ведения журнала, как ext3. В данные = обратная запись в этом режиме регистрируются только метаданные. Это единственный режим, поддерживаемый GFS, однако можно включить ведение журнала для отдельных файлов данных, но только когда они имеют нулевой размер. Журналируемые файлы в GFS имеют ряд ограничений, таких как отсутствие поддержки mmap или системные вызовы sendfile, они также используют дисковый формат, отличный от обычных файлов. Существует также атрибут "наследование журнала", который при установке в каталоге заставляет все файлы (и подкаталоги), созданные в этом каталоге, иметь установленный флаг журнала (или наследования журнала, соответственно). Его можно использовать вместо данные = журнал вариант крепления, который ext3 поддерживает (а GFS / GFS2 нет).

GFS2 также поддерживает данные = заказано режим, который похож на данные = обратная запись за исключением того, что грязные данные синхронизируются перед завершением каждой очистки журнала. Это гарантирует, что содержимое блоков, добавленных в индексный дескриптор, будет синхронизировано с диском до того, как метаданные будут обновлены для записи нового размера, и, таким образом, предотвращает появление неинициализированных блоков в файле в условиях сбоя узла. Режим ведения журнала по умолчанию данные = заказано, чтобы соответствовать ext3 по умолчанию.

По состоянию на 2010 г., GFS2 пока не поддерживает данные = журнал режим, но он (в отличие от GFS) использует один и тот же дисковый формат как для обычных, так и для журналируемых файлов, а также поддерживает те же атрибуты журналируемого и наследуемого журнала. GFS2 также ослабляет ограничения на то, когда для файла может быть изменен свой журналируемый атрибут на любое время, когда файл не открыт (также как ext3 ).

По соображениям производительности каждый узел в GFS и GFS2 имеет свой собственный журнал. В GFS журналы - это размеры диска, в GFS2 журналы - это просто обычные файлы. Количество узлов, которые могут монтировать файловую систему в любой момент времени, ограничено количеством доступных журналов.

Особенности GFS2 по сравнению с GFS

GFS2 добавляет ряд новых функций, которых нет в GFS. Вот краткое изложение тех функций, которые еще не упоминались в полях справа на этой странице:

  • Файловая система метаданных (действительно другой корень) - см. Совместимость и метафайловая система GFS2 ниже
  • Специфические точки трассировки GFS2 доступны с ядра 2.6.32.
  • Интерфейс квот в стиле XFS доступен в GFS2, начиная с ядра 2.6.33.
  • Кэширующие ACL доступны в GFS2 с версии 2.6.33.
  • GFS2 поддерживает создание запросов на сброс для запросов Thin Provisioning / SCSI TRIM.
  • GFS2 поддерживает барьеры ввода-вывода (по умолчанию включены, если базовое устройство поддерживает их. Настраивается начиная с ядра 2.6.33 и выше)
  • FIEMAP ioctl (для запроса сопоставлений inode на диске)
  • Splice (системный вызов) поддерживать
  • Поддержка mmap / splice для журналируемых файлов (включается при использовании того же формата на диске, что и для обычных файлов)
  • Гораздо меньше настроек (упрощая настройку)
  • Упорядоченный режим записи (согласно ext3, GFS имеет только режим обратной записи)

Совместимость и метафайловая система GFS2

GFS2 был разработан таким образом, чтобы обновление с GFS было простой процедурой. С этой целью большая часть структуры на диске осталась такой же, как GFS, включая прямой порядок байтов порядок байтов. Однако есть несколько отличий:

  • GFS2 имеет «метафайловую систему», через которую процессы обращаются к системным файлам.
  • GFS2 использует тот же дисковый формат для журналируемых файлов, что и для обычных файлов.
  • GFS2 использует обычные (системные) файлы для журналов, тогда как GFS использует специальные экстенты.
  • В GFS2 есть другие "per_node"системные файлы
  • Макет индекс (очень немного) отличается
  • Компоновка непрямых блоков немного отличается

Системы журналирования GFS и GFS2 несовместимы друг с другом. Обновление возможно с помощью инструмента (gfs2_convert), который запускается с файловой системой в автономном режиме для обновления метаданных. Некоторые запасные блоки в журналах GFS используются для создания (очень маленьких) per_node файлы, необходимые GFS2 в процессе обновления. Большая часть данных остается на месте.

«Мета-файловая система» GFS2 не является файловой системой сама по себе, а является альтернативой корень основной файловой системы. Хотя она ведет себя как «обычная» файловая система, ее содержимым являются различные системные файлы, используемые GFS2, и обычно пользователям не нужно даже смотреть на нее. Утилиты GFS2 устанавливать и при необходимости размонтируйте метафайловую систему за кулисами.

Смотрите также

Рекомендации

  1. ^ Тейгланд, Дэвид (29 июня 2004 г.). «Архитектура симметричного кластера и технические характеристики компонентов» (PDF). Red Hat Inc. Получено 2007-08-03. Цитировать журнал требует | журнал = (помощь)
  2. ^ Солтис, Стивен Р .; Эриксон, Грант М .; Преслан, Кеннет В. (1997). «Глобальная файловая система: файловая система для общего дискового хранилища» (PDF). Транзакции IEEE в параллельных и распределенных системах. Архивировано из оригинал (PDF) на 2004-04-15.
  3. ^ Обмен данными OpenGFS с кластером хранения GFS
  4. ^ Белый дом, Стивен (27–30 июня 2007 г.). «Файловая система GFS2» (PDF). Материалы симпозиума по Linux 2007. Оттава, Онтарио, Канада. С. 253–259.
  5. ^ Белый дом, Стивен (13–17 июля 2009 г.). «Тестирование и проверка кластерных файловых систем» (PDF). Материалы симпозиума по Linux 2009 г.. Монреаль, Квебек, Канада. С. 311–317.

внешняя ссылка