- Файловая система в пространстве пользователя — Filesystem in Userspace
- Содержание
- История
- Работа и использование
- Приложения
- Файловые системы на диске
- Многоуровневые файловые системы
- Файловые системы архивов и резервных копий
- FUSEВ¶
- DefinitionsВ¶
- What is FUSE?В¶
- Filesystem typeВ¶
- Mount optionsВ¶
- Control filesystemВ¶
- Interrupting filesystem operationsВ¶
- Aborting a filesystem connectionВ¶
- How do non-privileged mounts work?В¶
- How are requirements fulfilled?В¶
- I think these limitations are unacceptable?В¶
- Kernel — userspace interfaceВ¶
Файловая система в пространстве пользователя — Filesystem in Userspace
Стабильный выпуск | |
---|---|
Написано в | C |
Операционной системе | Unix , Unix-подобный |
Тип | Файловая система драйвер |
Лицензия | GPL для части ядра, LGPL для Libfuse, Упрощенный BSD на FreeBSD, лицензия ISC на OpenBSD |
Веб-сайт | github .com / libfuse / libfuse |
Файловая система в пространстве пользователя (FUSE ) — это программный интерфейс для Unix и Unix-подобных компьютерных операционных систем , который позволяет не -привилегированные пользователи создают свои собственные файловые системы без редактирования кода ядра . Это достигается запуском кода файловой системы в пользовательском пространстве , в то время как модуль FUSE обеспечивает только «мост» к реальным интерфейсам ядра.
Содержание
История
Система FUSE изначально была частью AVFS (виртуальной файловой системы), реализации файловой системы, на которую сильно повлияла концепция переводчика GNU Hurd . Он заменил Linux Userland Filesystem и предоставил трансляционный интерфейс с использованием lufis в libfuse1.
FUSE изначально был выпущен в соответствии с условиями Стандартной общественной лицензии GNU и Стандартной общественной лицензии ограниченного применения GNU , позже также повторно реализованной как часть FreeBSD базовая система и выпущена в соответствии с условиями лицензии Simplified BSD . Повторная реализация ISC от Sylvestre Gallon была выпущена в марте 2013 года и включена в OpenBSD в июне 2013 года.
FUSE был включен в основной поток Дерево ядра Linux в версии ядра 2.6.14.
Пользовательская сторона FUSE, библиотеки libfuse, в целом следовала темпам разработки ядра Linux, сохраняя при этом «максимальную совместимость» с потомками BSD. Это возможно, потому что ядро FUSE сообщает о своих собственных «уровнях возможностей» или версиях. Исключением является форк FUSE для macOS, OSXFUSE, в котором слишком много исключений для совместного использования библиотеки. Прерывание в истории libfuse — это libfuse3, который включает некоторые несовместимые улучшения в интерфейсе и производительности по сравнению со старым libfuse2, который теперь находится в режиме обслуживания.
Поскольку протокол пользовательского пространства ядра FUSE является версионным и общедоступным, программист может выбрать использование другого фрагмента кода вместо
Работа и использование
Для реализации новой файловой системы программа-обработчик, связанная с предоставленной библиотекой libfuse , должна быть быть написанным. Основная цель этой программы — указать, как файловая система должна отвечать на запросы чтения / записи / статистики. Программа также используется для монтирования новой файловой системы. Во время монтирования файловой системы обработчик регистрируется в ядре. Если пользователь теперь выдает запросы чтения / записи / статистики для этой вновь смонтированной файловой системы, ядро пересылает эти запросы ввода-вывода обработчику, а затем отправляет ответ обработчика обратно пользователю.
FUSE особенно полезно для записи виртуальных файловых систем . В отличие от традиционных файловых систем, которые, по сути, работают с данными на запоминающих устройствах, виртуальные файловые системы на самом деле сами не хранят данные. Они действуют как просмотр или перевод существующей файловой системы или устройства хранения.
В принципе, любой ресурс, доступный для реализации FUSE, можно экспортировать как файловую систему.
Приложения
Файловые системы на диске
Обычные файловые системы на диске могут быть реализованы в пространстве пользователя с помощью FUSE, например по причинам совместимости или лицензирования.
- Линейная файловая система на магнитной ленте : обеспечивает доступ к файлам, хранящимся на магнитной ленте, аналогично файлам на дисках или съемных флеш-накопителях.
- NTFS-3G и Captive NTFS , предоставляя доступ к файловым системам NTFS .
Многоуровневые файловые системы
Файловые системы FUSE могут создавать представление о лежащей в основе файловой системе, тем или иным образом преобразовывая файлы.
Файловые системы архивов и резервных копий
Файловые системы FUSE могут открывать содержимое архивов или наборов резервных копий без необходимости их предварительного извлечения.
- archivemount
- Borg (программное обеспечение резервного копирования) : программа резервного копирования с дедупликацией, которая позволяет монтировать архивы резервных копий как файловые системы FUSE.
- Restic : бесплатное, быстрое, эффективное и безопасное программное обеспечение для резервного копирования использует FUSE для иметь возможность просматривать все ваши моментальные снимки резервных копий как обычную файловую систему
- SPFS Файловая система для Spectrum Protect, предназначенная для монтирования файлового пространства сервера резервного копирования в любом месте вашего сервера и использования функций, включенных с сервера резервного копирования ( шифрование, дедупликация, сжатие, фильтрация и т. д.). Это файловая система WORM.
Источник
FUSEВ¶
DefinitionsВ¶
A filesystem in which data and metadata are provided by an ordinary userspace process. The filesystem can be accessed normally through the kernel interface.
The process(es) providing the data and metadata of the filesystem.
Non-privileged mount (or user mount):
A userspace filesystem mounted by a non-privileged (non-root) user. The filesystem daemon is running with the privileges of the mounting user. NOTE: this is not the same as mounts allowed with the “user” option in /etc/fstab, which is not discussed here.
A connection between the filesystem daemon and the kernel. The connection exists until either the daemon dies, or the filesystem is umounted. Note that detaching (or lazy umounting) the filesystem does not break the connection, in this case it will exist until the last reference to the filesystem is released.
The user who does the mounting.
The user who is performing filesystem operations.
What is FUSE?В¶
FUSE is a userspace filesystem framework. It consists of a kernel module (fuse.ko), a userspace library (libfuse.*) and a mount utility (fusermount).
One of the most important features of FUSE is allowing secure, non-privileged mounts. This opens up new possibilities for the use of filesystems. A good example is sshfs: a secure network filesystem using the sftp protocol.
The userspace library and utilities are available from the FUSE homepage:
Filesystem typeВ¶
The filesystem type given to mount(2) can be one of the following:
This is the usual way to mount a FUSE filesystem. The first argument of the mount system call may contain an arbitrary string, which is not interpreted by the kernel.
The filesystem is block device based. The first argument of the mount system call is interpreted as the name of the device.
Mount optionsВ¶
The file descriptor to use for communication between the userspace filesystem and the kernel. The file descriptor must have been obtained by opening the FUSE device (вЂ/dev/fuse’).
The file mode of the filesystem’s root in octal representation.
The numeric user id of the mount owner.
The numeric group id of the mount owner.
By default FUSE doesn’t check file access permissions, the filesystem is free to implement its access policy or leave it to the underlying file access mechanism (e.g. in case of network filesystems). This option enables permission checking, restricting access based on file mode. It is usually useful together with the вЂallow_other’ mount option.
This option overrides the security measure restricting file access to the user mounting the filesystem. This option is by default only allowed to root, but this restriction can be removed with a (userspace) configuration option.
With this option the maximum size of read operations can be set. The default is infinite. Note that the size of read requests is limited anyway to 32 pages (which is 128kbyte on i386).
Set the block size for the filesystem. The default is 512. This option is only valid for вЂfuseblk’ type mounts.
Control filesystemВ¶
There’s a control filesystem for FUSE, which can be mounted by:
Mounting it under the вЂ/sys/fs/fuse/connections’ directory makes it backwards compatible with earlier versions.
Under the fuse control filesystem each connection has a directory named by a unique number.
For each connection the following files exist within this directory:
The number of requests which are waiting to be transferred to userspace or being processed by the filesystem daemon. If there is no filesystem activity and вЂwaiting’ is non-zero, then the filesystem is hung or deadlocked.
Writing anything into this file will abort the filesystem connection. This means that all waiting requests will be aborted an error returned for all aborted and new requests.
Only the owner of the mount may read or write these files.
Interrupting filesystem operationsВ¶
If a process issuing a FUSE filesystem request is interrupted, the following will happen:
If the request is not yet sent to userspace AND the signal is fatal (SIGKILL or unhandled fatal signal), then the request is dequeued and returns immediately.
If the request is not yet sent to userspace AND the signal is not fatal, then an interrupted flag is set for the request. When the request has been successfully transferred to userspace and this flag is set, an INTERRUPT request is queued.
If the request is already sent to userspace, then an INTERRUPT request is queued.
INTERRUPT requests take precedence over other requests, so the userspace filesystem will receive queued INTERRUPTs before any others.
The userspace filesystem may ignore the INTERRUPT requests entirely, or may honor them by sending a reply to the original request, with the error set to EINTR.
It is also possible that there’s a race between processing the original request and its INTERRUPT request. There are two possibilities:
The INTERRUPT request is processed before the original request is processed
The INTERRUPT request is processed after the original request has been answered
If the filesystem cannot find the original request, it should wait for some timeout and/or a number of new requests to arrive, after which it should reply to the INTERRUPT request with an EAGAIN error. In case 1) the INTERRUPT request will be requeued. In case 2) the INTERRUPT reply will be ignored.
Aborting a filesystem connectionВ¶
It is possible to get into certain situations where the filesystem is not responding. Reasons for this may be:
Broken userspace filesystem implementation
Network connection down
(For more on c) and d) see later sections)
In either of these cases it may be useful to abort the connection to the filesystem. There are several ways to do this:
Kill the filesystem daemon. Works in case of a) and b)
Kill the filesystem daemon and all users of the filesystem. Works in all cases except some malicious deadlocks
Use forced umount (umount -f). Works in all cases but only if filesystem is still attached (it hasn’t been lazy unmounted)
Abort filesystem through the FUSE control filesystem. Most powerful method, always works.
How do non-privileged mounts work?В¶
Since the mount() system call is a privileged operation, a helper program (fusermount) is needed, which is installed setuid root.
The implication of providing non-privileged mounts is that the mount owner must not be able to use this capability to compromise the system. Obvious requirements arising from this are:
mount owner should not be able to get elevated privileges with the help of the mounted filesystem
mount owner should not get illegitimate access to information from other users’ and the super user’s processes
mount owner should not be able to induce undesired behavior in other users’ or the super user’s processes
How are requirements fulfilled?В¶
The mount owner could gain elevated privileges by either:
creating a filesystem containing a device file, then opening this device
creating a filesystem containing a suid or sgid application, then executing this application
The solution is not to allow opening device files and ignore setuid and setgid bits when executing programs. To ensure this fusermount always adds “nosuid” and “nodev” to the mount options for non-privileged mounts.
If another user is accessing files or directories in the filesystem, the filesystem daemon serving requests can record the exact sequence and timing of operations performed. This information is otherwise inaccessible to the mount owner, so this counts as an information leak.
The solution to this problem will be presented in point 2) of C).
There are several ways in which the mount owner can induce undesired behavior in other users’ processes, such as:
mounting a filesystem over a file or directory which the mount owner could otherwise not be able to modify (or could only make limited modifications).
This is solved in fusermount, by checking the access permissions on the mountpoint and only allowing the mount if the mount owner can do unlimited modification (has write access to the mountpoint, and mountpoint is not a “sticky” directory)
Even if 1) is solved the mount owner can change the behavior of other users’ processes.
It can slow down or indefinitely delay the execution of a filesystem operation creating a DoS against the user or the whole system. For example a suid application locking a system file, and then accessing a file on the mount owner’s filesystem could be stopped, and thus causing the system file to be locked forever.
It can present files or directories of unlimited length, or directory structures of unlimited depth, possibly causing a system process to eat up diskspace, memory or other resources, again causing DoS.
The solution to this as well as B) is not to allow processes to access the filesystem, which could otherwise not be monitored or manipulated by the mount owner. Since if the mount owner can ptrace a process, it can do all of the above without using a FUSE mount, the same criteria as used in ptrace can be used to check if a process is allowed to access the filesystem or not.
Note that the ptrace check is not strictly necessary to prevent B/2/i, it is enough to check if mount owner has enough privilege to send signal to the process accessing the filesystem, since SIGSTOP can be used to get a similar effect.
I think these limitations are unacceptable?В¶
If a sysadmin trusts the users enough, or can ensure through other measures, that system processes will never enter non-privileged mounts, it can relax the last limitation with a вЂuser_allow_other’ config option. If this config option is set, the mounting user can add the вЂallow_other’ mount option which disables the check for other users’ processes.
Kernel — userspace interfaceВ¶
The following diagram shows how a filesystem operation (in this example unlink) is performed in FUSE.
Everything in the description above is greatly simplified
There are a couple of ways in which to deadlock a FUSE filesystem. Since we are talking about unprivileged userspace programs, something must be done about these.
Scenario 1 — Simple deadlock:
The solution for this is to allow the filesystem to be aborted.
Scenario 2 — Tricky deadlock
This one needs a carefully crafted filesystem. It’s a variation on the above, only the call back to the filesystem is not explicit, but is caused by a pagefault.
The solution is basically the same as above.
An additional problem is that while the write buffer is being copied to the request, the request must not be interrupted/aborted. This is because the destination address of the copy may not be valid after the request has returned.
This is solved with doing the copy atomically, and allowing abort while the page(s) belonging to the write buffer are faulted with get_user_pages(). The вЂreq->locked’ flag indicates when the copy is taking place, and abort is delayed until this flag is unset.
© Copyright The kernel development community.
Источник