文件系统常见问题

• SMB3
  • 支持 POSIX, NTFS ACL
  • account based
• NFS
  • Kerberos Authentication (GSS-API)
    • RPCSEC_GSS
    • sec=krb5
  • AUTH_SYS (UNIX Authentication)
    • sec=sys
  • SPKM (Simple Public Key Mechanism)
  • NFSv4 ACLs (Access Control Lists)

文件名

• Linux
  • 不可以包含 /, \x00
  • 可以包含 :
• macOS
  • Finder 不可以包含 :, 可以包含 /
  • 命令行 不可以包含 /, 可以包含 :
  • HFS Plus 支持 Unicode - 支持 \x00 - API 层可能会限制
• Windows
  • 不可以包含 / \ : * ? " < > |. \x00-\x1f
  • 保留名字
    • CON, PRN, AUX, NUL
    • COM1, COM2, COM3, COM4, COM5, COM6, COM7, COM8, COM9
    • LPT1, LPT2, LPT3, LPT4, LPT5, LPT6, LPT7, LPT8, LPT9
  • 文件名字不能以空格和点(.)结尾
• URL
  • 安全字符 - [0-9a-zA-Z-._~]
  • 不安全字符 - <>[]{}|\^%#

---

• https://stackoverflow.com/a/9847573/1870054

attr and xattr

• attr
  • size
  • type
  • mode
  • uid, gid
  • atime, mtime, ctime
• xattr
  • namespace
    • user
      • user.comment
    • trusted
    • security
    • system
  • 一般上限 64kb
  • 存储位置
    • ext4 inode - 256/128 byte
    • xfs b+
    • zfs 内置 xattr - 不存在空间不够
      • zfs get xattr DATASET
      • zfs set xattr=on DATASET
    • 扩展块
    • 特殊数据结构
• NTFS ADS - Alternate Data Streams
  • :<stream_name>
  • example.txt -> example.txt:stream1

---

• attr
  • ls
  • stat
• xattr
  • getfattr
  • setfattr
  • attr - attr -l file
• xattr.7

文件系统限制

• What are the file and file system size limitations for Red Hat Enterprise Linux?

atime, mtime, ctime

field	mean	stand for
atime	access time	访问时间
mtime	modify time	修改时间
ctime	create time	创建时间
btime	birth time	fs 创建时间

• btime
  • crtime EXTFS
  • Linux 4.11+ 支持 statx 返回 crtime
• stat.1
• ext
  • strictatime - 更严格的 atime 维护，影响性能，特殊场景使用
  • noatime - 不维护 atime
  • nodiratime - 不维护目录 atime
  • relatime - relative atime - 超过 24h 才更新 atime

touch hello.txt
# 查看所有时间
stat hello.txt

touch hello.txt                          # 修改 atime, mtime
touch -m hello.txt                       # 修改 mtime
touch -d "2020-01-15 10:30:45" hello.txt # 指定 atime, mtime

touch neo.txt
touch hello.txt -r neo.txt # 参照修改

# inode
stat -c $i /etc/profile
df --output=source /etc/profile | tail -1
# debugfs 能看到 crtime
debugfs -R "stat <$(stat -c %i /etc/profile)>" /dev/sda2

MBR vs GPT

• MBR - Master Boot Record
  • 也叫 DOS 分区 - 最早于 IBM PC DOS 2.0
• GPT - GUID Partition Table
  • 因为 UEFI 而诞生
• 4096 disk sector - AFD - Advanced Format - 4Kn
  • 自 2010 年开始，厂商大多采用 4k sector
  • 使用 512 实际是使用模拟后的地址 - 512e

-	mbr	gpt
since	1983	2005 - UEFI
interface	BIOS	UEFI
512b sector	2TiB = 2^32 × 512	8 ZiB = 2^64 × 512
4096b sector	-	64 ZiB = 2^64 × 4096
address	CHS - Cylinder-head-sector	LBA - Logical Block Addressing
bits	32	64

The size of this disk is 2 TiB (2199023255552 bytes). DOS partition table format cannot be used on drives for volumes larger than 2199023255040 bytes for 512-byte sectors. Use GUID partition table format (GPT).

重新挂载为可读写

mount -o rw,remount /

Do you want to remove the signature?

如果不希望删除 fs 则选择 No

• What is a vfat signature?

cluster size for NTFS, FAT, and exFAT

NTFS

volumn	block
7 MB–16 TB	4 KB
16 TB–32 TB	8 KB
32 TB–64 TB	16 KB
64 TB–128 TB	32 KB
128 TB–256 TB	64 KB

exFAT

volumn	block
7 MB–256 MB	4 KB
256 MB–32 GB	32 KB
32 GB–256 TB	128 KB

FAT32

volumn	block
32 MB–64 MB	512 bytes
64 MB–128 MB	1 KB
128 MB–256 MB	2 KB
256 MB–8 GB	4 KB
8 GB–16 GB	8 KB
16 GB–32 GB	16 KB

FAT16

volumn	block
8 MB–32 MB	512 bytes
32 MB–64 MB	1 KB
64 MB–128 MB	2 KB
128 MB–256 MB	4 KB
256 MB–512 MB	8 KB
512 MB–1 GB	16 KB
1 GB–2 GB	32 KB
2 GB–4 GB	64 KB

NAND flash 大多为 128 KB blocksize，所以 extFAT 很适合闪存

• Default cluster size for NTFS, FAT, and exFAT

/run vs /var/run

• /run - 新的标准 - tmpfs
• /var/run - symlink 到 /run

特殊文件

• Windows
  • $RECYCLE.BIN
• macOS
  • .DS_Store
  • ._XXX
  • .AppleDouble
  • .Spotlight-V100
  • .apDisk
  • .VolumeIcon.icns
  • .fseventsd
    • buffer for the File System Events daemon
  • .Trash
  • .Trashes
  • .TemporaryItems

.DS_Store

• Desktop Services Store
• macOS Finder 用于存储 文件夹 的自定义属性
• 文件排序、图标位置、视图、背景
• 可以不在网络卷上创建
  • defaults write com.apple.desktopservices DSDontWriteNetworkStores -bool TRUE
• https://eclecticlight.co/2021/11/27/explainer-ds_store-files/
• https://news.ycombinator.com/item?id=29358932

._XXX

• HFS+ 支持扩展属性，所以没有这个问题
• 用于在不支持 macOS 扩展属性的文件系统存储文件元数据
  • 早期 resource fork
  • finder 存储 icon
  • Time Machine
• .AppleDouble
• macOS 内置 dot_clean 工具可以删除
• turds
• smb.conf.5
  • veto files = /._*/
  • delete veto files = yes
  • hide special files - 隐藏特殊文件 - 客户端也看不到，所以不适合

dot_clean -m /Volumes/MyVolume
find /Volumes/MyVolume -name '._*' -type f -delete

• https://apple.stackexchange.com/a/14981/103557

mount shared

mount --make-rshared /

#
echo user_allow_other | sudo tee -a /etc/fuse.conf
s3fs -o allow_other

# 如果是 host mount 已经 allow_other 则不需要在做其他处理
docker run --rm -it -w /host -v $PWD:/host --cap-add SYS_ADMIN --device /dev/fuse docker.wener.me/wener/node:20

# 允许 docker 访问 host 上的 fuse mount
docker run --rm -it -w /host --mount type=bind,source=$PWD,target=/host,bind-propagation=rshared --cap-add SYS_ADMIN --device /dev/fuse docker.wener.me/wener/node:20

• 外部 fuse umount 再 mount 容器里不会生效
• https://docs.docker.com/engine/storage/bind-mounts/#configure-bind-propagation

docker: Error response from daemon: invalid mount config for type "bind": stat /: permission denied.

Single Root vs Multiple Root

• Single Root
  • / - 一个根目录
  • /home, /var, /usr, /tmp, /opt, /srv, /mnt, /media, /boot
  • 优点
    • 用户层面简单
    • 灵活 - 统一结构
  • 缺点
• Multiple Root
  • C:, D:, E:\
  • 优点
    • 每个 Drive 可识别 - 系统层面简单
    • Drive 隔离