IN SINTESI
- Sviluppo interno. OpenMacFUSE è un server NFSv4.0 collegato al processo del driver che espone l'API FUSE 2.x. Conta circa 17.000 righe di C, è implementato a partire dalle RFC 7530, 5531 e 4506 ed è rilasciato con licenza MIT. È uno dei pochi livelli FUSE open source per macOS che non richiedono alcuna estensione del kernel.
- Velocità. Il divario è maggiore nei carichi ricchi di metadati: calcolare il checksum di ogni file di un volume richiede 23 s contro 797 s con FUSE-T, mentre l'eliminazione di 10.000 file piccoli è da 6 a 9 volte più rapida. Nella lettura e scrittura sequenziale di file grandi su dischi USB reali non emerge alcuna differenza misurabile.
- Memoria. Il processo del driver usa da 45 a 51 MB di memoria fisica, a prescindere dal numero di file e dal tempo di attività.
- Affidabilità. Se durante una scrittura viene tolta l'alimentazione USB, il driver smonta il volume ed esce entro 0,5 s. Al ripristino dell'alimentazione il volume si monta normalmente e nessun file ha un contenuto danneggiato; si perdono soltanto le scritture completate nell'ultimo secondo circa.
- Manutenibilità. Il livello di protocollo, l'interfaccia FUSE e il motore NTFS stanno nello stesso codebase: un problema del livello di montaggio si traccia e si corregge direttamente, senza attendere il calendario di rilascio di terzi.
23 s contro 797 s
381 MB con FUSE-T
misurato su un SSD USB
tutte superate su macOS 12
1 Contesto2 Architettura3 Prestazioni4 Memoria5 Comportamento su macOS6 Gestione dei guasti7 Metodologia8 Limiti9 ConclusioniFAQ
1Contesto
Da macOS 11, per caricare un'estensione del kernel bisogna avviare il Mac da Recupero di macOS e impostare la «Sicurezza ridotta». Per un software destinato agli utenti di tutti i giorni, questa strada non è più praticabile. Per restare fuori dal kernel ci sono due vie principali: FSKit di Apple (disponibile da macOS 15.4 e usato dal «Driver 2» di NTFSTool) e il client NFS integrato in macOS. La seconda avvia un server NFS sul Mac stesso, traduce le operazioni sul file system in chiamate a un driver in user space e monta il risultato con mount_nfs. FUSE-T segue questa strada ed è l'implementazione più matura; in questo articolo è il termine di paragone per ogni confronto.
Abbiamo scelto di realizzare questo livello internamente per tre ragioni tecniche:
- Distribuzione. FUSE-T è un componente separato: al primo utilizzo va installato con la password di amministratore, il che aggiunge un passaggio e un ulteriore possibile punto di guasto.
- Correzioni. Un livello di montaggio di terzi viene distribuito in forma binaria. Possiamo riprodurre i problemi che contiene, come elenchi lenti di cartelle grandi o un consumo di memoria crescente, ma solo il suo autore può risolverli.
- Semantica. Un livello di montaggio generico non sa nulla di NTFS. Le regole su maiuscole e minuscole, gli attributi «nascosto» e «sola lettura» e il punto in cui si salvano gli attributi estesi si gestiscono correttamente solo insieme al motore del file system.
2Architettura
OpenMacFUSE è collegato al driver come libreria statica. All'avvio, il driver si mette in ascolto su un endpoint locale all'interno del proprio processo e poi chiama mount_nfs di macOS. Ogni richiesta COMPOUND del client NFS del kernel viene decodificata, inoltrata alle callback FUSE e risolta nello stesso processo. Non c'è un secondo processo, né copie aggiuntive o cambi di contesto lungo il percorso.
Trasporto e opzioni di montaggio
Da macOS 26 in poi si usa un socket di dominio Unix (proto=ticotsord): non si apre alcuna porta e gli altri utenti del Mac non possono connettersi. Il client del kernel di macOS 12 non gestisce le scritture di grandi dimensioni su quel trasporto, perciò le versioni precedenti di macOS ripiegano su TCP su 127.0.0.1, con due controlli lato server che verificano che la connessione provenga dal montaggio locale. Queste sono le opzioni riportate dal sistema dopo un montaggio su macOS 27:
$ nfsstat -m <punto di montaggio> NFS parameters: vers=4.0,ticotsord,port=/var/folders/…/openmacfuse.P1wAL0/s,hard,intr, noresvport,nocallback,negnamecache,nonamedattr,noacl,noaclonly,locks,noquota, rsize=262144,wsize=262144,readahead=16,dsize=32768,nordirplus,nodumbtimer, timeo=10,maxgroups=16,…,deadtimeout=60
nonamedattr è il valore predefinito del client di sistema e determina come vengono gestiti gli attributi estesi nella sezione 5. nordirplus è una nostra scelta; il suo costo è descritto nella sezione 8.Scelte di implementazione
- Una tabella di nodi limitata. Un file handle non è un puntatore a un oggetto in memoria. La tabella dei nodi ha un limite di dimensione e un handle il cui nodo è stato rimosso viene risolto di nuovo tramite il percorso al successivo utilizzo. Nei test abbiamo abbassato il limite a 64 voci ed eseguito 301 ridenominazioni consecutive: tutti i 7.839 accessi tramite handle vecchi sono stati recuperati e nessuno ha restituito
NFS4ERR_STALE. Per questo la memoria non cresce con il numero di file. - Cache delle richieste duplicate. Il client rinvia una richiesta dopo un timeout. Per le operazioni non idempotenti come CREATE, REMOVE e RENAME, il server conserva in cache le risposte recenti e risponde a un rinvio dalla cache invece di eseguire di nuovo l'operazione. Nei test abbiamo scartato una risposta per ciascuno dei sei tipi di operazione: ogni operazione è stata eseguita esattamente una volta.
- Nessun attributo con nome. Gli attributi con nome di NFSv4 sono la soluzione naturale del protocollo per gli attributi estesi, ma il client NFS del kernel di macOS ha su quel percorso un difetto che manda in crash il sistema. Lo abbiamo incontrato durante lo sviluppo su macOS 27.0.1 e 12.7.6. OpenMacFUSE resta quindi sul percorso più usato dal client e gli attributi con nome rimangono disattivati.
3Prestazioni
OpenMacFUSE è da 6 a 35 volte più veloce di FUSE-T 1.0.49 nei carichi ricchi di metadati e alla pari nella lettura e scrittura sequenziale su dischi USB reali. Metodo: stesso Mac, stessa immagine del volume e stesso codice sorgente del motore NTFS, collegato una volta a OpenMacFUSE e una volta a FUSE-T 1.0.49. L'immagine si trova sull'SSD interno e l'I/O passa dalla cache di pagina del sistema, quindi la Figura 3 misura il carico aggiuntivo del livello di montaggio e del motore, non il disco. I risultati su dischi reali sono riportati a parte nella Tabella 1.
OpenMacFUSE
FUSE-T 1.0.49| Tabella 1 · Dischi USB reali | OpenMacFUSE | FUSE-T |
|---|---|---|
| SSD, scrittura sequenziale di 4,5 GB | 293–313 MB/s | 300 MB/s |
| SSD, lettura a freddo | 245–251 MB/s | 236–241 MB/s |
| SSD, scansione dell'albero di cartelle | 0,25–0,30 s | 4,1–4,6 s |
| SSD, eliminazione di 2.000 file piccoli | 0,82–0,86 s | 8,4–9,7 s |
| Hard disk, scrittura / lettura sequenziale | 70 / 97 MB/s | 74 / 93 MB/s |
SSD misurato su Apple M2 / macOS 27; hard disk su Intel i7 / macOS 12.7. La velocità sequenziale è limitata dal collegamento USB e dal disco stesso; le differenze rientrano nella variabilità di misura.
Un risultato escluso: la creazione di file piccoli. Dopo questi benchmark, la politica di flush predefinita di OpenMacFUSE è stata resa più prudente (sezione 6) e la creazione di file piccoli è diventata circa due volte più lenta. Il confronto su dischi reali con FUSE-T non è stato ripetuto con la nuova politica e non citeremo i vecchi valori finché non lo sarà.
4Memoria
OpenMacFUSE resta tra 45 e 51 MB di memoria fisica a prescindere dal carico e dal tempo di attività; FUSE-T ha usato da 200 MB a 1 GB negli stessi test. Tutti i valori sono l'impronta fisica, la stessa misura della colonna Memoria in Monitoraggio Attività. Per OpenMacFUSE è l'unico processo del driver; per FUSE-T è il processo del driver più il suo processo server NFS. Entrambi includono circa 35 MB di cache di blocchi che appartengono al motore NTFS.
5Comportamento su macOS
OpenMacFUSE tiene i file ._ fuori dal disco e associa gli attributi NTFS ai loro equivalenti di macOS.
._.AppleDouble
Per impostazione predefinita il client NFS di macOS non usa gli attributi con nome. Raccoglie gli attributi estesi, la resource fork e le informazioni del Finder di un file in un file AppleDouble chiamato ._nomefile e lo invia al server con normali operazioni OPEN e WRITE. Se il server si limita a salvare quello che riceve, quei file finiscono sul disco, dove in Windows risultano file superflui.
Con macOS 26 la cosa è diventata più evidente: il sistema aggiunge un attributo com.apple.provenance a ogni nuovo file, quindi ogni file è accompagnato da un file ._. Scrivendo con FUSE-T un insieme di 40.000 file piccoli, sul disco sono rimasti 40.048 file ._ in più. Un repository git sul volume mostrava 48 file non tracciati e git fsck segnalava 67 errori.
OpenMacFUSE rileva sul server l'accesso ai file ._, analizza il contenuto AppleDouble e scrive ogni attributo in un flusso di dati alternativo NTFS del file principale. In lettura ricostruisce il file AppleDouble al momento. Sul disco non viene creato alcun file separato e negli elenchi delle cartelle non ne compare nessuno. Su un disco che contiene già file ._, questi vengono nascosti e ognuno è spostato nel flusso di dati alla successiva modifica del suo file principale.
Il costo è il filtraggio durante l'elenco delle cartelle: il primo elenco di una cartella con 40.000 voci passa da 1,4 s a 3,6 s. Per noi è un compromesso accettabile.
Altri comportamenti
| Funzione | Comportamento di OpenMacFUSE | Osservato con FUSE-T |
|---|---|---|
| Maiuscole e minuscole nei nomi | Per impostazione predefinita non distingue maiuscole e minuscole ma le conserva, come in Windows. Se il volume contiene già nomi che differiscono solo per maiuscole e minuscole, il montaggio passa automaticamente a distinguere maiuscole e minuscole | Distingue maiuscole e minuscole |
| Normalizzazione Unicode | Le forme NFC e NFD di un nome portano allo stesso file (lettere accentate, coreano) | Non testato |
| Attributo nascosto | Il bit NTFS HIDDEN e il flag «nascosto» del Finder si associano in entrambe le direzioni | Non associato |
| Attributo di sola lettura | Il bit NTFS READONLY rende il file non scrivibile su macOS | Non riflesso |
| Data di creazione | stat -f %B restituisce la data di creazione salvata sul disco | Sempre 0 |
| Lock di intervalli di byte | Supportati; i database SQLite si possono aprire direttamente sul volume | Non testato |
6Gestione dei guasti
I dischi esterni vengono scollegati senza preavviso. È un uso normale, non un caso limite, e OpenMacFUSE ha tre meccanismi che rimuovono il montaggio quando succede. Un livello di montaggio basato su NFS comporta un rischio intrinseco: il montaggio è hard, quindi quando il server smette di rispondere, ogni processo che tocca il volume entra in un'attesa non interrompibile e il Finder smette di rispondere. Il livello di montaggio deve garantire che qualcosa rimuova sempre il punto di montaggio:
- Rilevamento della perdita del dispositivo. Un errore del dispositivo durante l'I/O viene gestito subito; a riposo, il nodo del dispositivo viene verificato tramite IOKit una volta al secondo. Appena la perdita è confermata, le richieste in sospeso restituiscono un errore, il volume viene smontato forzatamente e il processo termina.
- Watchdog. Se una richiesta è in corso e per 30 secondi non avanza nulla, il driver è considerato bloccato e il volume viene smontato e il processo termina allo stesso modo.
- Processo di guardia. Se il driver stesso va in crash o viene terminato, un piccolo processo separato rimuove il punto di montaggio. Senza di esso il sistema ripulisce da sé soltanto dopo circa 70 secondi (
deadtimeout) e fino ad allora i processi che toccano il volume non si possono interrompere.
== taglio di corrente: B-write1 (carico: scrittura, dopo le modifiche, NTFSTOOL_DRIVER_FSYNC=bounded) - dopo il taglio: errore di scrittura a 0,19 s; punto di montaggio rimosso a 0,21 s; uscita del driver a 0,45 s; processi non interrompibili: 0 [pass] dal taglio di corrente al ripristino completo 0,45 s (limite 10 s) - 303 file con fsync; dall'ultimo ritorno di fsync al rilevamento della perdita del dispositivo 0,081 s [pass] si monta dopo il taglio senza ntfsfix (0,33 s)
Coerenza dopo un'interruzione dell'alimentazione
Dopo un'interruzione dell'alimentazione durante una scrittura, il volume ora si monta senza strumenti di riparazione in ogni prova e nessun file torna con un contenuto sbagliato. Il livello di montaggio può influire su due cose: se il volume si monta senza strumenti di riparazione al ritorno dell'alimentazione e quante delle scritture già confermate all'applicazione sopravvivono. OpenMacFUSE introduce qui tre modifiche:
- Ordine delle scritture. I dati del file raggiungono il dispositivo prima dei metadati che vi fanno riferimento. Senza questo ordine, quattro prove su cinque con interruzione dell'alimentazione hanno prodotto file con contenuto sbagliato; con l'ordine rispettato, nessuna.
- Flush della cache limitato. Con la politica predefinita
fsyncritorna appena i dati sono stati scritti sul dispositivo e un thread in background svuota la cache di scrittura del disco entro un secondo. Svuotarla in modo sincrono a ogni chiamata riduce la perdita a un file al massimo per prova, ma rende la scrittura di file piccoli da 13 a 23 volte più lenta; resta disponibile come opzione. - Riparazione automatica al montaggio. Un effetto comune di un'interruzione dell'alimentazione è una discordanza tra
$MFTe$MFTMirr, nel qual caso la specifica prevede che il montaggio venga rifiutato. OpenMacFUSE la controlla e la ripara durante il montaggio, così l'utente non deve eseguire prima uno strumento di riparazione.
| SSD USB, interruzione dell'alimentazione durante una scrittura | Prima delle modifiche | Dopo (politica predefinita) |
|---|---|---|
| Si monta senza strumenti di riparazione al ritorno dell'alimentazione | 3 prove su 5 non riuscite per una discordanza di $MFTMirr | Ogni prova |
| File confermati persi per prova | 12–19 | 1–27, tutti scritti nell'ultimo secondo circa |
| File con contenuto sbagliato | Alcuni file sono tornati con tutti zeri | 0 |
«Prima delle modifiche» indica il comportamento del motore prima di questo lavoro; lo stesso motore montato con FUSE-T ha dato gli stessi risultati. Nessun file system può garantire i dati dell'ultimo istante quando un disco portatile senza batteria perde l'alimentazione durante una scrittura. L'obiettivo qui è limitare la perdita alle scritture più recenti e lasciare intatta la struttura del volume.
7Metodologia
| Voce | Dettagli |
|---|---|
| Hardware | MacBook Pro (Intel i7-4770HQ, 16 GB, macOS 12.7.6); Mac (Apple M2, 24 GB, macOS 27.0.1); SSD USB da 120 GB, hard disk USB da 1 TB, chiavetta USB |
| Confronto | Stesso Mac, stessa immagine, stesso codice sorgente del motore NTFS; cambia solo il livello di montaggio. FUSE-T versione 1.0.49 |
| Misura dei tempi | I tempi di scrittura includono sync; le letture sequenziali vengono eseguite dopo uno smontaggio e un nuovo montaggio, per evitare la cache del client |
| Memoria | ri_phys_footprint da proc_pid_rusage, a intervalli di 0,2 s |
| Scollegamento e interruzione dell'alimentazione | Un relè interrompe l'alimentazione USB a 5 V senza smontare prima. Al ritorno dell'alimentazione, la struttura del volume viene controllata in sola lettura, poi il volume viene montato senza riparazione e ogni file viene confrontato |
| Correttezza | 300 s di confronto casuale tra letture e scritture (692.000 operazioni, 0 discrepanze); 8 processi di scrittura simultanei più 2 elenchi ricorsivi; struttura del volume controllata dopo ogni prova |
| Regressione | 15 suite di script con 869 verifiche che coprono lettura e scrittura NTFS, comportamento su macOS, volumi ext, exFAT e BitLocker, più l'iniezione di guasti: scollegamento, terminazione forzata, blocco e timeout dell'handshake di montaggio |
07:29:09 [pass] montato 07:29:10 [pass] file grande scritto 07:29:12 [pass] file piccoli scritti 07:29:13 [pass] MD5 del file grande corretto 07:29:13 [pass] MD5 di tutti i file piccoli corretti 07:29:13 [pass] rinomina / aggiunta / troncamento / eliminazione 07:29:13 [pass] apertura senza distinzione tra maiuscole e minuscole 07:29:13 [pass] nessun file ._ nell'elenco 07:29:13 [pass] lettura e scrittura degli attributi estesi 07:29:15 [pass] smontaggio normale 07:29:15 [pass] driver terminato 07:29:15 [pass] processo di guardia terminato
8Limiti
- Versioni di macOS coperte dai test di regressione. La suite di regressione automatica completa viene eseguita per ora su macOS 12.7 (Intel) e macOS 27 (Apple silicon); le altre versioni verranno aggiunte. Il primo ciclo di regressione su macOS 27 ha trovato tre problemi che non si verificano su macOS 12; da allora sono stati tutti corretti.
- Ambito del confronto. Ogni dato di FUSE-T proviene dai nostri due Mac e solo dalla versione 1.0.49. «Non testato» non significa che una funzione non sia supportata.
- I difetti del client del kernel non si aggirano in user space. Questo tipo di montaggio può essere stabile solo quanto il client NFS di macOS. Evitiamo i due percorsi noti per essere problematici (gli attributi con nome e la riconnessione dopo un timeout dell'handshake di montaggio), ma non possiamo escluderne altri.
- macOS tratta questi volumi come volumi di rete. Non c'è il Cestino e Spotlight non li indicizza. Lo stesso vale per FUSE-T; è una conseguenza di questo approccio.
- Cartelle molto grandi. Il Finder impiega circa 74 s per aprire per la prima volta una cartella con più di 40.000 voci. Il collo di bottiglia è il modo in cui il Finder legge gli attributi voce per voce, ed è lo stesso con entrambi i livelli di montaggio.
- L'ordine di scrittura per le eliminazioni non ha ancora ricevuto lo stesso trattamento delle scritture. Dopo un'interruzione dell'alimentazione c'è una piccola probabilità che risultino compromessi i nuovi dati scritti nello spazio liberato da un file appena eliminato.
9Conclusioni
OpenMacFUSE è il livello di montaggio predefinito del Driver 1 in NTFSTool Pro; vi vengono montati tutti i volumi NTFS, ext, exFAT e BitLocker. Tenere il livello di montaggio nel nostro codebase dà quattro vantaggi:
- Sviluppo interno. RPC, XDR, la macchina a stati di NFSv4.0 e l'interfaccia FUSE sono tutte implementazioni nostre. Non c'è alcun componente di montaggio di terzi e nulla di aggiuntivo da installare.
- Prestazioni. Le richieste si completano all'interno di un solo processo. Le operazioni sui metadati sono da 6 a 35 volte più veloci che con FUSE-T e l'uso di memoria è da un sesto a un ventesimo.
- Affidabilità. Un disco scollegato, un driver bloccato e un processo terminato hanno ciascuno il proprio meccanismo di uscita, e il volume si monta normalmente dopo un'interruzione dell'alimentazione.
- Manutenibilità. 869 verifiche automatiche coprono i percorsi normali e l'iniezione di guasti, così un problema si può riprodurre, tracciare, correggere e verificare contro le regressioni in un unico codebase.
FAQ
- Che cos'è OpenMacFUSE?
- OpenMacFUSE è il livello di montaggio open source in user space sviluppato da NTFSTool e integrato in NTFSTool Pro. Monta volumi NTFS, ext, exFAT e BitLocker su macOS. È un server NFSv4.0 che viene eseguito all'interno del processo del driver e non usa alcuna estensione del kernel.
- Devo installare macFUSE o FUSE-T per usare NTFSTool Pro?
- No. OpenMacFUSE, il livello di montaggio di NTFSTool, è incluso in NTFSTool Pro. Non dipende da macFUSE, da FUSE-T né da alcuna estensione del kernel e non devi mai avviare il Mac da Recupero di macOS per ridurre le impostazioni di sicurezza.
- Come si confronta OpenMacFUSE con FUSE-T in termini di prestazioni?
- Sullo stesso Mac e con lo stesso motore NTFS, calcolare il checksum di ogni file di un volume richiede 23 s con OpenMacFUSE contro 797 s con FUSE-T, e l'eliminazione di 10.000 file piccoli è da 6 a 9 volte più rapida. La lettura e la scrittura sequenziale di file grandi su dischi USB reali sono alla pari. L'uso di memoria di OpenMacFUSE resta tra 45 e 51 MB, contro i 200 MB–1 GB di FUSE-T.
- Che cosa succede se scollego un disco durante una scrittura?
- Il driver di OpenMacFUSE smonta il volume ed esce da solo in circa 0,5 s, quindi il Finder e le altre app non si bloccano. Il volume si monta normalmente quando ricolleghi il disco. Le scritture completate nell'ultimo secondo circa prima della interruzione dell'alimentazione potrebbero mancare; il contenuto degli altri file non viene toccato.
- Perché NTFSTool ha scritto un proprio livello di montaggio invece di usare un componente open source o di terzi?
- Il livello di montaggio determina velocità, uso di memoria e che cosa succede in caso di guasto. Con un'implementazione propria, NTFSTool può tracciare e correggere i problemi in un unico codebase e gestire insieme al motore del file system i comportamenti specifici di NTFS (distinzione tra maiuscole e minuscole, attributi nascosto e sola lettura, attributi estesi).
- OpenMacFUSE è open source?
- Sì. OpenMacFUSE è open source con licenza MIT e il codice è su GitHub all'indirizzo ntfstool/openmacfuse. Qualsiasi file system FUSE 2.x può collegarsi a OpenMacFUSE.
Tutti i dati di questo articolo sono stati misurati dal team di ingegneria di NTFSTool; la metodologia è nella sezione 7. FUSE-T è un progetto indipendente del suo autore e non è affiliato a NTFSTool. OpenMacFUSE è un progetto indipendente e non è affiliato a macFUSE né ai suoi autori.