$

Punti principaliNei grandi sistemi di elaborazione dati, un eccesso di file di piccole dimensioni può diventare un problema di affidabilità in produzione, aumentando il carico sui metadati, amplificando le letture, aumentando la latenza nella coda e causando fallimenti dei processi.Small File Doctor è il framework interno di Binance che trasforma il processo di pulizia dei file di piccole dimensioni, passando da script sparso a un sistema controllato, riducendo i file di piccole dimensioni da circa 59 milioni a 2,9 milioni e risparmiando circa tra 90.000 e 100.000 dollari all'anno in costi di elaborazione e archiviazione.L'obiettivo principale del design è rendere l'ottimizzazione dei file sicura per essere eseguita in continuo in produzione, concentrandosi solo sugli interventi che migliorano in modo misurabile la latenza, la stabilità e i costi.