Repository navigation
perf(denoise): DFN3 en lot sur GPU Metal, identique au bit au CPU commun - #272
Merged
Merged
Conversation
…gs, identique au bit au CPU commun Opt-in SARAGOSSA_DENOISE_GPU=1 pour saragossa enhance : convolutions et linéaires en lot, GRU en noyau persistant (11,4 µs/pas), sans fast-math ni FMA. exp/tanh/sigmoïde communes (exact_math) côté CPU et GPU ; le CPU par défaut garde la libm. Clip de 293 s : 1,9 s contre 12,65 s sur CPU, sortie identique au bit à la variante CPU commune (SNR 135 dB contre la libm).
…in GPU DFN3 Corrige needless_borrows_for_generic_args (clippy de la CI). Enc::gru prend une première séquence obligatoire, le rejeu documente son invariant, Ctx::new vérifie couches et sorties linéaires des GRU, la bibliothèque Metal est compilée une fois par processus. NOTE sur la division et les sous-normaux ; last_lsnr vaut 0 sur le chemin GPU.
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
Débruitage hors ligne (
saragossa enhance) avec le réseau DFN3 sur Metal, opt-inSARAGOSSA_DENOISE_GPU=1. Le défaut CPU ne change pas.src/denoise/gpu.rs: convolutions, 1×1, transposées et linéaires groupées en lot sur des morceaux de 4096 pas (6 pas de contexte en tête). Chaque GRU parcourt toute sa boucle temporelle dans un seul noyau (un threadgroup de 768 threads) ; les GRU ERB et DF tournent côte à côte. STFT, features et synthèse restent sur CPU.Conv::forward), avecfast_math=falseet#pragma METAL fp contract(off).exp,tanhet la sigmoïde passent parexact_math, implémenté à l'identique en Rust et en MSL.Math::Common(enhance_common) sert de référence au GPU. Elle n'est pas activée par défaut.Mesures (M5 Max, clip de 292,75 s, charge entre 5 et 15, donc non publiables comme bench) :
enhanceGPU : 1,9 s, dont 1,2 s de réseau GPU (CPU 1 thread : 12,65 s, nuit du 17) ;Tests :
gpu_enhance_is_bit_exact_against_cpu_common_math(synthétique, frontières de morceau, s'exécute dès qu'un GPU est présent) ;dfn3_gpu_gru_step_probeetdfn3_gpu_long_file_bit_exact_and_speed.🤖 Generated with Claude Code