Neural Network Verification for Deep Joint Source-Channel Coding
En palabras de los autores
Deep joint source-channel coding (DeepJSCC) transmits data end-to-end over wireless channels using a neural encoder-decoder, but reconstruction quality can degrade sharply under adversarial perturbations and channel disturbances; no method formally bounds this degradation for DeepJSCC. We present the first bound-propagation framework for verifying DeepJSCC's decoder, bounding worst-case reconstruction error over a given wireless channel's noise region. Current deep neural network (DNN) verifiers do not support three DeepJSCC decoder components: parametric rectified linear activations (PReLU), transposed convolutions, and Rayleigh fading. We extend state-of-the-art techniques for optimization of linear relaxation in DNN verification for PReLU, replace the transposed convolution with its restricted upsample-then-convolution form, and formulate Rayleigh fading as a structural perturbation prepended directly into the decoder, thereby reducing the dimensionality of the verification problem. We also instantiate Lipschitz-regularized global robustness training, denoted GloRo, improving global robustness and enabling tight certification of DeepJSCC models for the first time. On DeepJSCC model for image transmission, this global robustness training procedure combined with structural encoding lowers the median certified bound by up to 41% and certifies about ten times more safe cases (192 against 19) than GloRo with interval encoding at a 10-degree error in channel estimation. Over-the-air validation with an orthogonal frequency-division multiplexing (OFDM) implementation on software-defined radio devices confirm the certificate holds on real hardware, with a worst observed error on radio link at 0.082 against a certified bound of 0.128.
En palabras simples Resumen con IA
La codificación profunda conjunta de fuente y canal usa redes neuronales para enviar datos de forma inalámbrica, pero la calidad de reconstrucción puede caer abruptamente bajo ataques y ruido del canal. Los autores crearon el primer método para acotar formalmente el error de reconstrucción en el peor caso para este sistema. Adaptaron técnicas existentes de verificación para manejar tres componentes desafiantes: activaciones lineales rectificadas paramétricas, convoluciones transpuestas y desvanecimiento de Rayleigh. También usaron entrenamiento de robustez global regularizado por Lipschitz, que mejoró la robustez y habilitó la certificación ajustada por primera vez. En modelos de transmisión de imágenes, su enfoque redujo las cotas certificadas medianas hasta en un 41% y certificó aproximadamente diez veces más casos seguros que métodos previos. Pruebas del mundo real en hardware de radio confirmaron que los certificados se mantienen, con el peor error observado en 0.082 contra una cota certificada de 0.128.
Escrito por Kimi K2.5 usando solo el abstract de arriba. Jev verificó que cada oración esté respaldada por las oraciones del abstract que cita y eliminó las que no. Pasá el cursor por una oración para ver de dónde sale.
Apareció: viernes, 9 de octubre. arXiv. Preprint, todavía sin revisión por pares.