Predictive Coding NN — это специализированная языковая модель, разработанная для сверхэффективного сжатия текстовых данных. Нейросеть предсказывает вероятность появления следующего символа, передавая данные стандартным алгоритмам кодирования для минимизации веса файлов. Яркий пример того, как ИИ оптимизирует хранение и передачу информации в современных системах.
To compress text files, a neural predictor network P is used to approximate the conditional probability distribution of possible "next characters", given n previous characters. P's outputs are fed into standard coding algorithms that generate short codes for characters with high predicted probability and long codes for highly unpredictable characters. Tested on short German newspaper articles, our method outperforms widely used Lempel-Ziv algorithms (used in UNIX functions such as "compress" and "gzip").