Cуществуют достоверные методы оценки энтропии?

Пусть есть сообщение длинной m, и оно длинной n-бит.
Например: есть сообщение m, пусть длинна его nx10 [sup]5[/sup] бит, пусть источник сообщения m это сквантованный аналоговый сигнал, источник сигнала (напр. шумящий диод) случаен, какие способы специфического анализа мы можем применить чтобы оценить случайность этого шума?

Существуют ли точные способы оценки энтропии сообщения m при данных условиях?

P.S. точные, значит можно ли применить методы, алгоритмы или иные способы для точного или количественного определения данной случайности.

Спасибо.

Комментарии
— pgprubot (14/12/2015 18:32, исправлен 14/12/2015 18:33)   

Тесты:


Ссылки
[link1] https://en.wikipedia.org/wiki/Diehard_tests

[link2] https://en.wikipedia.org/wiki/Randomness_tests

[link3] http://csrc.nist.gov/groups/ST/toolkit/rng/index.html