Preguntas etiquetadas con it.information-theory

Quería averiguar cuáles son algunas aplicaciones de SGT en el área de la teoría de la información y la codificación, y tal vez las comunicaciones. Lo más relacionado que me viene a la mente es el trabajo en los códigos de expansión Michael Sipser y Daniel Spielman, "Expander Codes", IEEE …

9 it.information-theory  coding-theory  spectral-graph-theory 

Estoy tomando un curso de posgrado en teoría de la información y constantemente me sorprende la cantidad de optimización convexa que hay en esta materia. Sin embargo, las pruebas parecen eludir el uso de toda la maquinaria de la teoría de la relajación, la dualidad, etc. Esto es comprensible ya …

9 reference-request  it.information-theory  convex-optimization 

Se le da una matriz binaria de tamaño .nortenn Quiero mostrar que ningún algoritmo puede hacer lo siguiente (o sorprenderse y descubrir que estos algoritmos existen después de todo): 1) Preprocese la matriz de entrada con tiempo ilimitado, pero solo con bits .O ( n )O(n)O(n) 2) Responda consultas en …

8 ds.algorithms  lower-bounds  it.information-theory 

Digamos que tengo una variable aleatoria de un bit , y que sea ​​un número natural. Quiero una secuencia de variables aleatorias stX∈{0,1}X∈{0,1}X \in \{0,1\}nnn0=X0,X1,…,Xn=X0=X0,X1,…,Xn=X0 = X_0, X_1, \ldots, X_n = X H(X | {X0,…,Xk})=1−knH(X | {X0,…,Xk})=1−knH\left(X~|~\{X_0,\ldots,X_k\}\right) = 1-\frac{k}{n} Es decir, cada adicional proporciona de la información de , hasta …

8 it.information-theory  shannon-entropy 

¿Cuáles son las aplicaciones de la complejidad de Kolmogorov en la teoría de números y en los campos relacionados con las pruebas? (La monografía de Li & Vitanyi no tiene muchas aplicaciones relacionadas con la teoría de números). Una de las buenas pruebas que he encontrado es la prueba de …

8 reference-request  big-list  it.information-theory  kolmogorov-complexity