Calculadora de entropía de Shannon según recuento de símbolos
Calcular la entropía empírica, el soporte observado y los límites de codificación ideales de los conteos de símbolos etiquetados.
SU CÁLCULO
Resultado
—
Pasos del cálculo
Trabaje a través de un paso a la vez o revele el cálculo completo. Los pasos utilizan sus entradas actuales.
Cómo calcular
Normalizar los conteos a probabilidades empíricas y suma − p log 2 p sobre conteos positivos. Compare esta información media con la entropía uniforme y la codificación de ancho de fijación para el soporte observado.
H=−Σp log2 p; uniform maximum=log2(K); fixed width=ceil(log2(K))
Ejemplo resuelto
Los contadores 50, 25, 25 dan probabilidades 0.5, 0.25, 0.25 y entropía 1.5 bits / símbolo. Un código de ancho fijo para tres símbolos observados necesita dos bits por símbolo antes de arriba.
Suposiciones y detalles de entrada
Zero- order modelo de símbolo empírico; las etiquetas son únicas y los conteos no son números enteros negativos. Las etiquetas Zero- count están excluidas del soporte observado. Un símbolo observado tiene una entropía cero y un fixedwidth matemático de cero cuando el soporte ya es conocido. Estas cifras no son un tamaño de archivo comprimido garantizado o un ensayo aleatorio / de seguridad. Hasta 200 etiquetas.
Referencias: Universidad de Huertos: Intropía Shannon de una distribución discreta
Usando esta calculadora
¿Puedo entrar en mi propio problema?
Sí. Sustitúyase los valores de ejemplo por sus propias entradas. El resultado, los pasos de cálculo, los cuadros y los diagramas aplicables se actualizan a partir de esos insumos. Los valores blanks o inválidos despejan el resultado; los valores de ejemplo nunca se sustituyen silenciosamente por los insumos que faltan.
¿Los resultados son exactos?
Los resultados utilizan la aritmética de un punto flotante y se muestran redondeados. Leer la fórmula, suposiciones y cualquier precisión de los datos antes de interpretar el resultado.
¿Mi entrada está cargada?
El cálculo se ejecuta en su navegador. No se requiere cuenta, carga de archivos o servicio AI externo. Las entradas no se guardan entre recargas de página.
Cuenta UTF -8 bytes, UTF -16 unidades, puntos de código Unicode y grupos de grafito con transformaciones explícitas de texto.
Introduzca resultados discretos y sus probabilidades de calcular el valor esperado, expectativas netas tras un coste fijo y propagación de los resultados.
Interpolar dos quaternions de rotación a lo largo del arco unit-quaternion más corto.
Espacio reservado para publicidad.