목차
1장 서론 = 1
1.1 정보란 무엇인가? = 1
1.2 무엇이 정보를 나르고 있는가? = 3
1.3 새논의 통신계 모델 = 5
2장 情報量 = 11
2.1 정보량의 정의 = 11
2.2 정보량의 가법성 = 15
2.3 무기억 정보원 = 20
2.4 엔트로피의 성질 = 25
2.5 무기억 정보원의 확대 = 32
2.6 점근적 등분배성 = 35
2.7 에르고딕성(ergodiciy) = 43
연습문제 = 44
3장 마르코프(Markov)정보원 = 47
3.1 마르코프 정보원 = 47
3.2 성규 마르코프 정보원 = 50
3.3 에르고드 마르코프 정보원 = 57
3.4 일반적인 마르코프 정보원과 차수 = 62
3.5 마르코프 정보원의 엔트로피 = 67
3.6 수반 정보원 = 71
3.7 언어모델 = 75
연습문제 = 79
4장 情報源의 符號化 = 81
4.1 정보원의 부호화 목적 = 81
4.2 부호의 분류 = 87
4.3 일의적으로 복호 불가능한 부호의 성질 = 90
4.4 순시에 복호 가능한 부호의 성질 = 92
4.5 크라프트(kraft)부등식 = 93
4.6 평균부호길이 = 96
4.7 무기억 정보원의 정보원 부호화 정리 = 101
4.8 허프만(Huffman)부호 = 103
4.9 새논·파노(Shannon·Fano)부호 = 107
4.10 길버트·무어(Gilbert·Moore)부호 = 109
4.11 런렝스(runlength)부호 = 111
4.12 부호의 효율 = 112
4.13 전신부호에 의한 부호화 = 113
연습문제 = 117
5장 通信路와 相互情報量 = 119
5.1 통신로 = 120
5.2 통신로의 여러 확률 관계 = 122
5.3 사전 엔트로피와 사후 엔트로피 = 127
5.4 상호정보량 = 128
5.5 상호정보량의 성질 = 130
5.6 무잡음 통신로와 확정적 통신로 = 134
5.7 통신로용량 = 137
연습문제 = 140
6장 通信路의 符號化 = 143
6.1 통신로 부호화 = 143
6.2 통신로 부호화 정리 = 145
6.3 2원 대칭 통신로에서 통신로 부호화 정리의 증명 = 149
연습문제 = 153
7장 에러정정부호 = 155
7.1 에러제어 = 155
7.2 에러정정 검풀의 원리 = 157
7.3 부호의 기하학적 표현 = 159
7.4 선형부호 = 164
7.5 선형부호의 군부호 성질 = 178
7.6 최대 사후확률 복호법 = 187
7.7 순회부호 = 194
7.8 순회부호의 예 = 204
연습문제 = 211
부록 : 엔트로피 함수 = 213
참고문헌 = 214
찾아보기 = 215