theatheaticaltheoryofunication。
“1948年,香农发表了论文《通信的数学理论》,一年后,当它出版成册时,标题发生了变化,虽然只是一个单词,但意义巨大,从此以后,它成为所有科学文章中引用最多的论文之一,并由此诞生了信息论。”
“香农?”
“高一数学有提到。”
“我一点印象都没有……”
“你是不是数学不好?”
“嗯qaq”
他笑了一下,说:“香农想知道信息是怎么传递的,这篇论文第一章的第六小节,他给出了信息熵的公式,成功量化了信息。”
程霆的讲述深入浅出:“信道就是信息传输的通道,比如光纤、电缆、无线电。我们把信息假想成水,那信道就是水管,信道容量就是水管单位时间内能传输的水量。
如果想象成车,信道就是车道,车道拥堵,也就好比上网卡顿,网速慢。”
小姑娘点点头,表示听懂了。
程霆问她:“什么是好的通信?”
“快?”
“是接收到的信息和对方发送的一模一样,不会漏掉哪个词让你听不懂。”
“香农给出了信道容量的公式,我们将这称之为香农极限。香农极限就像光,几十年来人们努力靠近,几乎达到但还没有。而arikan教授倾尽一生,通过极化码达到了香农极限。
“极化码?”
“简单来说,通过异或的特性,增加信道,当信道足够多,将有效信息都编码在好信道里,舍弃无用的差信道,信息就能无损,而整个通信模型的信道容量刚好就是香农极限。”
“这个通过牺牲部分信道来提高整体传输率的过程,就是极化。”
他看着她:“如果你听懂了我的话,我们就是一次好的通信。”
林葵伸手,戳戳他的手背:“biubiu,接收良好。”
作者有话说:
1
香农,通信祖师爷,1948年发表的论文《通信的数学理论》,从此才有了信息论这个专业,他开启了一个学科。
(同志们,世界的尽头是数学。)
而香农在开创信息量之前,就留下了被誉为二十世纪最高水平的硕士论文——
《继电器与开关电路的符号分析》
被视作今天计算机最底层设计的开端。
简单来说,香农也是计算机的开拓者。
通信原理的抽象公式基本都有香农的贡献,对传播学最大的贡献是引入了反馈这个词,