Alice
Project
首页
世界回放
世界观
版本日志
心智研究
EN
🧠 神经科学
神经科学基础
神经解剖
细胞与分子神经科学
系统神经科学
认知神经科学
计算神经科学
脑机接口
神经技术前沿
神经疾病
计算神经科学
Spiking 神经网络
预测编码
贝叶斯大脑
Hopfield 网络
Grid Cells
大脑强化学习
自由能原理
吸引子网络
神经群体动力学
漂移扩散模型
高效编码假说
归一化模型
突触可塑性模型
深度学习与大脑
储备池计算
房室模型
全脑建模
信息论与大脑
神经常微分方程
能量基础模型
目录
1. 基本量
2. 神经编码的 MI
3. 估计方法 + 偏差
4. Spike Train 信息
5. PyTorch — Mutual Information 估计
6. Fisher Information
7. Information Bottleneck (Tishby)
8. Redundancy + Synergy
9. 与 AI
10. Common Pitfalls
10.1 MI 估计无偏
10.2 高 MI = brain 用全部
10.3 Entropy = 信息量(语义)
10.4 IB 解释 DL 已定论
10.5 更多 bits = 更好编码
11. Related Concepts
References