Posts
帖修斯传：雅典奠基人
作为雅典国王，雅典城市的真正意义上的创建者，帖修斯无疑有很多值得大书特书之处。考虑到雅典的哲学、文化和民主制度对于后世的影响，评价帖修斯很大程度的影响了西方文化的走向也不为过。和所有年代的开国者一样，勇猛刚劲是他的特点，伊斯启卢斯有诗云： 英豪天下雄， 莫敢撄其锋。 成败安足论， 巍然王者风。
NLP读书笔记：第四章-语言学应用（概略）
这里讲述的主要是语言学早期的应用，应用主要包括以下几个方面：
PANet: 小改动带来大进步
这篇文章是目前进行图像实例分割的state of art，由于近期在刷kaggle上的WAD比赛，需要完成实例分割的任务，所以小刷了几篇论文，这是概述。
The Consciousness Prior: 构造意识－通往自由之路
首先非常抱歉我标题党了一把，盗用了哈耶克的著作名来换热度。在一般情况下，将一篇文章与未来发展方向结合起来往往会有夸大其辞的嫌疑。但是这篇文章比较特殊，一篇只有区区４页的论文却阐述了通往意识之路的途径。因为这篇文章的意义，我也会摒弃往日轻快随意的文风，非常严肃的来讨论这篇文章阐述的构建意识推理方面的问题。
Hinton与Capsule计划（第一部分：神经网络的诞生与文艺复兴）
几十年前，美国历史上最为（能）杰（撒）出（谎）的国务卿基辛格接受记者采访时曾被问及这样一个问题：“成绩出色的你为何没有选择留校任教？”基辛格给出了这样的回答：“学术圈的混乱情况使我向往中东地区关系的单纯。”虽有调侃的意味，却也道出了学术界派系争斗的残酷现实。而时下如火如荼的深度学习的发家史几乎可以说是这一情况最深刻的写照。为了能够全面的介绍Hinton及他宏大的Capsule计划，我们就有必要对深度学习（神经网络）的苦难发展史做一个简要的回顾。本文为第一部分，主要介绍早起情况及反向传播。
Infomation BottleNeck: 连Hinton都喜欢的文章
深度学习模型的黑箱特性是非常令人头疼的问题。目前的各种解释都是基于函数拟合或者统计模型，虽然看起来像是那么回事，但是距离一个清楚明了又通透的解释还有距离。最近希伯来大学的Tishby教授关于深度学习解释的一篇文章引起了大家的广泛兴趣，因为其所论证的Information BottleNeck模型提出了一种基于Markov Chain和信息论模型的解释，连Hinton都忍不住为该文章打起了广告。下面我们来对文章进行一下分析：