脉冲神经网络与管理学及人生
发布时间:2020-10-21 栏目:感悟 评论:0 Comments
自从离开英特尔之后,深感人生不易,竞争激烈。当然也可能是因为在大城市,节奏快,或者是因为在软件行业,亦或者是因为在中国这样一个高速发展的发展中国家,竞争、淘汰等都是常态。好在一条赛道失败并不会决定人生的全部,还有机会继续在其它赛道做尝试。
最近越来越觉得脉冲神经网络的机制,与人类社会运行机制很相似。脉冲神经网络的Hebb学习准则,每个神经元之间都在竞争,最终会选择领先的神经元,对其权重不断强化,而落后的神经元,其权重则会被不断弱化,直到…深度学习中也会有的、常见的模型压缩或者优化方法之一:稀疏化,也就是消除无用或者作用微弱的神经元,使之不容易过拟合、并且减少耗能。从这点来看,跟公司裁员、所谓的组织优化也很类似,可以减少公司的开支、并且使公司运行更加顺畅快捷。相对的,公司也会不断提拔表现好的人员,promotion等,强化其权重,也类似于神经网络中的强化神经元的权重了。
从个体的角度来说,对这种机制有时心里还是比较难以接受,但是从群体,特别是进入管理者的角色后,又会觉得这是必要的,内心难免矛盾,不过这就是人生吧!
即便是对深度学习来说,每一个神经元,其学习训练过程,都是在不断的学习做决定,特别是最后一层神经元,其决定最终会决定整个网络的好坏。这也像公司的管理层,主要工作都是在做大大小小的决定,其本身做的实质的工作越往上层约少了,越高层越主要是在做决定了。
虽然Hebb准则这种人类社会与自然界中都存在的法则很残酷,但是这确实是自然的法则,我们每个人来到这个世上、或者说我们体内的基因存续万年乃至更久至今仍未完全消逝,某种意义上都是经历了重重关卡,我们都是Hebb准则的某种成功者或者受益者,只是当我们又作为一个整体出现在人类社会中、或者说一个公司或者学校的小社会中时,是否能继续成功下去,又变得机会很小了。
留下评论
You must be logged in to post a comment.
近期评论
- Pika发表在《莫里斯蠕虫(Morris Worm)》
- Pika发表在《多组学科研分析》
- crisy发表在《最近关于专利的一点感想》
- walter发表在《机器学习基础知识回顾-马尔科夫过程(Markov Process)》
文章归档
- 2024年3月
- 2024年2月
- 2023年12月
- 2023年11月
- 2023年10月
- 2023年9月
- 2023年8月
- 2023年7月
- 2023年6月
- 2023年5月
- 2023年4月
- 2023年3月
- 2023年2月
- 2023年1月
- 2022年12月
- 2022年11月
- 2022年9月
- 2022年8月
- 2022年7月
- 2022年6月
- 2022年5月
- 2022年3月
- 2022年2月
- 2022年1月
- 2021年12月
- 2021年11月
- 2021年10月
- 2021年9月
- 2021年8月
- 2021年7月
- 2021年6月
- 2021年5月
- 2021年4月
- 2021年2月
- 2021年1月
- 2020年12月
- 2020年11月
- 2020年10月
- 2020年8月
- 2020年7月
- 2020年6月
- 2020年5月
- 2020年4月
- 2020年3月
- 2020年2月
- 2019年7月
- 2019年5月
- 2019年3月
- 2019年1月
- 2018年6月
- 2018年5月
- 2018年4月
- 2018年3月
- 2018年2月
- 2017年11月
- 2017年7月
- 2017年6月
- 2017年5月
- 2017年3月
- 2016年12月
- 2016年11月
- 2016年10月
- 2016年9月
- 2016年8月
- 2016年7月
- 2016年6月
- 2016年5月
- 2016年4月
- 2016年3月
- 2016年2月
- 2016年1月
- 2015年12月
- 2015年11月