科学网

 找回密码
  注册
搜索
热搜: 科学 论文
搜索
置顶 · 应邀发表了一篇科学哲学长文:P-T概率框架用于语义通信,证伪,确证和贝叶斯推理
热度 1 2020-10-6 14:15
这篇文章英文版应Philosophies的特刊Logic anf Science的客座编辑Dr. Fabien Paillusson的邀请而写(不收版面费)。他邀请我是因为看到我发表在Entropy上关于确证的文章: https://www.mdpi.com/1099-4300/22/4/384 . 应邀文章是一个大统一文章: 1. 统计和逻辑的统一 ———了解人工智能中统计学派和逻辑学派的 ...
个人分类: 信息的数学和哲学|1240 次阅读|5 个评论 热度 1
Shannon两篇文章可下载
鲁晨光 2020-11-28 04:29
香农1948年的开创文章: http://people.math.harvard.edu/~ctm/home/text/others/shannon/entropy/entropy.pdf 香农1959年关于信息率失真和数据压缩的文章: https://mast.queensu.ca/~math474/shannon59.pdf 香农其他文章: https://scholar.google.com/citations?user=2M6S-aAAAAAJhl=en 笔者的语义 ...
个人分类: 信息的数学和哲学|651 次阅读|没有评论
从我的投稿经历看为什么科学院也要成立哲学所
热度 6 鲁晨光 2020-10-24 02:40
我以为主要原因是要加强科学哲学研究,特别是要科学研究和哲学研究并行, 而不是一部分人搞科学研究, 另一部分人搞(科学的)哲学研究(这种研究也是需要的, 但是是不够的)。虽然中国有科学哲学期刊,比如:自然辩证法研究, 自然辩证通讯, 科学技术哲学研究。 详见: https://wenku.baidu.co ...
个人分类: 信息的数学和哲学|1701 次阅读|31 个评论 热度 6
关于确证和乌鸦悖论的英文终于发表了
鲁晨光 2020-8-18 11:18
确证目的是评价一个大前提的可信度。 比如: “如果x是乌鸦, 则x是黑的”; “如果医学检验呈阳性, 则被检者有病”; “春雾雨, 夏雾热,秋雾凉风, 冬雾雪”(多个大前提)。 流行的确证度公式有很多。哪个合理,存在长期争论。 乌鸦悖论是因为: 在经典逻辑中“如果x是乌鸦,则x是黑的”(大前 ...
个人分类: 信息的数学和哲学|727 次阅读|没有评论
信道确证和预测确证——从医学检验到乌鸦悖论
鲁晨光 2020-2-2 01:04
这是关于归纳和确证的完整文章。原来解释医学检验和乌鸦悖论需要两种不同确证测度。新的确证测度c*终于能清晰澄清确证悖论即乌鸦悖论。两个确证测度竟然和Popper的证伪理论兼容,这再好不过了。由来已久的归纳和证伪问题终于得到相互协调的解释。 全文见: http://www.surv ...
个人分类: 信息的数学和哲学|645 次阅读|没有评论
发表了一篇英文长文:语义信息G理论和逻辑贝叶斯推理for统计学习
热度 1 鲁晨光 2019-8-21 01:04
这是我近五年研究的总结, 也基于我以前的研究结果。 发表的期刊是:Information: https://www.mdpi.com/journal/information 文章是: https://www.mdpi.com/2078-2489/10/8/261 英文open access 期刊, 不限长度。 我用的方法——语义信息方法——与众不同, Information正好适合我。同行评论要过两关,要老实按re ...
个人分类: 信息的数学和哲学|1677 次阅读|2 个评论 热度 1
用第三种贝叶斯定理求多标签分类——有简单方法何必用复杂的?
鲁晨光 2018-6-12 12:01
作者以前研究语义信息论,最近研究了多标签分类基本方法,觉得,从语义通信的角度 看, 结合已有的方法,应该能得到更简单更合理的方法。下面是最近研究的一个总结。、 本文使用交叉熵方法,即用样本分布代替样本序列。 参考文献:  Wikipedia 的多标签学习介绍: https://en.wikipedia.org/wiki/M ...
个人分类: 信息的数学和哲学|1871 次阅读|没有评论
我捡到大漏了——发现混合模型收敛严格证明方法
热度 1 鲁晨光 2018-4-2 13:11
我一直说EM算法收敛证明有问题,我把它改进为CM算法。我以前提供的CM算法收敛证明要比EM算法的收敛证明好得多,但是还不严格。 现在发现,采用分析Shannon的信息率失真函数用到的变分和迭代方法,可以严格严格证明CM迭代方法收敛。 EM算法的问题和CM算法收敛证明详见: http://survivor99.com/lcg/CM/EMwayout.pd ...
个人分类: 信息的数学和哲学|2749 次阅读|2 个评论 热度 1
一个新的数学框架用于机器学习——挑战流行的贝叶斯主义推理...
鲁晨光 2018-3-14 00:58
我想写一篇《一个新的数学框架用于机器学习——挑战流行的贝叶斯主义推理》, 在人工智能会议上交流。这里是一个提要, 希望赢得知音, 得到知音支持,从而有机会大会发言。 最近两年多, 我一直在努力用语义信息方法改造挑战流行的Bayesian Inference方法。语义信息方法包括: 1)语义信息准 ...
个人分类: 信息的数学和哲学|1937 次阅读|没有评论
交叉熵是谁最早提出和应用的?
鲁晨光 2018-3-1 14:31
交叉熵 (cross-entropy, 或 CE) 最简单形式就是 H=-∑P(xi)logP(xi|θ). log 后面是似然度或预测的概率。下面是 wikipedia 介绍: https://en.wikipedia.org/wiki/Cross_entropy 我在一个群里说,人工智能需要一个像物理学中“能量”那样的贯穿很多公式的概念,这个概念应该是信息。我用语义信息方法优 ...
个人分类: 信息的数学和哲学|4555 次阅读|1 个评论

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2021-1-22 08:34

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部