【一日一parsing：修饰语的组合爆炸挑战】

李维 2018-4-1 13:31

中文合成词、术语命名可以很长很长，如果顾及内部的修饰关系的边界，是一种典型的结构歧义的组合爆炸。排列组合算一算，N个修饰语有多少种结构歧义？ 怎么整？其实，人对于这种超长短语的理解，也基本上是糊里糊涂听，对于里面潜在的歧义无感居多。那机器去做呢，两个办法，一个是凑合大局，不拘小节，出个 deter ...

个人分类: 立委科普|3837 次阅读|没有评论

【李白98：从对联和孔子遗言看子语言自动解析】

李维 2018-3-7 17:34

李： 微信群转来的，想，配个图吧。 做自动解析（parsing）走火入魔，几乎成本能了。凡是人说难度极大，或者盛赞中文奇妙的语录，都忍不住想 parse parse 试试，到底看看离形式化自动化分析距离究竟有多远：稀奇古怪的句子其实不是自动系统的关注点，但它们往往像疲劳测试一样，可以把问题推向极端，考验自动解析的鲁棒 ...

个人分类: 立委科普|5229 次阅读|没有评论

【李白91：休眠唤醒需要打离婚证】

李维 2018-3-7 16:07

李: 以前说过，local n元组搞定分词，通常认为n等于5足够（5-gram 平天下，见 【李白71：“上交所有不义之财！”】 ）。今天有个例子，可以看看 bigram trigram and 10+ gram 的各自说法: 这所以自由 时尚 叛逆和反潮流著称的学校 连塔也不得雍容。 Bigrams： 这所 所以 …… trigram： 这所以 …… 10+ gram： ...

个人分类: 立委科普|2719 次阅读|没有评论

【李白92：自然语言漏得筛子似的】

李维 2018-3-7 16:06

李: 火车上要注意安全，贵重物品随身带，行李箱放在能看到的地儿哈！贼春节不放假 乍看 以为贼是修饰语 一愣 还有骂春节的呢。要是改成小偷就好了： “小偷春节不放假” 。 严格说 放假是个复合概念 它挖了两个坑： 【谁1】 给 【谁2】 放假，就是 【谁1】 放 【谁2】 的假。小偷是谁1 还是 谁2 呢？好像既是谁1也是谁 ...

个人分类: 立委科普|3061 次阅读|没有评论

【李白95：走在路上……】

李维 2018-3-7 16:04

李: 走在路上，琢磨句法的事儿。 句法任务如果要分解的话，可以这样来看： 1. 谁与谁发生关系？ 2. 关系中谁主谁副？ 3. 发生关系的次序。 4. 发生什么关系：进一步可分 4a）词法的；4b）句法的；4c）（逻辑）语义的； 4d）话语的（discourse：譬如 话题）；4e）领域的（譬如 IE）。 自然，到了领域，其实已经超越了句 ...

个人分类: 立委科普|2764 次阅读|没有评论

【李白96：想哪扯哪，不离其宗】

李维 2018-3-7 16:02

白: “《舌尖3》被骂看了吃不下饭，不如来吃炭烧牛蛙吧” 看见了“如来”。 李: 不是问题 trigram 搞定的事儿 : 不如/来。 难的是， 如来请打的 不来也没问题。 要不如来 要不活佛 总之是神就行。 其实，“如来请打的”（if coming please call a taxi）并不能完全排除“如来（佛）”义，虽然语用层面可能性 ...

个人分类: 立委科普|3296 次阅读|没有评论

【李白97：大S小S句式中插入“的”所引起的交叉陷阱】

热度 1 李维 2018-3-7 16:00

李： 大S小s 即所谓双主语句，又叫话题句、主谓谓语句，是中文文法非常著名的现象，与西方语言很不同的一种句式。例如： 她个儿高 盘儿靓 心眼儿还特好 “她”是主语 是话语研究（discourse study）中的话题（topic），谓语的内部结构里面还有个小主语，所以叫主谓谓语（主谓结构整体做谓语）。中文里面特常见，翻译成 ...

个人分类: 立委科普|9527 次阅读|1 个评论 热度 1

本页有 3 篇博文因作者的隐私设置或未通过审核而隐藏