假如中文也有空格分词就好了

2016-06-02 00:40:40 +08:00
 sensui7
近来看到不少英文文字相关的东西, 如果给中文用上必然很好, 可惜是不可能的, 中文分词再精准, 也只能是专门的领域, 无法在生活中应用, 否则肯定竟然遇到尴尬的时候, 这点真的可惜了.
6439 次点击
所在节点    奇思妙想
54 条回复
kkzxak47
2016-06-02 00:48:18 +08:00
中文 分词 从 我 做起
binux
2016-06-02 01:07:05 +08:00
可以用 character based 啊
YUX
2016-06-02 01:54:21 +08:00
可以用 Jieba /Python
maemolee
2016-06-02 02:07:25 +08:00
最近一个报纸的标题：儿子生性病母倍感骄傲。
一般来说的分段方式是：儿子生性病，母倍感骄傲。
然而正确分段方式是：儿子生性，病母倍感骄傲。

说明断句在多元文化融合的今天，是有多么的重要。
v2014
2016-06-02 06:34:47 +08:00
有空格多浪费纸啊，现在有大数据，根据上下文统计下概率，基本上也就很准确了，再说有的人断句也是不正确的，
就和楼上说的一样，很多人第一眼肯定是第一种断法，感觉不对，才有第二种断法，现在机器分词就差这种改正了。
243205964
2016-06-02 08:02:21 +08:00
我记得在微博上，小娜 一直在分词，一开始我还奇怪，知道看到此贴。
cbais7890
2016-06-02 08:25:03 +08:00
@maemolee 一看就是广东报纸的标题, 哈哈哈哈
bugeye
2016-06-02 08:31:53 +08:00
中文使用空格的话，不如灭绝算了。 4 楼那个根本不是规范可读的中文，英语写的差，一样不可读不可交流。
crysislinux
2016-06-02 09:07:47 +08:00
@bugeye 就是。什么叫“儿子生性”。活了这么多年都不知道这是啥意思
Nothentai
2016-06-02 09:10:01 +08:00
@crysislinux
生性在广东话里面就是 懂事乖巧的意思
yeyeye
2016-06-02 09:10:31 +08:00
@maemolee 我就是那种不会分词的…… 常常搞不懂对方什么意思……或者一错字就完全理解不了句子……常常都是……
mrjoel
2016-06-02 09:18:26 +08:00
记得中文连标点系统都没有的时代嘛
sensui7
2016-06-02 10:42:31 +08:00
@Nothentai 东北话, 生性一般形容人比较野蛮(类似动物的),
ChaosPark
2016-06-02 10:46:37 +08:00
句读之不知
imcoddy
2016-06-02 10:46:53 +08:00
这不光是空格就能解决的问题吧，比如这个：
人生要经历四个阶段
喜欢上一个人
喜欢上一个人
喜欢上一个人
喜欢上一个人
yuanlai
2016-06-02 10:49:11 +08:00
@sensui7
@Nothentai

所以，中文还得分东北话和广东话，以后说中文之前，先写声明了?

<!DOCTYPE 中文>
<中文 lang="东北话">
<meta charset="沈阳">
<!DOCTYPE html PUBLIC "-//PuTongHua//DTD XHTML 1.0 Transitional//中文" "http://www.普 putonghua.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.zhongwen.org/1999/xhtml">
jsonline
2016-06-02 10:49:12 +08:00
中文的乐趣不就在这里嘛……
sarours
2016-06-02 10:50:36 +08:00
看完评论，感觉还是古文比较好懂，因为大部分都是意会。外文在我看来跟文言文是一个套路
stcasshern
2016-06-02 10:52:15 +08:00
@sarours 古文连标点都没有。。也不好懂。。。
ChaosPark
2016-06-02 10:52:22 +08:00
中文添加空格分词对人来说实用性有限，刚才和同事聊天，同事说：典型的程序员思维，让人去适应计算机。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/282853

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX