统计方法 | 浩然东方

2016编程语言最受欢迎排行榜

　　IEEE Spectrum出品的＂最受欢迎编程语言排行榜＂的第三张榜单出炉了．尽管不可能统计到每一个程序员的喜好，Spectrum从10个数据来源选取了12个维度来表示编程语言受欢迎的程度．然后综合12个维度的评价得出最后的榜单．由于每个人看重的方面不一样，比如你可能关系开源社区哪些编程语言最火？他可能关心工作的人最喜欢哪些语言？Spectrum允许你自由调整构成榜单结果的每个维度的权重．你也可以根据选...

2017年03月20日业界资讯, 编程开发暂无评论喜欢 0 阅读 5,016 次阅读全文

什么是中文分词？

众所周知，英文是以词为单位的，词和词之间是靠空格隔开，而中文是以字为单位，句子中所有的字连起来才能描述一个意思。例如，英文句子I am a student，用中文则为：“我是一个学生”。计算机可以很简单通过空格知道student是一个单词，但是不能很容易明白“学”、“生”两个字合起来才表示一个词。把中文的汉字序列切分成有意义的词，就是中文分词，有些人也称为切词。我...

2008年12月17日未分类暂无评论喜欢 0 阅读 1 次阅读全文

百度中文分词技术

[tags]分词方法,seo,中文分词技术,基于字符串匹配,分词算法,基于理解,基于统计[/tags] 中文分词技术英文是以词为单位的, 词和词之间是靠空格隔开, 而中文是以字为单位, 句子中所有的字连起来才能描述一个意思。例如, 英文句子 “ I am a seoer” , 用中文则为: “ 我是一个搜索引擎优化师” 。计算机可以很简单通过空格知道 seoer是一个单词。但是不能很容易明白“ 搜索引擎” 、 “ 优化师” 几个个字合起来才表...

2008年12月17日学习随笔暂无评论喜欢 0 阅读 1 次阅读全文

中文分词技术的调研

中文分词的背景 l 什么是中文分词众所周知，英文是以词为单位的，词和词之间是靠空格隔开，而中文是以字为单位，句子中所有的字连起来才能描述一个意思。例如，英文句子“I am a student”，用中文则为：“我是一个学生”。对于英文句子，计算机可以很简单通过空格知道“student”是一个单词，但是对于中文句子而言，不能很容易明白「学」、「生」两个字合起来才表示一个词。把中文的汉字序列切分成...

2008年12月03日学习随笔暂无评论喜欢 0 阅读 1 次阅读全文