sas 无词典分词 能实现否？

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

网上找到一篇无词典的分词算法介绍，展示的结果还算不错：

http://www.matrix67.com/blog/archives/5044


想请教，用sas可以实现该算法么？

求指点主要函数、过程......

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏1 回帖

关键词：matrix67 Archive matrix Hives Blog 词典

找一天仔细看看

非常好的东西,这个方向值得搞,但是否真的新的,值得验证

好东西，对于非结构的数据，文本的分词基础而又至关重要

爱萌 发表于 2014-2-18 12:51
非常好的东西,这个方向值得搞,但是否真的新的,值得验证

应该不会算很新。

基于统计的语义识别应该有很多成果了……

这个方法好在门槛不高。编程经验稍多点应该可以用其它语言搞定，能找到python版本的。
------
我只会用sas粗爆的把 一起出现频率高的词提取出来，不会用文章介绍的 一些指标剔除无义词~~~相信有高手可以用sas实现这一过程。

顶一下，正好有个项目作业要搞，我试试