Python加载自定义词典与停用词代码示例
本文提供Python加载自定义词典及停用词的代码实现。通过遍历文件并按空格分割键值对,将数据存入字典。同时演示如何读取停用词文件,去除空白字符后构建停用词集合,便于文本处理场景使用。
Python加载自定义词典与停用词代码示例
具体实现方式如下所示:
#加载词典
def load_dict_from_file(filepath):
_dict = {}
try:
with io.open(filepath, 'r',encoding='utf-8') as dict_file:
for line in dict_file:
(key, value) = line.strip().split(' ') #将原本用空格分开的键和值用冒号分开来,存放在字典中
_dict[key] = value
except IOError as ioerr:
print("文件 %s 不存在" % (filepath))
return _dict
#加载停用词词典
def stopwordslist(filepath):
stopwords = {}
fstop = io.open(filepath, 'r',encoding='utf-8')
for line in fstop:
stopwords[line.strip()]=line.strip()
fstop.close()
return stopwords
以上关于Python加载自定义词典的实例内容分享完毕,旨在为读者提供参考,欢迎持续关注本站获取更多技术资讯。
本站声明
本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。













