去除字符串中的數字和標點符號和分詞

jieba分詞

參考博客：https://www.cnblogs.com/jiayongji/p/7119065.html

對scv的一列數據進行分詞：

t4 = ' '.join(jieba.cut_for_search(t3)) # 進行分詞
t4 = t4.strip()# 去除分詞結果前后的空格、\n等字符

去除字符串中的數字和標點符號

remove_digits = str.maketrans('', '', digits) # 去除數字
t1 = t1.translate(remove_digits)
trantab = str.maketrans({key: None for key in string.punctuation}) # 去除標點符號
t2 = t1.translate(trantab)