午夜视频免费看_日韩三级电影网站_国产精品久久一级_亚洲一级在线播放_人妻体内射精一区二区三区_91夜夜揉人人捏人人添红杏_91福利在线导航_国产又粗又猛又黄又爽无遮挡_欧美日韩一区在线播放_中文字幕一区二区三区四区不卡 _日日夜夜精品视频免费观看_欧美韩日一区二区三区

主頁 > 知識庫 > Python中文糾錯的簡單實現

Python中文糾錯的簡單實現

熱門標簽:預覽式外呼系統 銀川電話機器人電話 電銷機器人錄音要學習什么 外賣地址有什么地圖標注 企業彩鈴地圖標注 上海正規的外呼系統最新報價 如何地圖標注公司 煙臺電話外呼營銷系統 長春極信防封電銷卡批發

介紹

這篇文章主要是用 Python 實現了簡單的中文分詞的同音字糾錯,目前的案例中只允許錯一個字,自己如果有興趣可以繼續優化下去。具體步驟如下所示:

  • 先準備一個文件,里面每一行中放一個中文分詞,我這里的文件是下面代碼中的 /Users/wys/Desktop/token.txt ,你們可以改成自己,再運行代碼
  • 將構建一個前綴樹類,實現插入功能,將所有的標準分詞都插入到前綴樹中,另外實現一個搜索功能,用來搜索分詞
  • 將輸入的錯誤分詞中的每個字都找出 10 個同音字,將每個字都用 10 個同音字替換,結果可以最多得到 n*10 個分詞,n 為分詞的長度,因為有的音可能沒有 10 個同音字。
  • 將這些分詞都經過前綴樹的查找,如果能搜到,將其作為正確糾正就過返回

代碼

import re,pinyin
from Pinyin2Hanzi import DefaultDagParams
from Pinyin2Hanzi import dag

class corrector():
    def __init__(self):
        self.re_compile = re.compile(r'[\u4e00-\u9fff]')
        self.DAG = DefaultDagParams()

    # 將文件中的詞讀取
    def getData(self):
        words = []
        with open("/Users/wys/Desktop/token.txt") as f:
            for line in f.readlines():
                word = line.split(" ")[0]
                if word and len(word) > 2:
                    res = self.re_compile.findall(word)
                    if len(res) == len(word): ## 保證都是漢字組成的分詞
                        words.append(word)
        return words

    # 將每個拼音轉換成同音的 10 個候選漢字,
    def pinyin_2_hanzi(self, pinyinList):
        result = []
        words = dag(self.DAG, pinyinList, path_num=10)
        for item in words:
            res = item.path  # 轉換結果
            result.append(res[0])
        return result

    # 獲得詞經過轉換的候選結結果
    def getCandidates(self, phrase):
        chars = {}
        for c in phrase:
            chars[c] = self.pinyin_2_hanzi(pinyin.get(c, format='strip', delimiter=',').split(','))
        replaces = []
        for c in phrase:
            for x in chars[c]:
                replaces.append(phrase.replace(c, x))
        return set(replaces)

    # 獲得糾錯之后的正確結果
    def getCorrection(self, words):
        result = []
        for word in words:
            for word in self.getCandidates(word):
                if Tree.search(word):
                    result.append(word)
                    break
        return result

class Node:
    def __init__(self):
        self.word = False
        self.child = {}


class Trie(object):
    def __init__(self):
        self.root = Node()

    def insert(self, words):
        for word in words:
            cur = self.root
            for w in word:
                if w not in cur.child:
                    cur.child[w] = Node()
                cur = cur.child[w]

            cur.word = True

    def search(self, word):
        cur = self.root
        for w in word:
            if w not in cur.child:
                return False
            cur = cur.child[w]

        if cur.word == False:
            return False
        return True

if __name__ == '__main__':
    # 初始化糾正器
    c = corrector()
    # 獲得單詞
    words = c.getData()
    # 初始化前綴樹
    Tree = Trie()
    # 將所有的單詞都插入到前綴樹中
    Tree.insert(words)
    # 測試
    print(c.getCorrection(['專塘街道','轉塘姐道','轉塘街到']))

結果

打印結果為:
['轉塘街道', '轉塘街道', '轉塘街道']

可以看出都糾正成功了,有一定的效果 ,之后會繼續優化。

到此這篇關于Python中文糾錯的簡單實現的文章就介紹到這了,更多相關Python中文糾錯內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • Python容錯的前綴樹實現中文糾錯

標簽:盤錦 珠海 西寧 湖北 上饒 宜昌 潮州 佳木斯

巨人網絡通訊聲明:本文標題《Python中文糾錯的簡單實現》,本文關鍵詞  Python,中文,糾,錯的,簡單,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《Python中文糾錯的簡單實現》相關的同類信息!
  • 本頁收集關于Python中文糾錯的簡單實現的相關信息資訊供網民參考!
  • 推薦文章
    亚洲国产综合91精品麻豆| 日韩在线视频不卡| 欧美一区二区三区免费观看| www.五月激情| 精品少妇在线视频| 日韩美女一区二区三区| av在线亚洲天堂| 久久久无码中文字幕久...| 日韩一级完整毛片| 国产福利第一视频| 久久99中文字幕| 日韩毛片在线观看| 黄色一级大片在线免费看国产| 日韩精品久久久免费观看| 在线这里只有精品| 亚洲av综合色区无码一区爱av | 成人免费av在线| 制服丝袜第一页在线观看| 欧美大片免费观看| 国产一区亚洲一区| 国产一级片中文字幕| 91精品国产免费久久久久久 | 亚洲精品无码国产| 日韩中文字幕精品| 成人永久免费视频| 国产情侣激情自拍| 精品国产免费一区二区三区| 午夜精品福利久久久| 日韩成人短视频| 色悠悠久久综合网| 亚洲欧美日韩天堂| 久久99精品国产麻豆婷婷洗澡| 国产调教打屁股xxxx网站| 国产精品入口免费视| 天天综合网天天综合色| 亚洲va天堂va欧美ⅴa在线| 国产91在线亚洲| 亚洲国产精彩中文乱码av| 国产福利不卡视频| 国产一级中文字幕| 男人添女荫道口喷水视频| 68精品久久久久久欧美| 亚洲成人av在线电影| 国产日本精品视频| 亚洲午夜激情影院| 国产91色在线|免| 日韩视频中午一区| 91亚洲精品久久久蜜桃| 中文字幕1区2区3区| 在线免费黄色网| 久久久久久久久一区| 国产一区二区三区在线播放免费观看| 久久亚洲精精品中文字幕早川悠里| 少妇愉情理伦三级| 在线观看三级网站| 91高潮在线观看| 欧美日韩国产小视频| 337p粉嫩大胆色噜噜噜噜亚洲| 影音先锋黄色网址| 男女一区二区三区| 国产乱子伦精品无码专区| 欧美一二三视频| 欧美日韩一区二区不卡| 成人美女视频在线看| 中文字幕自拍偷拍| 鲁大师私人影院在线观看| 欧美亚洲一级二级| 国产不卡精品视男人的天堂| 亚洲第一精品电影| 五月婷婷综合网| 久久久久久毛片| 午夜av免费观看| 精品99久久久久成人网站免费| 欧美激情国产精品日韩| 国产极品jizzhd欧美| 久久精品视频一| 欧美一区二区性放荡片| 亚洲图片欧美一区| 国产精品一区在线观看你懂的| 日韩人妻精品中文字幕| 动漫精品一区二区三区| 黄色片一级视频| 日韩欧美亚洲精品| 极品日韩久久| 91久久国产综合久久91精品网站| 九九视频这里只有精品| 亚洲电影免费观看高清完整版在线观看 | 国产午夜久久久| 美女又爽又黄视频毛茸茸| mm131亚洲精品| 日本一道在线观看| 国产又大又长又粗又黄| 亚洲在线观看一区| 国产免费亚洲高清| x99av成人免费| 日韩一区二区在线免费观看| 亚洲精品欧美激情| 欧美激情一区二区在线| av午夜精品一区二区三区| 亚洲av电影一区| 在线观看国产成人| 欧美性猛交bbbbb精品| 国产激情无码一区二区三区| 日本中文字幕精品| 搡女人真爽免费午夜网站| 亚洲不卡视频在线| 午夜精品久久久久久久99热影院| 国产视频九色蝌蚪| 国产精品无码一本二本三本色| 日韩国产一级片| 国产一级黄色录像片| 日韩免费一级视频| 野外做受又硬又粗又大视频√| 男女h黄动漫啪啪无遮挡软件| 国模精品娜娜一二三区| 亚洲淫片在线视频| y111111国产精品久久婷婷| 久久久久综合一区二区三区| 一区二区三区四区欧美| 久久av喷吹av高潮av| 日本一级黄视频| 亚洲理论电影在线观看| 国产 国语对白 露脸| 伊人国产在线视频| 美女爆乳18禁www久久久久久| 一级片视频免费看| 精品无码久久久久久久久| 天堂网中文字幕| 99久久夜色精品国产亚洲| 成人爽a毛片一区二区| 首页国产欧美久久| 久久精品网站免费观看| 香蕉乱码成人久久天堂爱免费| 欧美色网一区二区| 亚洲成人黄色网| 九九热r在线视频精品| 日韩免费中文字幕| 亚洲欧美日韩国产yyy| 无码人妻丰满熟妇区96| 一级黄色片国产| 国产情侣久久久久aⅴ免费| 91久久国产综合| 亚洲一区二区三区网站| 精品写真视频在线观看 | 国产精品久久久毛片| 人成免费在线视频| 中文天堂在线资源| 毛片一区二区三区| 亚洲高清在线视频| 伊人久久久久久久久久久| 成人国产精品一区| 丁香六月激情网| 在线观看国产免费视频| 国产污视频在线观看| 超碰在线播放97| 国产精品水嫩水嫩| 制服丝袜在线91| 国产精品成人va在线观看| 麻豆av一区二区| 爆乳熟妇一区二区三区霸乳| 中文字幕免费高清视频| 国产成人精品一区二区色戒| 成人激情午夜影院| 91精品国产黑色紧身裤美女| 国产999在线观看| 中文字幕一区二区三区5566| 国产xxxxxxxxx| 人妻与黑人一区二区三区| 亚洲中国最大av网站| 伊人久久久久久久久久久久久| 91精品免费| 中文字幕亚洲影院| 亚洲在线视频播放| 337p粉嫩大胆噜噜噜噜噜91av| 日韩三级中文字幕| 欧美中文在线视频| 激情网站五月天| 中文字幕一区二区三区四区免费看| av午夜精品一区二区三区| 日韩欧美在线123| 91影视免费在线观看| 91精品91久久久中77777老牛| tube国产麻豆| 日本一区二区三区在线不卡| 色琪琪综合男人的天堂aⅴ视频| 一级做a爰片久久| 日本妇女毛茸茸| 成人免费视频一区| 欧美一区二区三区免费视频| 不卡一区二区三区视频| 男人天堂av电影| 欧美aⅴ一区二区三区视频| 亚洲高清在线精品| 国产精品jvid在线观看蜜臀 | 26uuu国产| 老司机午夜免费精品视频| 欧美三级资源在线| 国产精品日韩欧美一区二区| 国产喷水在线观看| 国产欧美日韩不卡| 欧美激情在线有限公司| 午夜精品久久久内射近拍高清| 中国老头性行为xxxx| 欧美午夜美女看片| 国产麻豆日韩| 日韩免费不卡视频| 久久久www免费人成精品| 日韩精品视频在线播放| caopor在线视频| 日本黄色不卡视频| 精品久久久久av影院| 懂色av一区二区三区四区五区| 日韩av男人天堂| 亚洲黄网站在线观看| 国产精品一区二区不卡视频| 可以免费看的av毛片| 天天影视涩香欲综合网| 欧美另类视频在线| 人妻丰满熟妇av无码区| 在线影院国内精品| 麻豆md0077饥渴少妇| 美女精品一区| 国内精品视频在线| 变态另类丨国产精品| 久久天堂av综合合色蜜桃网| 91精品国产一区| 特黄一区二区三区| 日本韩国欧美在线| 亚洲最新在线| 天堂一区二区在线免费观看| 亚洲图中文字幕| www.黄色网| 91麻豆6部合集magnet| 91av免费看| 91av久久久| 亚洲天堂免费视频| 深爱五月综合网| 中文字幕成人在线观看| 成人久久18免费网站漫画| 国产手机在线视频| 日韩激情在线视频| 亚洲一区二区三区四区精品| 欧美国产激情二区三区| 久久精品美女| 国内爆初菊对白视频| 97久久国产精品| 国产 日韩 欧美 在线| 欧美mv日韩mv亚洲| 日批视频在线看| 亚洲图片欧美色图| 波多野结衣三级在线| 成人av电影在线| 日本午夜精品电影| 日本欧美在线看| 国产在线观看91精品一区| 丰满人妻老熟妇伦人精品| 国产视频久久久久| 欧美视频www| 亚洲一级免费视频| www成人啪啪18软件| 欧美日韩精品系列| 亚洲综合激情视频| 一区二区三区精品视频在线| 一区二区三区不卡在线| 久久综合九色综合欧美亚洲| 亚洲蜜桃av| 久久久精品蜜桃| 激情图片qvod| 国产欧美日韩久久| 国产在线播放观看| 国产精品国产自产拍高清av| 大j8黑人w巨大888a片| 日韩一区在线免费观看| 亚洲国产精品无码观看久久| 日本一区二区免费在线观看视频| 男人添女荫道口女人有什么感觉| 国产亚洲自拍一区| 隔壁人妻偷人bd中字| 国产免费观看久久| 草草草视频在线观看| 亚洲午夜在线视频| 精品人妻一区二区三区免费| 欧美在线小视频| 国产精品国产精品88| 亚洲精品美女在线观看| 久久久一二三区| 欧美二区在线播放| 亚洲经典一区二区三区| 91pron在线| www.欧美色图| 中国丰满人妻videoshd | 蜜桃久久精品成人无码av| 色综合导航网站| 日韩国产精品久久久| 亚洲国产精品一区二区第四页av| 国产精品久久久久久久久果冻传媒| chinese少妇国语对白| 日韩精品一区二区三区在线 | 艳母动漫在线免费观看| 一区二区三区四区乱视频| 亚洲av无码一区二区三区人| 中文字幕精品—区二区| 肥臀熟女一区二区三区| 欧洲一区二区在线观看| 最新日韩av在线| 天堂在线中文视频| 欧美日产国产成人免费图片| 日日夜夜免费精品视频| 97超碰国产精品| 日韩精品一区在线观看| 精品人妻一区二区三区潮喷在线| 国产日韩一区二区| 亚洲精品国久久99热| 国产精品嫩草av| 日韩美女视频中文字幕| 成人性生交大合| 五月婷婷激情久久| 色妞一区二区三区| 国内精品伊人久久久久av一坑| 天堂中文视频在线| 亚洲欧洲在线看| 丰满肉嫩西川结衣av| 亚洲高清精品中出| 欧美一卡二卡三卡| 波多野结衣视频在线看| 欧美一区免费视频| 亚洲午夜久久久久久久久电影网 | 人人艹在线视频| 91在线观看免费高清| 91亚洲精品久久久蜜桃| 日韩精品卡通动漫网站| 欧美猛交免费看| 国产乱色国产精品免费视频| 精品人妻一区二区免费| 欧美一区二区大胆人体摄影专业网站| 国产午夜精品一区二区 | 最新日韩中文字幕| 麻豆精品一二三| 亚洲天堂av线| 国内精品久久久久久久| 自拍偷拍国产精品| 青娱乐国产盛宴| 一区二区视频在线播放| 国产丝袜精品第一页| 成人精品一区二区三区四区 | 亚洲免费高清视频| 成人在线综合网| 亚洲第一页av| 国产在线98福利播放视频| 欧美视频第一页| 中文字幕制服诱惑| 欧美激情成人网| 国产99久久精品一区二区| 中文字幕的久久| 无码人妻丰满熟妇区五十路 | 精品国产拍在线观看| 99久久免费精品| 国产无码精品在线观看| 日韩国产一级片| 欧美—级a级欧美特级ar全黄| 亚洲最新视频在线观看| 五月天激情四射| 爱豆国产剧免费观看大全剧苏畅| 国内精品久久久久伊人av| 中文字幕乱码亚洲精品一区 | 久久亚洲二区| 精品人妻一区二区三区香蕉 | 51精品免费网站| 亚洲欧洲三级| 欧美激情亚洲激情| 色94色欧美sute亚洲线路二| 色窝窝无码一区二区三区成人网站| 国产伦精品一区二区三区妓女| 欧美一区二区影视| 久久综合色影院| 欧美四级电影在线观看| 久久激情网站| 麻豆一区二区三区精品视频| av在线免费观看国产| 国产精品欧美一区二区| 亚洲精品美女久久久| 久久精品欧美日韩精品 | 国产精品 欧美精品| 青青草激情视频| 国产精品久久久毛片| 国产精品裸体一区二区三区| 国产一区二区三区四区福利| 亚洲一区免费在线观看| 六月丁香综合在线视频| 国产无遮挡又黄又爽| 人妻av一区二区| 久草免费福利在线| 国产精品嫩草在线观看| 中文字幕亚洲一区二区三区| 色呦呦日韩精品| 久久精品一区二区三区不卡牛牛| 一区二区三区播放| 欧美成人免费观看视频| 国产福利在线观看视频| 国产又大又硬又粗| 久久涩涩网站| 国产乱人伦真实精品视频| 麻豆成人在线看| 日韩国产精品视频| 亚洲成人免费电影| 国产日韩欧美亚洲| 成人午夜看片网址| 成人一区二区三区中文字幕| 国产一区二区小视频| 亚洲在线视频播放|