计算语言工具资源与应用

1、計算語言學的工具資源與應用高照明台大外文系中文計算語言學資源與工具n語料庫n分詞程式n語法剖析程式n詞彙知識庫n語音辨識與語音合成n機器翻譯語料庫n中文語料庫n中英雙語語料庫n標記詞義的語料庫n語法結構樹庫n標記語意角色的語料庫基於語料庫的外語學習n優點1：語言真實的使用情形n優點2：可以客觀計算出最常用的詞彙，句型，搭配語，甚至詞義n方法：學習者觀察語料，歸納規則，驗證假設，修改假設n可能的問題：一般的語料庫都是書面語，內容太難，不適合初學者及中等程度者中文語料庫n中研院現代漢語平衡語料庫(最早的中文平衡語料庫，具有分詞，及詞性標記，具有先進的檢索介面，共有500萬詞）http:/www.s

2、.tw/sinicacorpus/nchinese giga word：目前最大的中文語料庫，需搭配檢索程式，需購買n目前仍然缺乏大規模的中文口語語料庫n具有標記詞義的小型語料庫正在進行當中chinese sketch enginenhttp:/www.sketchengine.co.uk/n輸入一個詞，可以快速顯示跟這個詞具有語法依存關係的搭配語(collocation)，例如：修飾語與被修飾語，主詞與動詞，動詞與受詞等。n輸入兩個近義詞，可以顯示這兩個詞共有或獨有的搭配語。中英雙語語料庫n清大數位學習國家型計畫 candle projecthttp:/candle.cs.

3、.tw/newcandle/home_c.asp 開發中英雙語前後文檢索程式 (bilinugal concordancer)，可以中文或英文檢索。n適合作為外籍人士學習華語，或國人學習英語。n是對比語言學的寶庫。中文分詞程式n中研院線上分詞程式 .tw/n可以辨識專有名詞及構詞律產生的辭典未收錄詞n正確率相當高n可以輔助外籍人士學習中文n可以作為電腦輔助教學的工具語法結構樹庫n中研院中文句結構樹資料庫 sinica chinese treebank .tw/trees

4、earch/ns(agent:np(head:nab:媽媽)|head:vc31:買|aspect:di:了|theme:np(quantifier:neqa:一些|property:nab:竹|head:nab:筷子) n賓州大學chinese treebank中研院語法結構樹的特點：標記語法結構及語意角色 語法結構樹庫的應用n應用1：可以用來計算常用句型，詞組結構律n應用2：可以導出中文的剖析器 n中研院線上中文剖析器n.tw/（由於中文的複雜性，中文的句法剖析器與英文相比正確率仍然偏低）中文語法剖析程式n中研院線上語法剖析程式nhtt

5、p:/.tw/nstanford parser /software/lex-parser.shtmlnstanford parser線上剖析程式n:8080/parser/stanford parsern(root (ip (np (nr 猴子) (vp (vv 喜欢) (ip (vp (vv 吃) (np (nr 香蕉) (pu 。)n特點：可以得到語法依存關係nnsubj(喜欢-2, 猴子-1) ccomp(喜欢-2, 吃-3) dobj(吃-3, 香蕉-4

6、) 結合語意與語法的剖析器n採購人員 與 採購武器 兩者的結構有何不同？n利用中研院語法樹庫所發展而成的程式n7/corruptangel/public_html/cgi-bin/treesearch/ 標記語意角色的語料庫n中研院語法結構樹庫 sinica chinese treebank 裡面也有標示語意角色n賓州大學chinese popbankn應用：可以作為閱讀理解的材料，適合出who, what, how, why, when, where 這類型的問題。 n/denehs/parse_en.html n中

7、研院語料庫，詞頻及相關資源n.tw/ckip/publication.htmn中研院語言所正在建構多媒體口語語料庫n.tw/辭典n教育部國語會辭典 n同義詞詞林n分類辭典n搭配語辭典分類辭典n詞：醫生nclass: 人體人體醫藥衛生醫藥衛生 c : 醫療醫療藥物藥物 c210 : 醫務人員醫務人員 c223n產婆 大夫 護士 軍醫 郎中 儒醫 神醫 世醫 收生婆 獸醫 牙醫 醫生 醫師 醫士 庸醫 助產士 教育部國語辭典n詞：鶼鰈情深n解釋：比喻夫婦愛情深厚，相處融洽。例: 那對夫妻鶼鰈情深，為眾人所稱

8、羨 教育部國語辭典n詞：得意n解釋：如其心意而有所成就或引以自豪 n解釋：心情酣適n同義詞：稱心 自滿 躊躇滿志 風光 高興 得志 滿意 滿足n反義詞：失意 失望教育部國語辭典n6/dict/n可以近似自然語言查詢，連同解釋一起查詢，例如：輸入夫妻感情，可得到n【百年偕老】 n【琴瑟和諧】 n【瑟調琴弄】 n【比翼雙飛】 n【恩斷義絕】 n【恩斷意絕】 n【瑟弄琴調】 n【琴瑟相調】 n【百年好合】 n【偷腥】 n【琴瑟和好】 n【一夜夫妻百日恩】 詞彙知識庫n中研院中文詞知識庫：記載八萬多目詞的注音，語法，論元結構，及語意。n知網hownet：http:/

9、 中英雙語的詞彙知識庫。以抽象的語義特徵（義元）來定義詞彙的意義。除了詞性及英文翻譯之外還可以得到近義詞，上下位詞，部分與全體關係，事件，及語意角色。n廣義知網知識本體架構 .tw/mhbai/taxonomy/中研院詞知識庫n詞：豐富詞：豐富n注音注音: n拼音拼音: feng1 fu4n語義特徵語義特徵: +eventsn詞性詞性: vh16n論元結構論元結構: theme, causer 中研院知識庫n詞：醫生詞：醫生n注音：注音：n拼音：yi1 sheng1n語義特徵：+mankindn詞性：nabhownetn詞：醫生n英文翻譯：doctor, physician, surgeonnhuman|人:hostof=occupation|職位,domain=medical|醫,doctor|醫治:agent= n應用：利用hownet找出語意相關的詞n/denehs/compare.html中研院中英雙語知識詞網n將中文對應到英文知識庫及本體論wordnet及sumon.tw/語音辨識與語音合成n語音辨識 ibm via voicen語音合成 at&t natural voicenhttp:/ translate 利用全球資訊網中的多國語資料，