整合PostgreSQL資料庫的R中文文本探勘 / Chinese Text Mining with R and PostgreSQL
整合PostgreSQL資料庫的R中文文本探勘 / Chinese Text Mining with R and PostgreSQL
R的文本探勘(text mining)大多是基於純文字檔案進行,而我將文本探勘處理的資料輸入、輸出儲存整合到PostgreSQL資料庫,讓R的文本探勘能夠更容易跟其他系統整合。這篇文本探勘中進行了HTML內文擷取、新詞加入與斷詞處理、符號過濾、英數字過濾、停用字過濾、最小詞彙長度與頻率過濾等處理步驟。以下介紹系統架構跟R Script的設定,並以我的網頁為資料來源示範如何進行文本探勘。
(more...)
Comments