亚洲av成人无遮挡网站在线观看,少妇性bbb搡bbb爽爽爽,亚洲av日韩精品久久久久久,兔费看少妇性l交大片免费,无码少妇一区二区三区

  免費注冊 查看新帖 |

Chinaunix

  平臺 論壇 博客 文庫
最近訪問板塊 發(fā)新帖
樓主: cfzxwxb
打印 上一主題 下一主題

[文本處理] 如何用grep把韓文和日文篩選出來? [復制鏈接]

論壇徽章:
8
2016科比退役紀念章
日期:2018-10-24 08:24:0115-16賽季CBA聯(lián)賽之北控
日期:2019-03-12 14:34:562016科比退役紀念章
日期:2019-04-01 10:33:0915-16賽季CBA聯(lián)賽之山東
日期:2019-04-17 12:46:3215-16賽季CBA聯(lián)賽之廣夏
日期:2019-05-09 16:40:4015-16賽季CBA聯(lián)賽之廣夏
日期:2019-10-10 15:33:4015-16賽季CBA聯(lián)賽之遼寧
日期:2019-10-15 08:37:0615-16賽季CBA聯(lián)賽之北控
日期:2021-03-30 15:53:34
11 [報告]
發(fā)表于 2019-02-12 07:42 |只看該作者
建議可以看看這個  
https://www.regular-expressions.info/unicode.html
用正則的 Unicode Scripts
應該可以解決你至少一大半的問題,韓文還好說,日文沒那么簡單的,因為日文里除了平假名和片假名,也有漢字。 中文日文混寫的時候怎么判斷漢字屬于中文還是日文?

匹配韓文:
  1. grep -Po '\p{Hangul}+' file
復制代碼


匹配平假名和片假名:
  1. grep -Po '\p{Hiragana}+|\p{Katakana}+' file
復制代碼


僅供參考。

論壇徽章:
8
2016科比退役紀念章
日期:2018-10-24 08:24:0115-16賽季CBA聯(lián)賽之北控
日期:2019-03-12 14:34:562016科比退役紀念章
日期:2019-04-01 10:33:0915-16賽季CBA聯(lián)賽之山東
日期:2019-04-17 12:46:3215-16賽季CBA聯(lián)賽之廣夏
日期:2019-05-09 16:40:4015-16賽季CBA聯(lián)賽之廣夏
日期:2019-10-10 15:33:4015-16賽季CBA聯(lián)賽之遼寧
日期:2019-10-15 08:37:0615-16賽季CBA聯(lián)賽之北控
日期:2021-03-30 15:53:34
12 [報告]
發(fā)表于 2019-02-12 07:42 |只看該作者
建議可以看看這個  
https://www.regular-expressions.info/unicode.html
用正則的 Unicode Scripts
應該可以解決你至少一大半的問題,韓文還好說,日文沒那么簡單的,因為日文里除了平假名和片假名,也有漢字。 中文日文混寫的時候怎么判斷漢字屬于中文還是日文?

匹配韓文:
  1. grep -Po '\p{Hangul}+' file
復制代碼


匹配平假名和片假名:
  1. grep -Po '\p{Hiragana}+|\p{Katakana}+' file
復制代碼


僅供參考。

論壇徽章:
8
2016科比退役紀念章
日期:2018-10-24 08:24:0115-16賽季CBA聯(lián)賽之北控
日期:2019-03-12 14:34:562016科比退役紀念章
日期:2019-04-01 10:33:0915-16賽季CBA聯(lián)賽之山東
日期:2019-04-17 12:46:3215-16賽季CBA聯(lián)賽之廣夏
日期:2019-05-09 16:40:4015-16賽季CBA聯(lián)賽之廣夏
日期:2019-10-10 15:33:4015-16賽季CBA聯(lián)賽之遼寧
日期:2019-10-15 08:37:0615-16賽季CBA聯(lián)賽之北控
日期:2021-03-30 15:53:34
13 [報告]
發(fā)表于 2019-02-12 07:45 |只看該作者
本帖最后由 cfwyy 于 2019-02-12 07:47 編輯

建議可以看看這個  
unicode


用正則的 Unicode Scripts
應該可以解決你至少一大半的問題,韓文還好說,日文沒那么簡單的,因為日文里除了平假名和片假名,也有漢字。 中文日文混寫的時候怎么判斷漢字屬于中文還是日文?

匹配韓文:
  1. grep -Po '\p{Hangul}+' file
復制代碼


匹配平假名和片假名:
  1. grep -Po '\p{Hiragana}+|\p{Katakana}+' file
復制代碼


僅供參考。

論壇徽章:
8
2016科比退役紀念章
日期:2018-10-24 08:24:0115-16賽季CBA聯(lián)賽之北控
日期:2019-03-12 14:34:562016科比退役紀念章
日期:2019-04-01 10:33:0915-16賽季CBA聯(lián)賽之山東
日期:2019-04-17 12:46:3215-16賽季CBA聯(lián)賽之廣夏
日期:2019-05-09 16:40:4015-16賽季CBA聯(lián)賽之廣夏
日期:2019-10-10 15:33:4015-16賽季CBA聯(lián)賽之遼寧
日期:2019-10-15 08:37:0615-16賽季CBA聯(lián)賽之北控
日期:2021-03-30 15:53:34
14 [報告]
發(fā)表于 2019-02-12 07:54 |只看該作者
本帖最后由 cfwyy 于 2019-02-12 07:59 編輯

回了個帖子,里面插了個鏈接,帖子就出不來了?
用正則的 Unicode Scripts
應該可以解決你至少一大半的問題,韓文還好說,日文沒那么簡單的,因為日文里除了平假名和片假名,也有漢字。 中文日文混寫的時候怎么判斷漢字屬于中文還是日文?

匹配韓文:
  1. grep -Po '\p{Hangul}+' file
復制代碼


匹配平假名和片假名:
  1. grep -Po '\p{Hiragana}+|\p{Katakana}+' file
復制代碼


僅供參考。

論壇徽章:
0
15 [報告]
發(fā)表于 2019-02-14 18:13 |只看該作者
提示: 作者被禁止或刪除 內(nèi)容自動屏蔽
您需要登錄后才可以回帖 登錄 | 注冊

本版積分規(guī)則 發(fā)表回復

  

北京盛拓優(yōu)訊信息技術(shù)有限公司. 版權(quán)所有 京ICP備16024965號-6 北京市公安局海淀分局網(wǎng)監(jiān)中心備案編號:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年舉報專區(qū)
中國互聯(lián)網(wǎng)協(xié)會會員  聯(lián)系我們:huangweiwei@itpub.net
感謝所有關(guān)心和支持過ChinaUnix的朋友們 轉(zhuǎn)載本站內(nèi)容請注明原作者名及出處

清除 Cookies - ChinaUnix - Archiver - WAP - TOP