2018年6月22日金曜日

mecabの人名辞書入れるか検討中

python3 mecabで固有名詞の辞書を入れたほうが良いのか、と思い始めたのですが、とりあえずデフォルトでどうなのか試してみました。 

結論的感想 辞書入れないと全然ダメなのでは?と思った。

インストールの話はこれ→Python3、mecabを導入するときにハマった 



やったこと

このNHKニュースを使ってテストしました。特にこれを使った理由はなく、たまたまニュースの1位だったからです。

 https://www3.nhk.or.jp/news/html/20180622/k10011491371000.html?utm_int=news_contents_news-main_002

# coding: utf-8
import sys
import MeCab

news = '''

がん患者にやじ 自民 穴見議員 がん財団理事を辞任

2018年6月22日 17時15分

自民党の穴見陽一衆議院議員は、先週の衆議院厚生労働委員会で参考人として出席したがん患者の男性が意見を述べている際、「いい加減にしろ」と発言し、批判を受けたことを踏まえ、22日、大分がん研究振興財団の理事の辞任届を提出しました。

自民党の穴見陽一議員は、今月15日、受動喫煙対策を強化する健康増進法の改正案を審議していた衆議院厚生労働委員会で、参考人として出席した肺がん患者の男性が意見を述べている際、「いい加減にしろ」と発言し、がん患者などから批判を受けました。

こうした中、がん治療に関する研究を支援する、大分がん研究振興財団(大分県由布市)は、理事を務める穴見氏が辞任届を提出したと発表しました。

財団は、来週にも評議員会を開いて、辞任届を受理することにしています。

穴見氏の発言について、大分がん研究振興財団の植山茂宏理事長は「参考人をはじめ、全国のがん患者や家族の方々に大変不快な気持ちを抱かせましたことを心よりお詫び申し上げます」というコメントを発表しています。
'''
m = MeCab.Tagger ("-Ochasen")
print (m.parse(news))
  結果はこんな感じで出力されますが。人名、地名を太字にしています。
がん ガン がん 名詞-一般  
患者 カンジャ 患者 名詞-一般  
に ニ に 助詞-格助詞-一般  
やじ ヤジ やじ 名詞-一般  
自民 ジミン 自民 名詞-固有名詞-組織  
穴見 アナミ 穴見 名詞-固有名詞-地域-一般  
議員 ギイン 議員 名詞-一般  
がん ガン がん 名詞-一般  
財団 ザイダン 財団 名詞-一般  
理事 リジ 理事 名詞-一般  
を ヲ を 助詞-格助詞-一般  
辞任 ジニン 辞任 名詞-サ変接続  
2018 2018 2018 名詞-数  
年 ネン 年 名詞-接尾-助数詞  
6 6 6 名詞-数  
月 ツキ 月 名詞-一般  
22 22 22 名詞-数  
日 ニチ 日 名詞-接尾-助数詞  
17 17 17 名詞-数  
時 ジ 時 名詞-接尾-助数詞  
15 15 15 名詞-数  
分 フン 分 名詞-接尾-助数詞  
自民党 ジミントウ 自民党 名詞-固有名詞-組織  
の ノ の 助詞-連体化  
穴見 アナミ 穴見 名詞-固有名詞-地域-一般  
陽 ヒ 陽 名詞-一般  
一 イチ 一 名詞-数  
衆議院 シュウギイン 衆議院 名詞-固有名詞-組織  
議員 ギイン 議員 名詞-一般  
は ハ は 助詞-係助詞  
、 、 、 記号-読点  
先週 センシュウ 先週 名詞-副詞可能  
の ノ の 助詞-連体化  
衆議院 シュウギイン 衆議院 名詞-固有名詞-組織  
厚生 コウセイ 厚生 名詞-一般  
労働 ロウドウ 労働 名詞-サ変接続  
委員 イイン 委員 名詞-一般  
会 カイ 会 名詞-接尾-一般  
で デ で 助詞-格助詞-一般  
参考 サンコウ 参考 名詞-サ変接続  
人 ジン 人 名詞-接尾-一般  
として トシテ として 助詞-格助詞-連語  
出席 シュッセキ 出席 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
た タ た 助動詞 特殊・タ 基本形
がん ガン がん 名詞-一般  
患者 カンジャ 患者 名詞-一般  
の ノ の 助詞-連体化  
男性 ダンセイ 男性 名詞-一般  
が ガ が 助詞-格助詞-一般  
意見 イケン 意見 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
述べ ノベ 述べる 動詞-自立 一段 連用形
て テ て 助詞-接続助詞  
いる イル いる 動詞-非自立 一段 基本形
際 サイ 際 名詞-非自立-副詞可能  
、 、 、 記号-読点  
「 「 「 記号-括弧開  
いい加減 イイカゲン いい加減 名詞-形容動詞語幹  
に ニ に 助詞-格助詞-一般  
しろ シロ する 動詞-自立 サ変・スル 命令ro
」 」 」 記号-括弧閉  
と ト と 助詞-格助詞-引用  
発言 ハツゲン 発言 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
、 、 、 記号-読点  
批判 ヒハン 批判 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
受け ウケ 受ける 動詞-自立 一段 連用形
た タ た 助動詞 特殊・タ 基本形
こと コト こと 名詞-非自立-一般  
を ヲ を 助詞-格助詞-一般  
踏まえ フマエ 踏まえる 動詞-自立 一段 連用形
、 、 、 記号-読点  
22 22 22 名詞-数  
日 ニチ 日 名詞-接尾-助数詞  
、 、 、 記号-読点  
大分 オオイタ 大分 名詞-固有名詞-地域-一般  
がん ガン がん 名詞-一般  
研究 ケンキュウ 研究 名詞-サ変接続  
振興 シンコウ 振興 名詞-サ変接続  
財団 ザイダン 財団 名詞-一般  
の ノ の 助詞-連体化  
理事 リジ 理事 名詞-一般  
の ノ の 助詞-連体化  
辞任 ジニン 辞任 名詞-サ変接続  
届 トドケ 届 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
提出 テイシュツ 提出 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
まし マシ ます 助動詞 特殊・マス 連用形
た タ た 助動詞 特殊・タ 基本形
。 。 。 記号-句点  
自民党 ジミントウ 自民党 名詞-固有名詞-組織  
の ノ の 助詞-連体化  
穴見 アナミ 穴見 名詞-固有名詞-地域-一般  
陽 ヒ 陽 名詞-一般  
一 イチ 一 名詞-数  
議員 ギイン 議員 名詞-一般  
は ハ は 助詞-係助詞  
、 、 、 記号-読点  
今月 コンゲツ 今月 名詞-副詞可能  
15 15 15 名詞-数  
日 ニチ 日 名詞-接尾-助数詞  
、 、 、 記号-読点  
受動 ジュドウ 受動 名詞-一般  
喫煙 キツエン 喫煙 名詞-サ変接続  
対策 タイサク 対策 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
強化 キョウカ 強化 名詞-サ変接続  
する スル する 動詞-自立 サ変・スル 基本形
健康 ケンコウ 健康 名詞-形容動詞語幹  
増進 ゾウシン 増進 名詞-サ変接続  
法 ホウ 法 名詞-接尾-一般  
の ノ の 助詞-連体化  
改正 カイセイ 改正 名詞-サ変接続  
案 アン 案 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
審議 シンギ 審議 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
て テ て 助詞-接続助詞  
い イ いる 動詞-非自立 一段 連用形
た タ た 助動詞 特殊・タ 基本形
衆議院 シュウギイン 衆議院 名詞-固有名詞-組織  
厚生 コウセイ 厚生 名詞-一般  
労働 ロウドウ 労働 名詞-サ変接続  
委員 イイン 委員 名詞-一般  
会 カイ 会 名詞-接尾-一般  
で デ で 助詞-格助詞-一般  
、 、 、 記号-読点  
参考 サンコウ 参考 名詞-サ変接続  
人 ジン 人 名詞-接尾-一般  
として トシテ として 助詞-格助詞-連語  
出席 シュッセキ 出席 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
た タ た 助動詞 特殊・タ 基本形
肺がん ハイガン 肺がん 名詞-一般  
患者 カンジャ 患者 名詞-一般  
の ノ の 助詞-連体化  
男性 ダンセイ 男性 名詞-一般  
が ガ が 助詞-格助詞-一般  
意見 イケン 意見 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
述べ ノベ 述べる 動詞-自立 一段 連用形
て テ て 助詞-接続助詞  
いる イル いる 動詞-非自立 一段 基本形
際 サイ 際 名詞-非自立-副詞可能  
、 、 、 記号-読点  
「 「 「 記号-括弧開  
いい加減 イイカゲン いい加減 名詞-形容動詞語幹  
に ニ に 助詞-格助詞-一般  
しろ シロ する 動詞-自立 サ変・スル 命令ro
」 」 」 記号-括弧閉  
と ト と 助詞-格助詞-引用  
発言 ハツゲン 発言 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
、 、 、 記号-読点  
がん ガン がん 名詞-一般  
患者 カンジャ 患者 名詞-一般  
など ナド など 助詞-副助詞  
から カラ から 助詞-格助詞-一般  
批判 ヒハン 批判 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
受け ウケ 受ける 動詞-自立 一段 連用形
まし マシ ます 助動詞 特殊・マス 連用形
た タ た 助動詞 特殊・タ 基本形
。 。 。 記号-句点  
こうした コウシタ こうした 連体詞  
中 ナカ 中 名詞-非自立-副詞可能  
、 、 、 記号-読点  
がん ガン がん 名詞-一般  
治療 チリョウ 治療 名詞-サ変接続  
に関する ニカンスル に関する 助詞-格助詞-連語  
研究 ケンキュウ 研究 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
支援 シエン 支援 名詞-サ変接続  
する スル する 動詞-自立 サ変・スル 基本形
、 、 、 記号-読点  
大分 オオイタ 大分 名詞-固有名詞-地域-一般  
がん ガン がん 名詞-一般  
研究 ケンキュウ 研究 名詞-サ変接続  
振興 シンコウ 振興 名詞-サ変接続  
財団 ザイダン 財団 名詞-一般  
( ( ( 記号-括弧開  
大分 オオイタ 大分 名詞-固有名詞-地域-一般  
県 ケン 県 名詞-接尾-地域  
由布 ユウ 由布 名詞-固有名詞-人名-名  
市 シ 市 名詞-接尾-地域  
) ) ) 記号-括弧閉  
は ハ は 助詞-係助詞  
、 、 、 記号-読点  
理事 リジ 理事 名詞-一般  
を ヲ を 助詞-格助詞-一般  
務める ツトメル 務める 動詞-自立 一段 基本形
穴見 アナミ 穴見 名詞-固有名詞-地域-一般  
氏 シ 氏 名詞-接尾-人名  
が ガ が 助詞-格助詞-一般  
辞任 ジニン 辞任 名詞-サ変接続  
届 トドケ 届 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
提出 テイシュツ 提出 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
た タ た 助動詞 特殊・タ 基本形
と ト と 助詞-格助詞-引用  
発表 ハッピョウ 発表 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
まし マシ ます 助動詞 特殊・マス 連用形
た タ た 助動詞 特殊・タ 基本形
。 。 。 記号-句点  
財団 ザイダン 財団 名詞-一般  
は ハ は 助詞-係助詞  
、 、 、 記号-読点  
来週 ライシュウ 来週 名詞-副詞可能  
に ニ に 助詞-格助詞-一般  
も モ も 助詞-係助詞  
評議 ヒョウギ 評議 名詞-サ変接続  
員 イン 員 名詞-接尾-一般  
会 カイ 会 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
開い ヒライ 開く 動詞-自立 五段・カ行イ音便 連用タ接続
て テ て 助詞-接続助詞  
、 、 、 記号-読点  
辞任 ジニン 辞任 名詞-サ変接続  
届 トドケ 届 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
受理 ジュリ 受理 名詞-サ変接続  
する スル する 動詞-自立 サ変・スル 基本形
こと コト こと 名詞-非自立-一般  
に ニ に 助詞-格助詞-一般  
し シ する 動詞-自立 サ変・スル 連用形
て テ て 助詞-接続助詞  
い イ いる 動詞-非自立 一段 連用形
ます マス ます 助動詞 特殊・マス 基本形
。 。 。 記号-句点  
穴見 アナミ 穴見 名詞-固有名詞-地域-一般  
氏 シ 氏 名詞-接尾-人名  
の ノ の 助詞-連体化  
発言 ハツゲン 発言 名詞-サ変接続  
について ニツイテ について 助詞-格助詞-連語  
、 、 、 記号-読点  
大分 オオイタ 大分 名詞-固有名詞-地域-一般  
がん ガン がん 名詞-一般  
研究 ケンキュウ 研究 名詞-サ変接続  
振興 シンコウ 振興 名詞-サ変接続  
財団 ザイダン 財団 名詞-一般  
の ノ の 助詞-連体化  
植山 ウエヤマ 植山 名詞-固有名詞-人名-姓  
茂 シゲル 茂 名詞-固有名詞-人名-名  
宏 ヒロシ 宏 名詞-固有名詞-人名-名  
理事 リジ 理事 名詞-一般  
長 チョウ 長 名詞-接尾-一般  
は ハ は 助詞-係助詞  
「 「 「 記号-括弧開  
参考 サンコウ 参考 名詞-サ変接続  
人 ジン 人 名詞-接尾-一般  
を ヲ を 助詞-格助詞-一般  
はじめ ハジメ はじめ 名詞-副詞可能  
、 、 、 記号-読点  
全国 ゼンコク 全国 名詞-一般  
の ノ の 助詞-連体化  
がん ガン がん 名詞-一般  
患者 カンジャ 患者 名詞-一般  
や ヤ や 助詞-並立助詞  
家族 カゾク 家族 名詞-一般  
の ノ の 助詞-連体化  
方々 カタガタ 方々 名詞-一般  
に ニ に 助詞-格助詞-一般  
大変 タイヘン 大変 名詞-形容動詞語幹  
不快 フカイ 不快 名詞-形容動詞語幹  
な ナ だ 助動詞 特殊・ダ 体言接続
気持ち キモチ 気持ち 名詞-一般  
を ヲ を 助詞-格助詞-一般  
抱か イダカ 抱く 動詞-自立 五段・カ行イ音便 未然形
せ セ せる 動詞-接尾 一段 連用形
まし マシ ます 助動詞 特殊・マス 連用形
た タ た 助動詞 特殊・タ 基本形
こと コト こと 名詞-非自立-一般  
を ヲ を 助詞-格助詞-一般  
心 ココロ 心 名詞-一般  
より ヨリ より 助詞-格助詞-一般  
お詫び オワビ お詫び 名詞-サ変接続  
申し上げ モウシアゲ 申し上げる 動詞-自立 一段 連用形
ます マス ます 助動詞 特殊・マス 基本形
」 」 」 記号-括弧閉  
という トイウ という 助詞-格助詞-連語  
コメント コメント コメント 名詞-サ変接続  
を ヲ を 助詞-格助詞-一般  
発表 ハッピョウ 発表 名詞-サ変接続  
し シ する 動詞-自立 サ変・スル 連用形
て テ て 助詞-接続助詞  
い イ いる 動詞-非自立 一段 連用形
ます マス ます 助動詞 特殊・マス 基本形
。 。 。 記号-句点  
EOS

・・・ということで、なかなか人名、地名を当てるのはデフォルトでは難しいことが分かりました。

  • 大分県XX市と来てXXが人名になってしまっている
  • 2文字の名前を1文字+1文字に分かち書きしている 
  • 珍しい名前は固有名詞にならない?
 ・・・とはいえ、人名、地名をどちらも伏せ字にするのが目的だったら大丈夫かもしれませんが。

0 件のコメント:

コメントを投稿