Masato YONEDA

米田 正人

application/pdfdepartmental bulletin pape

米田, 正人

ヨネダ, マサト

YONEDA, Masato

Academic Repository of the National Institute for Japanese Language and Linguistics / 国立国語研究所学術情報リポジトリ

国立国語研究所学術情報リポジトリ“文の長さ”の統計学的一考察 : 時系列的解釈著者 米田 正人雑誌名 電子計算機による国語研究巻 7ページ 130-139発行年 1975-03シリーズ 国立国語研究所報告 ; 54URL http://doi.org/10.15084/00001039XXｶの長さ”の統計学的一考察一一梃n列的解釈一米　　田　　正　　人　一人の作者によって書かれた文意の特微を数量的に知ることは興味のあることである。作老はおそらく意識していないであろうが，書かれた作品がある周期を持ったとしても不思議なことではない。多くの作品について調査すれぽ，共通の傾向，特徴を統計的に検出できるかもしれない。ここでは“文の長さ”について，一つの作品全体を通して，どの様な流れを持ち，どの様な特徴を持つのか少数の例について統計学的手法をかりて調査してみることにする。　詳細については後節でふれるが，統計学的手法を当てはある際データのとり方に多少問題があるので，その方法の当てはめの可能性を主として問題にし，以下の閥編の作品について調査を行なうことにする。森　鴎外志賀直哉§王単 位：蟻聚舟寿蓬寒山捨鰯『歪め崎にて」『焚幻鴎外全集（岩波書店）による鴎外全集（岩波書店）による現代H本文学大系（筑摩書房）による現代露本文学大系（筑摩書房）による　電子計算機で言語処理をする際単位は非常に重要な問題である。文の長さを測定する際にも如何なる単位を用いるかは重要な問題となる。用いる単位によって測定された長さにかなりの差が出るからである。また単位切りの際に，単位の安定性ということも少なからず結果に影響を与えるであろう。しかしながら，単位の選定にあたっては，まだ解決されねぽならない幾らかの問題を含んでいる。どの単位を選んだとしても問題は残るであろう。とりあえず，この　　　　　　　　　　　　　　　一　13e　一鰹調査では，文節単位（国語研究所C単位）を用いることにするe文体にあまり影響されない単位という理由でこの単位を選んだ。　なお，原文を文節に切る際の作業上の問題点を以下に挙げておく。　　1）　一文中に引絹されている対話部分は，対話部分全体を一つの文節タイ　　　　プに根墨するものとして扱った。　　　〔例〕　　　　　／「まあ，一寸」と／闘が／呼び留めた／。　　　　　この例の場合，文の長さは“3”となる。　　i｛）対話部分が単独で出て来る場合は，その対話部分は文節測定の対象と　　　　は考えなかった。　　　〔例〕　　　　　　「寸志のお禮がいたしたいのですが。」　　　　　この様な対話部分は省いて測定を行なった。　　ili）本文中では切れていないが，文の性質上そこで切った方が痛論と思わ　　　　れるものについては，そこを切れ目として扱った。　　　〔例〕　　　　　　山の手線の電車に跳ね飛ばされて怪：我をした，その後養生に一人　　　　　で但馬の城の崎温泉へ出かけた。　　　　　上の例文の場合，「怪我をした」と「その後養生に」の間にある「，」　　　　　を「。」と考えて，二文として扱った。　lv）記号類は測定の対象としなかった。　　v）その他，補助用言の扱い等，細部においては説によって定義が異なるも　　　　のがあるが，それらについてはある一貫した定義に基づいて，作業規　　　　則を作り，それに従って作業を進め，単位切りによりデータに乱れが　　　　生じないよう注意した。一　131　一噛§2分　　布文字によって測定された文の長さの度数分布は対類槻分布で近似出来るということが知られている。文節で測定したものについてはどうであろうか。そのことを対数∬三二確率紙を使って調べてみよう。fig．　1，　fig・　2にそのグラフを示す，グラフからわかるように，プロットされた点はほぼ一旗線上にならぶ。Cのtとから娘騨位で測定した文の長さの分布は，ほぼ対数1槻分布をしていることがわかる。ためしに1城の崎にて涯のデータを正規確率紙tcプロットするとfig．3の様になり直線から大きくはずれていることがわかる。　　　Table！は1城の崎にて」の“文の長さ”の累積度数表である。表の右側　　の数値は累積度数を総文数で割り100倍したものである。例えば”文の長　　ざ’1から7までの累積度数は全体の58．85％を占めることを意味する。こ　　の数値を対数正規確率紙にプロットしたのがfig・1，　fiig・2である。Table　1　「城の崎にて」累積度数表文のｷさ 度数 累積度数累積度数@　念文数×100文のｷさ 度数 累積度数累積度数@　総文数x1001 2 2 　2ﾑx100駕0・95712 5 172 82．302 8 10 4．78 13 12 184 88．043 17 27 12．92 王4 7 191 9王．394 26 53 25．36 王5 1 192 9L875 3王 84 40．19 16 7 199 、95．226 22 106 50．72 17 1 2GO 95．697 17 王23 58．85 18 2 202 96．658 16 139 66．51 19 3 205 98．099 10 149 71．29 23 ? 206 98．5610 157 75．12 24 3 2G9 100．OG11 10 167 79．9G一132一fig。1　城の崎にて。．elO．11??????9999．999S9）9．99fig．2寒由拾得99．9gg?????4030201e51O．1浄　　’　±　lwhL???『「?．ーー…1???ーー???tl：1一?．?｝?…???????????　　@　@　@…　　??????? ???…?」」????????〜??印?，????? ??? ??????????　　｝紅熱｝「?? ?? ?．日”1 1i T1??「?｝??」?L?????「t　tttttt　t　ttttlttttttt1油軸繭 ｡．o．　el　　1罹…鞘　　@　@　@　…?…??????…??????????????ーー「 ……一1????「?? 「? ??「… ……?? ?ーー ……?r十一　　，　ヒ?f4　十　　　’’　　「　内 内内触　卜内　　　1　ヒx－4??，…e．OlO．115???????se6e7080??? ??9999．999．9999．999?????????丘9．3止城の崎にてfA確牢紙2　3451O．1o．el　　oン???」??4 8 12 16 20 24x　　一1o．elO．115?????9999S99．992e　3e40∫一一レ99．99一133一§3　平均，標準偏差，変動係数　四丁の作品について，一文中に含まれる文節数く文の長：さ）の平均，標準偏差，変動係数を計算したものをtable　2にまとめておく。分布が対数正規なので対数変換後のデータのほうが分類を試みるには適してL、・ると思われるが，生のデータの表も示しておくことにする。　対数変換後のデータの平均について平均値の差を検定してみると，同一作者の作品の間には有意差はないが，異なった作者の作品の間には危険率5％で差が生じた。分散に関しては，等分散性の検定をしてみたが，有意水準5％では差を検出できなかった。また，変動係数が安定した値になっているのも面白い。この表だけからなら，志賀直哉のほうが森鴎外より僅かではあるが変化のある文章を書くが，文の長さは全体として短い文章を書くということが雷えそうである。Table　2　平均，標準偏差，変動係数作　　　者 森　　　鴎　外 志　賀　薩　哉作　　　品 高瀬舟 寒山捨得 城の騎にて 焚　　火総文数 126 130 209 211平　　均 0．96 0．90 0．82 0．79???????…?標準偏差i分散）029i0．082）0．27i0．071）0．26i0。067）0．28i0．078）変動係数 0．30 0．30 0．32 0．35平　　均 11．21 9．49 7．82 7．59???ー?標準偏差i分散）6．9嘆i48．20）6．3圭i39．82）4．64i2L52）5．35i28．59）変動係数 0．62 0．67 0．59 0．70一　134　一§4　文の長さの推移　平均，標準偏差等については前のセクションで述べたが，それらは一一つの値に情報が集約されていて，全体としてどのような流れを持つのかはわからない。そこで，その推移の経過をグラフにまとめて眺めてみることにしよう。　この系列は非常に凹凸が激しくて，見ただけでは特徴をつかむことが出来ない。そこで補助手段として9項移動平均の系列を前の系列の各点に対応させてみる。いくら滑らかになり全体の大きな流れをつかむのに便利であると思う。fig．　4「寒山拾得」文長の推移と9項移動平均???? ? ?le　2e　3e　4e　5｛｝　6e　7e　80　gO　100　llO　120　130?（???le’　2e　30　40　5e　6e　7e　8e　9e　loo　llO　120　130fig．5「焚」文長の推移と9項移動平均se403e・　201e．　Ol　　nv1　　　　30　　150　　170　　19e　　　　O50????　一V一．」“Xxn．“w““pto　lo　30　se　7090　！IO　130　15e　17e　190　21e一　235　一　しかし，移動平均や推移のグラフを見ても，人間の視覚には限りがあるので系列に小さな周期があったとしても，それを発見することは照難である。そこで次の節では，コレPグラムにより，周期について考えてみたい。§5　xeレログラム勢析文の長さの系列はどの様な周期を持つのであろうか。そのことを知る為に，コレログラム（Corre｝ogram）と呼ばれる系列相関係数のグラフを用いて，分析を試みてみることにする。　　系列根管係数とは，時系列で一定の鋲離だけ離れた，2項の値の間の相間を意味　　している。そして2項間の隔たりをLag（遅れ）という。いま系列をXi，　x2，……，　　X。とすると，遅れ1の系列相関係数は次の様になる。いま，系列X、と，各X、に　　1だけ隔たった系列Xs．εを考える。　　　　　系列x。　系ダ麺x、梶　　　　　　　　Xl　Xl＋l　　　　　　　　X2　　　　　　×2冠　　　　　　　　X3　X3tt　　　このXsとx、．tの間の相関系数が，遅れZの系列相関回数と呼ばれるものであ　　る。そして，この系列椙関係数の値を遅れの関数として，グラフに表わしたもの　　を：レログラムという。数式で蓑現すると，　　　　　　　c（！）：η圭1隷1（κ＄一f・）（為…細を系列共分散（Serial　covariances）　　　　　　　・（1）一器）を系列相関（Serial　COrrelatiOnS）という。　　　　　　　　　　　　一　136　一ここに　　　　　　　　　　　　　　・…一証7類1・・　　　　　　　　　　　　　　ぬ㍉転撫　　r（1）（1＝＝1，2，……，n－1）が標本系列のコレログラムである。　　r（1）が統計学的に有意であるとき，遅れ1で，その系列は簿らかの周期を持つ　と考えられる。　さて，ここで文の長さの推移の系列について，このコレログラムを作るとどうなるであろうか。計回した結果を以下のグラフにまとめてみる。磁9．　6・一一fi9．9）　　　　　　　　　　　fig．6　「焚火涯＝レログラムU??????5?　OL??????? ???? ??｝? ?）?????????? ﹇?』』10??30 4e1，．．ILG§9．7　「城の崎にて」コレpaグラムL?????? ?↓?? ? ?0＝???????〔）???…」??le 203e 4 1，．AG一一@O，　5L一　137　一fig．8「寒山拾得」コレログラム???．??? ?????? ??? ???0???????【?』?。?5?一?????????? ??｝ ????????????? ???10o2e 3efig．9　「高瀬舟」コレログラム2 30　　IAG4e?????5?一10 　　LAG40　グラフで○印のついている点は，梱関係数が危険率5％で有意になっている点である。したがって，○印の点は相関があると考えられる。「焚火」では遅れ1と37で，「城の崎にて」では遅れ12と29で，「寒山捨得」では遅れ16でそれぞれ梱関がありそうである。しかし相関係数が±0．15から±0．20位の値をとり，有意点ぎりぎりであるため，周期があったとしてもはっきりしたものではないだろう。§6　今後の問題点　今まで述べてきたことは，僅か四編の作品についてであった。今後，より多くの作品についてデータを蓄積する必要がある。その為に解決せねぽならないいくつかの間題があるので，それを以下に列記する。　　　　　　　　　　　　　　　一　138　一　i）単位としては飼が適当か。作業上の問題も含めて考えねぽならない。　ii）対話部分の扱いをどうするか。iii）系列相関係数を計算する際　もとの文長の系列が定常（s鱗ionary）（1”　｝　　　であるからか疑わしい。　これらの問題をふまえて，今後多くのデータを検討すれぽ，§3に記した変勤係数も作品の分類に役立つであろう。　また，コレPtグラムについても，多量にデータがあれぽ，型による分類の可能性もより明確になるであろう。　これらについては，今後の調査，硯究に負うところが大きい。　　　　　　　　　　　　参　考　文　献中山傍知郎編　「競代統計学大辞典」東洋経済回報社　1962山内二郎編　　「統計数値表　JSA－1972j　H本規格協会　1972赤池弘次・中川東一郎　rダイナミックシステムの統計的解析と謝御」サイェン　ス社　1972P．G．ホーエン　「初等統計学」培愚意　（浅井　晃・村上正康共訳）ig70温三〉時間軸が移動しても，確率分布には変化がないような不規期変動現象の観測　傭の系列を定常隣系列と呼ぶ。先に述べた系列相関係数は定常であることが醜　鍵となっている。　　　　　　　　　　　　　　一　139　一

A statistical study of sentence-length

https://repository.ninjal.ac.jp/?action=repository_action_common_download&item_id=1055&item_no=1&attribute_id=54&file_no=1

“文の長さ”の統計学的一考察 : 時系列的解釈

Abstract

Similar works

Full text

Available Versions

Academic Repository of the National Institute for Japanese Language and Linguistics / 国立国語研究所学術情報リポジトリ