質の高い翻訳システムを実現するためには，評価，改良を繰り返し行わねばなりません．しかし，人間の評価に頼っていては時間，金銭コストが多大にかかってしまいます．この問題を解決するため，翻訳システムを人間のように正確かつ自動的に評価する仕組みが必要になります．そこで，正解訳とシステム翻訳との間で共通する単語に着目し，それらの出現順を順位相関係数に基づき採点することによって翻訳システムを評価する手法である RIBES (Rank-based Intuitive Bilingual Evaluation Score)を考案しました．人手による評価結果と RIBES による自動評価の結果との間の相関係数は，0.9 を超えており，非常に高い相関が得られました．