transformer_kyoto_ja_en.ipynb

{
  "cells": [
    {
      "cell_type": "markdown",
      "metadata": {
        "colab_type": "text",
        "id": "view-in-github"
      },
      "source": [
        "<a href=\"https://colab.research.google.com/github/Amplil/nlp-test/blob/master/transformer_kyoto_ja_en.ipynb\" target=\"_parent\"><img src=\"https://colab.research.google.com/assets/colab-badge.svg\" alt=\"Open In Colab\"/></a>"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "rBJy3a6lHVR7"
      },
      "source": [
        "transformerによる日本語から英語への機械翻訳\n",
        "\n",
        "コーパスは[http://www.phontron.com/kftt/download/kftt-data-1.0.tar.gz](http://www.phontron.com/kftt/download/kftt-data-1.0.tar.gz)を使う。"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 1,
      "metadata": {},
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "Active code page: 65001\n"
          ]
        }
      ],
      "source": [
        "!chcp 65001"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 4,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "QjH6YU3s3SPc",
        "outputId": "06f6b455-2226-4f8c-f65c-6912b9bb81a2"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            " Volume in drive D is Data\n",
            " Volume Serial Number is 80EB-8E04\n",
            "\n",
            " Directory of d:\\\n",
            "\n",
            "2021/12/07  21:13    <DIR>          data\n",
            "2021/11/22  19:32    <DIR>          program\n",
            "               0 File(s)              0 bytes\n",
            "               2 Dir(s)  1,947,157,053,440 bytes free\n"
          ]
        }
      ],
      "source": [
        "ls"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "0oITzmVBRSnE",
        "outputId": "3a009944-ac46-4bb5-b0fe-fd0afb53a53f"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "Mounted at /content/drive\n"
          ]
        }
      ],
      "source": [
        "from google.colab import drive\n",
        "drive.mount('/content/drive')"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "fsE3FnUb02XQ",
        "outputId": "1189d469-6487-4466-8857-1fb8f0923256"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "/content/drive/.shortcut-targets-by-id/1liJWbv2EhngAj7pixTjzRpv9B-Bz9zCt/Colab Notebooks\n"
          ]
        }
      ],
      "source": [
        "cd \"/content/drive/MyDrive/Colab Notebooks\""
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 2,
      "metadata": {
        "id": "lyt_VJ0yLmjS"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "d:\\\n"
          ]
        }
      ],
      "source": [
        "cd \"d:\\\\\""
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "id": "XG__BRNc266h"
      },
      "outputs": [],
      "source": [
        "import sys\n",
        "sys.path.append(\"/content/drive/MyDrive/Colab Notebooks/packages\")\n",
        "import slacknotice # オリジナルモジュール"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "_fHlI7KmoMvi"
      },
      "source": [
        "## 毎回必要なインストール"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "VAuJPFLAsK8c",
        "outputId": "89793a4f-dff2-4653-c222-c10c5a222a72"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "Collecting OpenNMT-py\n",
            "  Downloading OpenNMT_py-2.2.0-py3-none-any.whl (216 kB)\n",
            "\u001b[K     |████████████████████████████████| 216 kB 5.3 MB/s \n",
            "\u001b[?25hCollecting torchtext==0.5.0\n",
            "  Downloading torchtext-0.5.0-py3-none-any.whl (73 kB)\n",
            "\u001b[K     |████████████████████████████████| 73 kB 1.9 MB/s \n",
            "\u001b[?25hCollecting pyonmttok<2,>=1.23\n",
            "  Downloading pyonmttok-1.29.0-cp37-cp37m-manylinux_2_12_x86_64.manylinux2010_x86_64.whl (16.0 MB)\n",
            "\u001b[K     |████████████████████████████████| 16.0 MB 118 kB/s \n",
            "\u001b[?25hRequirement already satisfied: torch>=1.6.0 in /usr/local/lib/python3.7/dist-packages (from OpenNMT-py) (1.9.0+cu111)\n",
            "Requirement already satisfied: flask in /usr/local/lib/python3.7/dist-packages (from OpenNMT-py) (1.1.4)\n",
            "Collecting configargparse\n",
            "  Downloading ConfigArgParse-1.5.3-py3-none-any.whl (20 kB)\n",
            "Requirement already satisfied: pyyaml in /usr/local/lib/python3.7/dist-packages (from OpenNMT-py) (3.13)\n",
            "Collecting waitress\n",
            "  Downloading waitress-2.0.0-py3-none-any.whl (56 kB)\n",
            "\u001b[K     |████████████████████████████████| 56 kB 4.5 MB/s \n",
            "\u001b[?25hRequirement already satisfied: tensorboard>=2.3 in /usr/local/lib/python3.7/dist-packages (from OpenNMT-py) (2.6.0)\n",
            "Requirement already satisfied: requests in /usr/local/lib/python3.7/dist-packages (from torchtext==0.5.0->OpenNMT-py) (2.23.0)\n",
            "Requirement already satisfied: tqdm in /usr/local/lib/python3.7/dist-packages (from torchtext==0.5.0->OpenNMT-py) (4.62.3)\n",
            "Collecting sentencepiece\n",
            "  Downloading sentencepiece-0.1.96-cp37-cp37m-manylinux_2_17_x86_64.manylinux2014_x86_64.whl (1.2 MB)\n",
            "\u001b[K     |████████████████████████████████| 1.2 MB 39.2 MB/s \n",
            "\u001b[?25hRequirement already satisfied: six in /usr/local/lib/python3.7/dist-packages (from torchtext==0.5.0->OpenNMT-py) (1.15.0)\n",
            "Requirement already satisfied: numpy in /usr/local/lib/python3.7/dist-packages (from torchtext==0.5.0->OpenNMT-py) (1.19.5)\n",
            "Requirement already satisfied: tensorboard-plugin-wit>=1.6.0 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (1.8.0)\n",
            "Requirement already satisfied: werkzeug>=0.11.15 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (1.0.1)\n",
            "Requirement already satisfied: google-auth-oauthlib<0.5,>=0.4.1 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (0.4.6)\n",
            "Requirement already satisfied: tensorboard-data-server<0.7.0,>=0.6.0 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (0.6.1)\n",
            "Requirement already satisfied: protobuf>=3.6.0 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (3.17.3)\n",
            "Requirement already satisfied: setuptools>=41.0.0 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (57.4.0)\n",
            "Requirement already satisfied: google-auth<2,>=1.6.3 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (1.35.0)\n",
            "Requirement already satisfied: wheel>=0.26 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (0.37.0)\n",
            "Requirement already satisfied: markdown>=2.6.8 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (3.3.4)\n",
            "Requirement already satisfied: absl-py>=0.4 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (0.12.0)\n",
            "Requirement already satisfied: grpcio>=1.24.3 in /usr/local/lib/python3.7/dist-packages (from tensorboard>=2.3->OpenNMT-py) (1.41.0)\n",
            "Requirement already satisfied: pyasn1-modules>=0.2.1 in /usr/local/lib/python3.7/dist-packages (from google-auth<2,>=1.6.3->tensorboard>=2.3->OpenNMT-py) (0.2.8)\n",
            "Requirement already satisfied: rsa<5,>=3.1.4 in /usr/local/lib/python3.7/dist-packages (from google-auth<2,>=1.6.3->tensorboard>=2.3->OpenNMT-py) (4.7.2)\n",
            "Requirement already satisfied: cachetools<5.0,>=2.0.0 in /usr/local/lib/python3.7/dist-packages (from google-auth<2,>=1.6.3->tensorboard>=2.3->OpenNMT-py) (4.2.4)\n",
            "Requirement already satisfied: requests-oauthlib>=0.7.0 in /usr/local/lib/python3.7/dist-packages (from google-auth-oauthlib<0.5,>=0.4.1->tensorboard>=2.3->OpenNMT-py) (1.3.0)\n",
            "Requirement already satisfied: importlib-metadata in /usr/local/lib/python3.7/dist-packages (from markdown>=2.6.8->tensorboard>=2.3->OpenNMT-py) (4.8.1)\n",
            "Requirement already satisfied: pyasn1<0.5.0,>=0.4.6 in /usr/local/lib/python3.7/dist-packages (from pyasn1-modules>=0.2.1->google-auth<2,>=1.6.3->tensorboard>=2.3->OpenNMT-py) (0.4.8)\n",
            "Requirement already satisfied: chardet<4,>=3.0.2 in /usr/local/lib/python3.7/dist-packages (from requests->torchtext==0.5.0->OpenNMT-py) (3.0.4)\n",
            "Requirement already satisfied: urllib3!=1.25.0,!=1.25.1,<1.26,>=1.21.1 in /usr/local/lib/python3.7/dist-packages (from requests->torchtext==0.5.0->OpenNMT-py) (1.24.3)\n",
            "Requirement already satisfied: certifi>=2017.4.17 in /usr/local/lib/python3.7/dist-packages (from requests->torchtext==0.5.0->OpenNMT-py) (2021.5.30)\n",
            "Requirement already satisfied: idna<3,>=2.5 in /usr/local/lib/python3.7/dist-packages (from requests->torchtext==0.5.0->OpenNMT-py) (2.10)\n",
            "Requirement already satisfied: oauthlib>=3.0.0 in /usr/local/lib/python3.7/dist-packages (from requests-oauthlib>=0.7.0->google-auth-oauthlib<0.5,>=0.4.1->tensorboard>=2.3->OpenNMT-py) (3.1.1)\n",
            "Requirement already satisfied: typing-extensions in /usr/local/lib/python3.7/dist-packages (from torch>=1.6.0->OpenNMT-py) (3.7.4.3)\n",
            "Requirement already satisfied: Jinja2<3.0,>=2.10.1 in /usr/local/lib/python3.7/dist-packages (from flask->OpenNMT-py) (2.11.3)\n",
            "Requirement already satisfied: click<8.0,>=5.1 in /usr/local/lib/python3.7/dist-packages (from flask->OpenNMT-py) (7.1.2)\n",
            "Requirement already satisfied: itsdangerous<2.0,>=0.24 in /usr/local/lib/python3.7/dist-packages (from flask->OpenNMT-py) (1.1.0)\n",
            "Requirement already satisfied: MarkupSafe>=0.23 in /usr/local/lib/python3.7/dist-packages (from Jinja2<3.0,>=2.10.1->flask->OpenNMT-py) (2.0.1)\n",
            "Requirement already satisfied: zipp>=0.5 in /usr/local/lib/python3.7/dist-packages (from importlib-metadata->markdown>=2.6.8->tensorboard>=2.3->OpenNMT-py) (3.6.0)\n",
            "Installing collected packages: sentencepiece, waitress, torchtext, pyonmttok, configargparse, OpenNMT-py\n",
            "  Attempting uninstall: torchtext\n",
            "    Found existing installation: torchtext 0.10.0\n",
            "    Uninstalling torchtext-0.10.0:\n",
            "      Successfully uninstalled torchtext-0.10.0\n",
            "Successfully installed OpenNMT-py-2.2.0 configargparse-1.5.3 pyonmttok-1.29.0 sentencepiece-0.1.96 torchtext-0.5.0 waitress-2.0.0\n"
          ]
        }
      ],
      "source": [
        "pip install OpenNMT-py"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "eJbUb-KObTEQ"
      },
      "source": [
        "## 前処理"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 2,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 69
        },
        "id": "99mm9WOb1ZRw",
        "outputId": "b0971ef0-ac62-45f1-eeb2-d694034301a6"
      },
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'Known as Sesshu ( 1420 - 1506 ) , he was an ink painter and Zen monk active in the Muromachi period in the latter half of the 15th century , and was called a master painter .\\nHe revolutionized the Japanese ink painting .\\nHe was given the posthumous name \" Toyo \" or \" Sesshu ( 拙宗 ) . \"\\nBorn in Bicchu Province , he moved to Suo Province after entering SShokoku-ji Temple in Kyoto .\\nLater he accompanied a mission to Ming Dynasty China and learned Chinese ink painting .\\nHis works were many , includin'"
            ]
          },
          "execution_count": 2,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/kftt-data-1.0/data/tok/kyoto-train.en', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 86
        },
        "id": "9SHdSoGB1cDw",
        "outputId": "6384ae85-81e2-489c-c5b8-766192878be8"
      },
      "outputs": [
        {
          "data": {
            "application/vnd.google.colaboratory.intrinsic+json": {
              "type": "string"
            },
            "text/plain": [
              "'雪舟 （ せっしゅう 、 1420 年 （ 応永 27 年 ） - 1506 年 （ 永正 3 年 ） ） は 号 で 、 15 世紀 後半 室町 時代 に 活躍 し た 水墨 画 家 ・ 禅僧 で 、 画聖 と も 称え られ る 。\\n日本 の 水墨 画 を 一変 さ せ た 。\\n諱 は 「 等楊 （ とうよう ） 」 、 もしくは 「 拙宗 （ せっしゅう ） 」 と 号 し た 。\\n備中 国 に 生まれ 、 京都 ・ 相国 寺 に 入 っ て から 周防 国 に 移 る 。\\nその 後 遣明 使 に 随行 し て 中国 （ 明 ） に 渡 っ て 中国 の 水墨 画 を 学 ん だ 。\\n作品 は 数 多 く 、 中国 風 の 山水 画 だけ で な く 人物 画 や 花鳥 画 も よ く し た 。\\n大胆 な 構図 と 力強 い 筆線 は 非常 に 個性 的 な 画風 を 作り出 し て い る 。\\n現存 する 作品 の うち 6 点 が 国宝 に 指定 さ れ て お り 、 日本 の 画家 の なか で も 別格 の 評価 を 受け て い る と いえ る 。\\nこの ため 、'"
            ]
          },
          "execution_count": 9,
          "metadata": {
            "tags": []
          },
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/kftt-data-1.0/data/tok/kyoto-train.ja', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 69
        },
        "id": "A9Ij7huJ1PLo",
        "outputId": "c7494a04-5aa3-48a8-9d06-ecf16bd9898d"
      },
      "outputs": [
        {
          "data": {
            "application/vnd.google.colaboratory.intrinsic+json": {
              "type": "string"
            },
            "text/plain": [
              "'Rinzai Zen Buddhism is one of the Chinese five Houses / seven Schools of Zen ( Rinzai , Igyou , Soto , Unmon , Hogan ) and Gigen RINZAI ( ? - 867 ) of Tang was its founder .\\nHe was known as \" RINZAI of Katu ( meaning to help wake up the sleeping mind ) \" and \" General RINZAI \" , and rose to the top of Chinese Zen with his distinctive style .\\nWith its Zen Talks that try to awaken self awareness through study of Koan , it differs from the Silent Zen of the Soto sect , which just does meditation .\\n'"
            ]
          },
          "execution_count": 10,
          "metadata": {
            "tags": []
          },
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/kftt-data-1.0/data/tok/kyoto-dev.en', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 7,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 86
        },
        "id": "es1x2sj30iLB",
        "outputId": "226a9eaf-0e83-49ce-b9a2-57c9fe999bd4"
      },
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'臨済 宗 （ 臨濟 宗 、 りんざい しゅう ） は 、 中国 禅 五 家 七 宗 （ ご け しち しゅう ） （ 臨済 、 潙仰 宗 、 曹洞 宗 、 雲門 宗 、 法眼 宗 ） の ひと つ で 、 唐 の 臨済 義 玄 （ ？ -867 年 ） を 宗祖 と する 。\\n彼 は 『 喝 の 臨済 』 『 臨済 将軍 』 の 異名 で 知 ら れ 、 豪放 な 家風 を 特徴 と し て 中国 禅 興隆 の 頂点 を 極め た 。\\n公案 に 参究 する こと に よ り 見性 し よ う と する 看話 禅 （ かんな ぜん ） で 、 ただ 座禅 する 曹洞 宗 の 黙照 禅 と は この 点 が 異な る 。\\n中国 に おけ る 臨済 宗\\n臨済 宗 は 、 その 名 の 通り 、 会昌 の 廃仏 後 、 唐 末 の 宗祖 臨済 義 玄 に 始ま る 。\\n臨済 は 黄檗 希 運 の 弟子 で あ り 、 河北 省 の 地 を 拠点 と し 、 新興 の 藩鎮 勢力 で あ っ た 成徳 府 藩鎮 の 王 常侍 を 支持 基盤 と し て 宗勢 を 伸張 し た が 、 唐 末 五'"
            ]
          },
          "execution_count": 7,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/kftt-data-1.0/data/tok/kyoto-dev.ja', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 6,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 69
        },
        "id": "S0c5-vyNLTp4",
        "outputId": "22517175-eef9-490b-cf3b-cf23b3eb10e7"
      },
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'Infobox Buddhist\\nDogen was a Zen monk in the early Kamakura period .\\nThe founder of Soto Zen\\nLater in his life he also went by the name Kigen .\\nWithin the sect he is referred to by the honorary title Koso .\\nPosthumously named Bussho Dento Kokushi , or Joyo-Daishi .\\nHe is generally called Dogen Zenji .\\nHe is reputed to have been the one that spread the practices of tooth brushing , face washing , table manners and cleaning in Japan .\\nAnother story has it that he was the first one to bring Moso-ch'"
            ]
          },
          "execution_count": 6,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/kftt-data-1.0/data/tok/kyoto-test.en', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 9,
      "metadata": {},
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'www.snownavi.com\\t0.797\\tThe rainy season began in the southern area of Kyushu around May.31 (Fri) as normal.\\t九州南部は平年並みの5/31(金)頃に梅雨入り。\\nwww.pri.kyoto-u.ac.jp\\t0.796\\tHope Report HOPE report Number:19-065 Preliminary analysis of the Plio/Pleistocene primate fossils from the cave deposits in southern China Report:Masanaru Takai Date:2008/01/11 - 2008/01/17 During my staying in Beijing I visited three institutes: Institute of Vertebrate Paleontology and Paleoanthropology (IVPP), Chinese Academy of Science; Biodiversity Research Institute, Peking University; Institute of Zoology (IOZ), Chinese Academy of Science.\\tHope Report 事業報告 事業番号:19-065 中国南部の洞窟から見つかっている鮮新世〜更新世前半の霊長類化石の解析 報告者:高井 正成 期間:2008/01/11 - 2008/01/17 中国南部の広西壮族自治区を中心とした洞窟堆積物からは、鮮新世から更新世後半の動物化石が豊富に出土することが知られている。申請者は2007年11月に広西壮族自治区西部の崇左にある北京大学崇左生物多様性研究基地において、同施設主任の秦大公氏や中国科学院古脊椎動物・古人類研究所(IVPP)の金昌柱教授やとともに予備的な発掘調査を行い、霊長類を含む多数の動物化石を発見した。\\nyunphoto.net\\t0.795\\tYun Free Stock Photos : No. 9702 The dusk of the Sea of Japan [Japan / Shimane] \\tゆん'"
            ]
          },
          "execution_count": 9,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "#f = open('./data/en-ja/en-ja.bicleaner05.txt', 'r',encoding=\"utf-8\")\n",
        "#f.read(1000)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 9,
      "metadata": {},
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'\\ufeffThe rainy season began in the southern area of Kyushu around May.31 (Fri) as normal.\\nHope Report HOPE report Number:19-065 Preliminary analysis of the Plio/Pleistocene primate fossils from the cave deposits in southern China Report:Masanaru Takai Date:2008/01/11 - 2008/01/17 During my staying in Beijing I visited three institutes: Institute of Vertebrate Paleontology and Paleoanthropology (IVPP), Chinese Academy of Science; Biodiversity Research Institute, Peking University; Institute of Zoolog'"
            ]
          },
          "execution_count": 9,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/JParaCrawl/en.txt', 'r',encoding=\"utf-8\")\n",
        "f.read(500)"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 4,
      "metadata": {},
      "outputs": [
        {
          "data": {
            "text/plain": [
              "'\\ufeff九州南部は平年並みの5/31(金)頃に梅雨入り。\\nHope Report 事業報告 事業番号:19-065 中国南部の洞窟から見つかっている鮮新世〜更新世前半の霊長類化石の解析 報告者:高井 正成 期間:2008/01/11 - 2008/01/17 中国南部の広西壮族自治区を中心とした洞窟堆積物からは、鮮新世から更新世後半の動物化石が豊富に出土することが知られている。申請者は2007年11月に広西壮族自治区西部の崇左にある北京大学崇左生物多様性研究基地において、同施設主任の秦大公氏や中国科学院古脊椎動物・古人類研究所(IVPP)の金昌柱教授やとともに予備的な発掘調査を行い、霊長類を含む多数の動物化石を発見した。\\nゆんフリー写真素材集 : No. 9702 日本海の夕暮れ [日本 / 島根]\\nゆんフリー写真素材集 : No. 937 クリスマスツリーと青空 [日本 / 北海道]\\nゆんフリー写真素材集 : No. 852 アルカトラズ島全景 [アメリカ / サンフランシスコ]\\nゆんフリー写真素材集 : No. 8200 魚の顔 [アメリカ / サンフランシスコ]\\nゆんフリー写真素材集 : No. 8011 富良野の直線道路 [日本 / 北海道]\\nゆんフリー写真素材集 : No. 7852 龍華寺 額 [中国 / 上海]\\nゆんフリー写真素材集 : No. 751 韓国の桜 [韓国 / ソウル]\\nゆんフリー写真素材集 : No. 7368 どんと焼き [日本 / 東京]\\nゆんフリー写真素材集 : No. 7337 皇居のお堀 [日本 / 東京]\\nゆんフリー写真素材集 : No. 6944 韓国の籠 [韓国 / 済州島]\\nゆんフリー写真素材集 : No. 6943 韓国のソロバン [韓国 / 済州島]\\nゆんフリー写真素材集 : No. 6838 韓国の壺 [韓国 / 済州島]\\nゆんフリー写真素材集 : No. 6677 ウトナイ湖の静寂 [日本 / 北海道]\\nゆんフリー写真素材集 : No. 6630 笹に雪 [日本 / 北海道]\\nゆんフリー写真素材集 : No. 5899 梅園の白梅 [日本 / 東京]\\nゆんフリー写真素材集 : No. 5898 梅園の白梅 [日本 / 東京]\\nゆんフリー写真素材集 : No. 4970 韓国の公衆電話 [韓国 / ソウル]\\nゆんフリー'"
            ]
          },
          "execution_count": 4,
          "metadata": {},
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/JParaCrawl/ja.txt', 'r',encoding=\"utf-8\")\n",
        "f.read(1000)"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "EZRP2zR1ygWa"
      },
      "source": [
        "シリアライズ化"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 3,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "414Gol-7bWYX",
        "outputId": "2c53c79c-c8a8-4b3e-956a-2fdb28f254b2"
      },
      "outputs": [
        {
          "name": "stderr",
          "output_type": "stream",
          "text": [
            "Corpus corpus_1's weight should be given. We default it to 1 for you.\n",
            "[2021-12-07 21:26:20,080 INFO] Counter vocab from 5000 samples.\n",
            "[2021-12-07 21:26:20,080 INFO] Build vocab on 5000 transformed examples/corpus.\n",
            "[2021-12-07 21:26:21,641 INFO] Counters src:13637\n",
            "[2021-12-07 21:26:21,641 INFO] Counters tgt:12199\n",
            "Traceback (most recent call last):\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\runpy.py\", line 194, in _run_module_as_main\n",
            "    return _run_code(code, main_globals, None,\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\runpy.py\", line 87, in _run_code\n",
            "    exec(code, run_globals)\n",
            "  File \"C:\\Users\\aikot\\anaconda3\\Scripts\\onmt_build_vocab.exe\\__main__.py\", line 7, in <module>\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\site-packages\\onmt\\bin\\build_vocab.py\", line 71, in main\n",
            "    build_vocab_main(opts)\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\site-packages\\onmt\\bin\\build_vocab.py\", line 55, in build_vocab_main\n",
            "    save_counter(src_counter, opts.src_vocab)\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\site-packages\\onmt\\bin\\build_vocab.py\", line 44, in save_counter\n",
            "    check_path(save_path, exist_ok=opts.overwrite, log=logger.warning)\n",
            "  File \"c:\\users\\aikot\\anaconda3\\lib\\site-packages\\onmt\\utils\\misc.py\", line 17, in check_path\n",
            "    raise IOError(f\"path {path} exists, stop.\")\n",
            "OSError: path data/kftt-data-1.0/run/example.vocab.src exists, stop.\n"
          ]
        }
      ],
      "source": [
        "!onmt_build_vocab -config data/transformer_kyoto_en_ja.yml"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 4,
      "metadata": {},
      "outputs": [
        {
          "name": "stderr",
          "output_type": "stream",
          "text": [
            "Corpus corpus_1's weight should be given. We default it to 1 for you.\n",
            "[2022-01-11 03:15:47,051 INFO] Counter vocab from 5000 samples.\n",
            "[2022-01-11 03:15:47,052 INFO] Build vocab on 5000 transformed examples/corpus.\n",
            "[2022-01-11 03:15:48,576 INFO] Counters src:3598\n",
            "[2022-01-11 03:15:48,576 INFO] Counters tgt:4137\n"
          ]
        }
      ],
      "source": [
        "!onmt_build_vocab -config program/nlp-test/OpenNMT_yaml/transformer_jparacrawl_en_ja.yml"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "id": "_EcTrGeqWWLG"
      },
      "outputs": [],
      "source": [
        "# 恐らく前のバージョンでのコマンドであるため実行できない\n",
        "#!python OpenNMT-py/preprocess.py -train_src '/content/OpenNMT-py/data/'src-train.txt -train_tgt '/content/OpenNMT-py/data/'tgt-train.txt -valid_src '/content/OpenNMT-py/data/'src-val.txt -valid_tgt '/content/OpenNMT-py/data/'tgt-val.txt -save_data '/content/OpenNMT-py/data/'demo"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "id": "grQn41WkUrxO"
      },
      "outputs": [],
      "source": [
        "# 恐らく前のバージョンでのコマンドであるため実行できない\n",
        "#!python preprocess.py -train_src train.en.atok -train_tgt train.ja.atok -valid_src dev.en.atok -valid_tgt dev.ja.atok -save_data preprocessed_dataset"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "zeVGmxivgPiX"
      },
      "source": [
        "## 学習"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 103
        },
        "id": "30ejsFOQ5yg-",
        "outputId": "169cbacc-68c0-459b-e4ee-8fae2096c3a1"
      },
      "outputs": [
        {
          "data": {
            "application/vnd.google.colaboratory.intrinsic+json": {
              "type": "string"
            },
            "text/plain": [
              "\"## Where the samples will be written\\nsave_data: data/kftt-data-1.0/run/example\\n## Where the vocab(s) will be written\\nsrc_vocab: data/kftt-data-1.0/run/example.vocab.src\\ntgt_vocab: data/kftt-data-1.0/run/example.vocab.tgt\\n# Prevent overwriting existing files in the folder\\noverwrite: False\\n\\n# OpenNMT-py/preprocess.py\\ndata:\\n    corpus_1:\\n        path_src: data/kftt-data-1.0/data/tok/kyoto-train.en\\n        path_tgt: data/kftt-data-1.0/data/tok/kyoto-train.ja\\n    valid:\\n        path_src: data/kftt-data-1.0/data/tok/kyoto-dev.en\\n        path_tgt: data/kftt-data-1.0/data/tok/kyoto-dev.ja\\n\\n# OpenNMT-py/train.py\\nsave_model: data/kftt-data-1.0/run/model\\nlayers: 6\\nrnn_size: 512\\nword_vec_size: 512\\ntransformer_ff: 2048\\nheads: 8\\nencoder_type: transformer\\ndecoder_type: transformer\\nposition_encoding: 'true'\\n#train_steps: 200000\\ntrain_steps: 15000\\nmax_generator_batches: 2\\ndropout: 0.1\\nbatch_size: 4096\\nbatch_type: tokens\\nnormalization: tokens\\naccum_count: 2\\noptim: adam\\nadam_beta2: 0.998\\ndecay_method: noam\\nwarmup_steps: 8000\\nlearning_rate: 2\\nmax_grad_norm: 0\\nparam_init: 0\\nparam_init_glorot: 'true'\\nlabel_smoothing: 0.1\\n#valid_steps: 10000\\nvalid_steps: 5000\\nsave_checkpoint_steps: 40000\\nworld_size: 1\\ngpu_ranks: 0 \""
            ]
          },
          "execution_count": 15,
          "metadata": {
            "tags": []
          },
          "output_type": "execute_result"
        }
      ],
      "source": [
        "f = open('./data/transformer_kyoto_en_ja.yml', 'r')\n",
        "f.read()"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "7JoobMnfgo99",
        "outputId": "00fbbe79-bd7c-4b41-dfc1-a356369d9001"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "[2021-08-14 06:19:29,968 INFO] Missing transforms field for corpus_1 data, set to default: [].\n",
            "[2021-08-14 06:19:29,970 WARNING] Corpus corpus_1's weight should be given. We default it to 1 for you.\n",
            "[2021-08-14 06:19:29,970 INFO] Missing transforms field for valid data, set to default: [].\n",
            "[2021-08-14 06:19:29,971 INFO] Parsed 2 corpora from -data.\n",
            "[2021-08-14 06:19:29,971 INFO] Get special vocabs from Transforms: {'src': set(), 'tgt': set()}.\n",
            "[2021-08-14 06:19:29,972 INFO] Loading vocab from text file...\n",
            "[2021-08-14 06:19:29,972 INFO] Loading src vocabulary from data/kftt-data-1.0/run/example.vocab.src\n",
            "[2021-08-14 06:19:30,378 INFO] Loaded src vocab has 13637 tokens.\n",
            "[2021-08-14 06:19:30,384 INFO] Loading tgt vocabulary from data/kftt-data-1.0/run/example.vocab.tgt\n",
            "[2021-08-14 06:19:30,770 INFO] Loaded tgt vocab has 12199 tokens.\n",
            "[2021-08-14 06:19:30,775 INFO] Building fields with vocab in counters...\n",
            "[2021-08-14 06:19:30,792 INFO]  * tgt vocab size: 12203.\n",
            "[2021-08-14 06:19:30,808 INFO]  * src vocab size: 13639.\n",
            "[2021-08-14 06:19:30,809 INFO]  * src vocab size = 13639\n",
            "[2021-08-14 06:19:30,809 INFO]  * tgt vocab size = 12203\n",
            "[2021-08-14 06:19:30,811 INFO] Building model...\n",
            "[2021-08-14 06:19:34,665 INFO] NMTModel(\n",
            "  (encoder): TransformerEncoder(\n",
            "    (embeddings): Embeddings(\n",
            "      (make_embedding): Sequential(\n",
            "        (emb_luts): Elementwise(\n",
            "          (0): Embedding(13639, 512, padding_idx=1)\n",
            "        )\n",
            "        (pe): PositionalEncoding(\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "      )\n",
            "    )\n",
            "    (transformer): ModuleList(\n",
            "      (0): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "      (1): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "      (2): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "      (3): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "      (4): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "      (5): TransformerEncoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (dropout): Dropout(p=0.1, inplace=False)\n",
            "      )\n",
            "    )\n",
            "    (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "  )\n",
            "  (decoder): TransformerDecoder(\n",
            "    (embeddings): Embeddings(\n",
            "      (make_embedding): Sequential(\n",
            "        (emb_luts): Elementwise(\n",
            "          (0): Embedding(12203, 512, padding_idx=1)\n",
            "        )\n",
            "        (pe): PositionalEncoding(\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "      )\n",
            "    )\n",
            "    (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "    (transformer_layers): ModuleList(\n",
            "      (0): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "      (1): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "      (2): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "      (3): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "      (4): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "      (5): TransformerDecoderLayer(\n",
            "        (self_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (feed_forward): PositionwiseFeedForward(\n",
            "          (w_1): Linear(in_features=512, out_features=2048, bias=True)\n",
            "          (w_2): Linear(in_features=2048, out_features=512, bias=True)\n",
            "          (layer_norm): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "          (dropout_1): Dropout(p=0.1, inplace=False)\n",
            "          (dropout_2): Dropout(p=0.1, inplace=False)\n",
            "        )\n",
            "        (layer_norm_1): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "        (drop): Dropout(p=0.1, inplace=False)\n",
            "        (context_attn): MultiHeadedAttention(\n",
            "          (linear_keys): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_values): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (linear_query): Linear(in_features=512, out_features=512, bias=True)\n",
            "          (softmax): Softmax(dim=-1)\n",
            "          (dropout): Dropout(p=0.1, inplace=False)\n",
            "          (final_linear): Linear(in_features=512, out_features=512, bias=True)\n",
            "        )\n",
            "        (layer_norm_2): LayerNorm((512,), eps=1e-06, elementwise_affine=True)\n",
            "      )\n",
            "    )\n",
            "  )\n",
            "  (generator): Sequential(\n",
            "    (0): Linear(in_features=512, out_features=12203, bias=True)\n",
            "    (1): Cast()\n",
            "    (2): LogSoftmax(dim=-1)\n",
            "  )\n",
            ")\n",
            "[2021-08-14 06:19:34,759 INFO] encoder: 25898496\n",
            "[2021-08-14 06:19:34,759 INFO] decoder: 37733291\n",
            "[2021-08-14 06:19:34,759 INFO] * number of parameters: 63631787\n",
            "[2021-08-14 06:19:34,763 INFO] Starting training on GPU: [0]\n",
            "[2021-08-14 06:19:34,763 INFO] Start training loop and validate every 5000 steps...\n",
            "[2021-08-14 06:19:34,764 INFO] corpus_1's transforms: TransformPipe()\n",
            "[2021-08-14 06:19:34,765 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 06:20:11,496 INFO] Step 50/15000; acc:   1.77; ppl: 2946.70; xent: 7.99; lr: 0.00001; 5513/6052 tok/s;     37 sec\n",
            "[2021-08-14 06:20:48,748 INFO] Step 100/15000; acc:   7.74; ppl: 1639.79; xent: 7.40; lr: 0.00001; 5559/5688 tok/s;     74 sec\n",
            "[2021-08-14 06:21:27,092 INFO] Step 150/15000; acc:   7.77; ppl: 1056.65; xent: 6.96; lr: 0.00002; 5343/5689 tok/s;    112 sec\n",
            "[2021-08-14 06:22:06,255 INFO] Step 200/15000; acc:  12.68; ppl: 526.20; xent: 6.27; lr: 0.00002; 4985/5545 tok/s;    151 sec\n",
            "[2021-08-14 06:22:45,199 INFO] Step 250/15000; acc:  14.90; ppl: 243.25; xent: 5.49; lr: 0.00003; 5431/5901 tok/s;    190 sec\n",
            "[2021-08-14 06:23:24,977 INFO] Step 300/15000; acc:  15.74; ppl: 143.75; xent: 4.97; lr: 0.00004; 5162/5658 tok/s;    230 sec\n",
            "[2021-08-14 06:24:05,441 INFO] Step 350/15000; acc:  19.62; ppl: 91.52; xent: 4.52; lr: 0.00004; 5222/5696 tok/s;    271 sec\n",
            "[2021-08-14 06:24:45,274 INFO] Step 400/15000; acc:  24.57; ppl: 58.03; xent: 4.06; lr: 0.00005; 5204/5948 tok/s;    311 sec\n",
            "[2021-08-14 06:25:25,353 INFO] Step 450/15000; acc:  27.26; ppl: 46.09; xent: 3.83; lr: 0.00006; 5131/5771 tok/s;    351 sec\n",
            "[2021-08-14 06:26:04,977 INFO] Step 500/15000; acc:  27.57; ppl: 42.23; xent: 3.74; lr: 0.00006; 4985/5682 tok/s;    390 sec\n",
            "[2021-08-14 06:26:45,262 INFO] Step 550/15000; acc:  28.82; ppl: 40.09; xent: 3.69; lr: 0.00007; 5174/5647 tok/s;    430 sec\n",
            "[2021-08-14 06:27:25,549 INFO] Step 600/15000; acc:  31.11; ppl: 32.23; xent: 3.47; lr: 0.00007; 5066/5619 tok/s;    471 sec\n",
            "[2021-08-14 06:28:05,573 INFO] Step 650/15000; acc:  31.29; ppl: 33.66; xent: 3.52; lr: 0.00008; 5230/5461 tok/s;    511 sec\n",
            "[2021-08-14 06:28:45,698 INFO] Step 700/15000; acc:  31.74; ppl: 31.96; xent: 3.46; lr: 0.00009; 5031/5650 tok/s;    551 sec\n",
            "[2021-08-14 06:29:25,468 INFO] Step 750/15000; acc:  31.88; ppl: 31.51; xent: 3.45; lr: 0.00009; 5009/5499 tok/s;    591 sec\n",
            "[2021-08-14 06:30:05,094 INFO] Step 800/15000; acc:  31.74; ppl: 32.75; xent: 3.49; lr: 0.00010; 5019/5494 tok/s;    630 sec\n",
            "[2021-08-14 06:30:45,316 INFO] Step 850/15000; acc:  33.46; ppl: 27.49; xent: 3.31; lr: 0.00011; 5121/5329 tok/s;    671 sec\n",
            "[2021-08-14 06:31:25,517 INFO] Step 900/15000; acc:  34.12; ppl: 26.16; xent: 3.26; lr: 0.00011; 5111/5366 tok/s;    711 sec\n",
            "[2021-08-14 06:32:06,981 INFO] Step 950/15000; acc:  34.36; ppl: 27.62; xent: 3.32; lr: 0.00012; 5557/5353 tok/s;    752 sec\n",
            "[2021-08-14 06:32:46,854 INFO] Step 1000/15000; acc:  35.51; ppl: 26.24; xent: 3.27; lr: 0.00012; 5105/5672 tok/s;    792 sec\n",
            "[2021-08-14 06:33:27,862 INFO] Step 1050/15000; acc:  33.90; ppl: 27.26; xent: 3.31; lr: 0.00013; 5420/5764 tok/s;    833 sec\n",
            "[2021-08-14 06:34:09,244 INFO] Step 1100/15000; acc:  34.46; ppl: 24.82; xent: 3.21; lr: 0.00014; 5360/5731 tok/s;    874 sec\n",
            "[2021-08-14 06:34:49,673 INFO] Step 1150/15000; acc:  35.84; ppl: 22.71; xent: 3.12; lr: 0.00014; 5176/5634 tok/s;    915 sec\n",
            "[2021-08-14 06:35:30,896 INFO] Step 1200/15000; acc:  35.87; ppl: 23.37; xent: 3.15; lr: 0.00015; 5315/5735 tok/s;    956 sec\n",
            "[2021-08-14 06:36:11,869 INFO] Step 1250/15000; acc:  35.53; ppl: 23.47; xent: 3.16; lr: 0.00015; 5052/5664 tok/s;    997 sec\n",
            "[2021-08-14 06:36:38,632 WARNING] Empty line exists in corpus_1#204445.\n",
            "[2021-08-14 06:36:51,410 INFO] Step 1300/15000; acc:  36.78; ppl: 21.56; xent: 3.07; lr: 0.00016; 4888/5603 tok/s;   1037 sec\n",
            "[2021-08-14 06:37:32,563 INFO] Step 1350/15000; acc:  36.65; ppl: 21.04; xent: 3.05; lr: 0.00017; 5223/5740 tok/s;   1078 sec\n",
            "[2021-08-14 06:38:13,173 INFO] Step 1400/15000; acc:  37.64; ppl: 19.70; xent: 2.98; lr: 0.00017; 5180/5649 tok/s;   1118 sec\n",
            "[2021-08-14 06:38:53,370 INFO] Step 1450/15000; acc:  37.05; ppl: 20.68; xent: 3.03; lr: 0.00018; 5136/5800 tok/s;   1159 sec\n",
            "[2021-08-14 06:39:34,553 INFO] Step 1500/15000; acc:  37.82; ppl: 19.13; xent: 2.95; lr: 0.00019; 5239/5871 tok/s;   1200 sec\n",
            "[2021-08-14 06:40:15,410 INFO] Step 1550/15000; acc:  37.64; ppl: 19.78; xent: 2.98; lr: 0.00019; 5101/5605 tok/s;   1241 sec\n",
            "[2021-08-14 06:40:55,173 INFO] Step 1600/15000; acc:  38.14; ppl: 19.74; xent: 2.98; lr: 0.00020; 5124/5336 tok/s;   1280 sec\n",
            "[2021-08-14 06:41:35,222 INFO] Step 1650/15000; acc:  38.72; ppl: 18.39; xent: 2.91; lr: 0.00020; 5001/5420 tok/s;   1320 sec\n",
            "[2021-08-14 06:42:15,040 INFO] Step 1700/15000; acc:  38.80; ppl: 18.67; xent: 2.93; lr: 0.00021; 4964/5590 tok/s;   1360 sec\n",
            "[2021-08-14 06:42:55,557 INFO] Step 1750/15000; acc:  40.62; ppl: 16.10; xent: 2.78; lr: 0.00022; 5151/5480 tok/s;   1401 sec\n",
            "[2021-08-14 06:43:36,005 INFO] Step 1800/15000; acc:  43.56; ppl: 13.04; xent: 2.57; lr: 0.00022; 5183/5215 tok/s;   1441 sec\n",
            "[2021-08-14 06:44:16,158 INFO] Step 1850/15000; acc:  46.05; ppl: 11.75; xent: 2.46; lr: 0.00023; 5125/5112 tok/s;   1481 sec\n",
            "[2021-08-14 06:44:56,497 INFO] Step 1900/15000; acc:  43.02; ppl: 13.88; xent: 2.63; lr: 0.00023; 5235/5279 tok/s;   1522 sec\n",
            "[2021-08-14 06:45:36,644 INFO] Step 1950/15000; acc:  48.60; ppl: 10.06; xent: 2.31; lr: 0.00024; 5162/5035 tok/s;   1562 sec\n",
            "[2021-08-14 06:46:16,983 INFO] Step 2000/15000; acc:  43.32; ppl: 13.34; xent: 2.59; lr: 0.00025; 5247/5482 tok/s;   1602 sec\n",
            "[2021-08-14 06:46:56,764 INFO] Step 2050/15000; acc:  46.87; ppl: 11.07; xent: 2.40; lr: 0.00025; 5153/5183 tok/s;   1642 sec\n",
            "[2021-08-14 06:47:36,465 INFO] Step 2100/15000; acc:  43.45; ppl: 13.07; xent: 2.57; lr: 0.00026; 5084/5398 tok/s;   1682 sec\n",
            "[2021-08-14 06:48:16,784 INFO] Step 2150/15000; acc:  43.61; ppl: 12.57; xent: 2.53; lr: 0.00027; 5252/5636 tok/s;   1722 sec\n",
            "[2021-08-14 06:48:41,776 WARNING] Empty line exists in corpus_1#339047.\n",
            "[2021-08-14 06:48:57,191 INFO] Step 2200/15000; acc:  44.86; ppl: 11.81; xent: 2.47; lr: 0.00027; 5198/5486 tok/s;   1762 sec\n",
            "[2021-08-14 06:49:37,161 INFO] Step 2250/15000; acc:  47.08; ppl: 10.58; xent: 2.36; lr: 0.00028; 5205/5373 tok/s;   1802 sec\n",
            "[2021-08-14 06:50:17,331 INFO] Step 2300/15000; acc:  47.63; ppl: 10.51; xent: 2.35; lr: 0.00028; 5280/5381 tok/s;   1843 sec\n",
            "[2021-08-14 06:50:57,499 INFO] Step 2350/15000; acc:  46.48; ppl: 11.14; xent: 2.41; lr: 0.00029; 5081/5223 tok/s;   1883 sec\n",
            "[2021-08-14 06:51:37,325 INFO] Step 2400/15000; acc:  51.16; ppl:  8.57; xent: 2.15; lr: 0.00030; 5094/5122 tok/s;   1923 sec\n",
            "[2021-08-14 06:52:18,131 INFO] Step 2450/15000; acc:  45.80; ppl: 11.76; xent: 2.46; lr: 0.00030; 5359/5707 tok/s;   1963 sec\n",
            "[2021-08-14 06:52:59,519 INFO] Step 2500/15000; acc:  46.46; ppl: 10.76; xent: 2.38; lr: 0.00031; 5526/5870 tok/s;   2005 sec\n",
            "[2021-08-14 06:53:38,277 INFO] Step 2550/15000; acc:  41.85; ppl: 15.63; xent: 2.75; lr: 0.00032; 4876/5560 tok/s;   2044 sec\n",
            "[2021-08-14 06:54:18,597 INFO] Step 2600/15000; acc:  44.42; ppl: 13.71; xent: 2.62; lr: 0.00032; 5246/5542 tok/s;   2084 sec\n",
            "[2021-08-14 06:54:58,560 INFO] Step 2650/15000; acc:  43.49; ppl: 13.99; xent: 2.64; lr: 0.00033; 5153/5335 tok/s;   2124 sec\n",
            "[2021-08-14 06:55:39,085 INFO] Step 2700/15000; acc:  42.41; ppl: 13.48; xent: 2.60; lr: 0.00033; 5079/5580 tok/s;   2164 sec\n",
            "[2021-08-14 06:56:19,912 INFO] Step 2750/15000; acc:  41.04; ppl: 14.27; xent: 2.66; lr: 0.00034; 5239/5564 tok/s;   2205 sec\n",
            "[2021-08-14 06:56:31,363 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 06:57:00,075 INFO] Step 2800/15000; acc:  39.94; ppl: 19.03; xent: 2.95; lr: 0.00035; 5108/5572 tok/s;   2245 sec\n",
            "[2021-08-14 06:57:40,398 INFO] Step 2850/15000; acc:  42.39; ppl: 16.36; xent: 2.80; lr: 0.00035; 5135/5314 tok/s;   2286 sec\n",
            "[2021-08-14 06:58:20,609 INFO] Step 2900/15000; acc:  42.54; ppl: 15.26; xent: 2.73; lr: 0.00036; 5115/5265 tok/s;   2326 sec\n",
            "[2021-08-14 06:58:59,895 INFO] Step 2950/15000; acc:  41.03; ppl: 15.54; xent: 2.74; lr: 0.00036; 4975/5478 tok/s;   2365 sec\n",
            "[2021-08-14 06:59:39,444 INFO] Step 3000/15000; acc:  43.88; ppl: 12.75; xent: 2.55; lr: 0.00037; 5124/5621 tok/s;   2405 sec\n",
            "[2021-08-14 07:00:19,180 INFO] Step 3050/15000; acc:  44.01; ppl: 12.42; xent: 2.52; lr: 0.00038; 5216/5785 tok/s;   2444 sec\n",
            "[2021-08-14 07:00:59,367 INFO] Step 3100/15000; acc:  42.40; ppl: 13.43; xent: 2.60; lr: 0.00038; 5238/5593 tok/s;   2485 sec\n",
            "[2021-08-14 07:01:39,516 INFO] Step 3150/15000; acc:  43.49; ppl: 12.42; xent: 2.52; lr: 0.00039; 5198/5823 tok/s;   2525 sec\n",
            "[2021-08-14 07:02:19,419 INFO] Step 3200/15000; acc:  43.22; ppl: 12.06; xent: 2.49; lr: 0.00040; 5201/5871 tok/s;   2565 sec\n",
            "[2021-08-14 07:02:59,493 INFO] Step 3250/15000; acc:  44.40; ppl: 11.34; xent: 2.43; lr: 0.00040; 4966/5660 tok/s;   2605 sec\n",
            "[2021-08-14 07:03:39,663 INFO] Step 3300/15000; acc:  43.13; ppl: 12.25; xent: 2.51; lr: 0.00041; 5087/5597 tok/s;   2645 sec\n",
            "[2021-08-14 07:04:19,487 INFO] Step 3350/15000; acc:  44.60; ppl: 11.05; xent: 2.40; lr: 0.00041; 5058/5712 tok/s;   2685 sec\n",
            "[2021-08-14 07:04:59,753 INFO] Step 3400/15000; acc:  44.49; ppl: 11.16; xent: 2.41; lr: 0.00042; 5119/5474 tok/s;   2725 sec\n",
            "[2021-08-14 07:05:39,643 INFO] Step 3450/15000; acc:  44.66; ppl: 11.44; xent: 2.44; lr: 0.00043; 5232/5577 tok/s;   2765 sec\n",
            "[2021-08-14 07:06:19,357 INFO] Step 3500/15000; acc:  42.83; ppl: 12.57; xent: 2.53; lr: 0.00043; 4930/5540 tok/s;   2805 sec\n",
            "[2021-08-14 07:06:59,302 INFO] Step 3550/15000; acc:  44.25; ppl: 11.86; xent: 2.47; lr: 0.00044; 5050/5629 tok/s;   2845 sec\n",
            "[2021-08-14 07:07:40,185 INFO] Step 3600/15000; acc:  46.38; ppl: 10.05; xent: 2.31; lr: 0.00044; 5099/5397 tok/s;   2885 sec\n",
            "[2021-08-14 07:08:19,873 INFO] Step 3650/15000; acc:  47.79; ppl:  9.30; xent: 2.23; lr: 0.00045; 4925/5175 tok/s;   2925 sec\n",
            "[2021-08-14 07:09:00,517 INFO] Step 3700/15000; acc:  47.17; ppl:  9.59; xent: 2.26; lr: 0.00046; 5277/5265 tok/s;   2966 sec\n",
            "[2021-08-14 07:09:41,594 INFO] Step 3750/15000; acc:  46.62; ppl: 10.14; xent: 2.32; lr: 0.00046; 5443/5575 tok/s;   3007 sec\n",
            "[2021-08-14 07:10:21,842 INFO] Step 3800/15000; acc:  47.28; ppl:  9.82; xent: 2.28; lr: 0.00047; 5123/5606 tok/s;   3047 sec\n",
            "[2021-08-14 07:11:03,629 INFO] Step 3850/15000; acc:  43.49; ppl: 11.27; xent: 2.42; lr: 0.00048; 5465/5762 tok/s;   3089 sec\n",
            "[2021-08-14 07:11:44,331 INFO] Step 3900/15000; acc:  45.00; ppl: 10.35; xent: 2.34; lr: 0.00048; 5253/5662 tok/s;   3130 sec\n",
            "[2021-08-14 07:12:25,866 INFO] Step 3950/15000; acc:  44.79; ppl: 10.71; xent: 2.37; lr: 0.00049; 5285/5714 tok/s;   3171 sec\n",
            "[2021-08-14 07:13:06,390 INFO] Step 4000/15000; acc:  45.13; ppl: 10.71; xent: 2.37; lr: 0.00049; 5211/5716 tok/s;   3212 sec\n",
            "[2021-08-14 07:13:46,016 INFO] Step 4050/15000; acc:  44.41; ppl: 10.92; xent: 2.39; lr: 0.00050; 4797/5408 tok/s;   3251 sec\n",
            "[2021-08-14 07:13:58,208 WARNING] Empty line exists in corpus_1#204445.\n",
            "[2021-08-14 07:14:26,717 INFO] Step 4100/15000; acc:  44.35; ppl: 10.98; xent: 2.40; lr: 0.00051; 5160/5836 tok/s;   3292 sec\n",
            "[2021-08-14 07:15:07,668 INFO] Step 4150/15000; acc:  45.27; ppl: 10.25; xent: 2.33; lr: 0.00051; 5173/5679 tok/s;   3333 sec\n",
            "[2021-08-14 07:15:48,421 INFO] Step 4200/15000; acc:  46.30; ppl:  9.80; xent: 2.28; lr: 0.00052; 5227/5737 tok/s;   3374 sec\n",
            "[2021-08-14 07:16:29,252 INFO] Step 4250/15000; acc:  44.86; ppl: 10.57; xent: 2.36; lr: 0.00053; 5144/5950 tok/s;   3414 sec\n",
            "[2021-08-14 07:17:10,459 INFO] Step 4300/15000; acc:  45.88; ppl: 10.05; xent: 2.31; lr: 0.00053; 5131/5696 tok/s;   3456 sec\n",
            "[2021-08-14 07:17:50,914 INFO] Step 4350/15000; acc:  44.97; ppl: 10.69; xent: 2.37; lr: 0.00054; 5113/5468 tok/s;   3496 sec\n",
            "[2021-08-14 07:18:31,121 INFO] Step 4400/15000; acc:  46.17; ppl: 10.18; xent: 2.32; lr: 0.00054; 5189/5428 tok/s;   3536 sec\n",
            "[2021-08-14 07:19:10,664 INFO] Step 4450/15000; acc:  45.73; ppl: 10.45; xent: 2.35; lr: 0.00055; 4862/5413 tok/s;   3576 sec\n",
            "[2021-08-14 07:19:50,716 INFO] Step 4500/15000; acc:  48.80; ppl:  8.73; xent: 2.17; lr: 0.00056; 5000/5577 tok/s;   3616 sec\n",
            "[2021-08-14 07:20:31,467 INFO] Step 4550/15000; acc:  50.58; ppl:  7.76; xent: 2.05; lr: 0.00056; 5316/5431 tok/s;   3657 sec\n",
            "[2021-08-14 07:21:11,593 INFO] Step 4600/15000; acc:  53.73; ppl:  6.72; xent: 1.90; lr: 0.00057; 5134/5134 tok/s;   3697 sec\n",
            "[2021-08-14 07:21:51,489 INFO] Step 4650/15000; acc:  54.13; ppl:  6.75; xent: 1.91; lr: 0.00057; 5213/5216 tok/s;   3737 sec\n",
            "[2021-08-14 07:22:31,555 INFO] Step 4700/15000; acc:  52.64; ppl:  7.24; xent: 1.98; lr: 0.00058; 5253/5212 tok/s;   3777 sec\n",
            "[2021-08-14 07:23:11,394 INFO] Step 4750/15000; acc:  54.01; ppl:  6.71; xent: 1.90; lr: 0.00059; 5296/5437 tok/s;   3817 sec\n",
            "[2021-08-14 07:23:50,531 INFO] Step 4800/15000; acc:  55.06; ppl:  6.36; xent: 1.85; lr: 0.00059; 5219/5336 tok/s;   3856 sec\n",
            "[2021-08-14 07:24:30,384 INFO] Step 4850/15000; acc:  53.66; ppl:  6.98; xent: 1.94; lr: 0.00060; 5248/5232 tok/s;   3896 sec\n",
            "[2021-08-14 07:25:10,138 INFO] Step 4900/15000; acc:  49.12; ppl:  8.47; xent: 2.14; lr: 0.00061; 5222/5694 tok/s;   3935 sec\n",
            "[2021-08-14 07:25:50,174 INFO] Step 4950/15000; acc:  50.61; ppl:  7.73; xent: 2.05; lr: 0.00061; 5245/5637 tok/s;   3975 sec\n",
            "[2021-08-14 07:25:56,461 WARNING] Empty line exists in corpus_1#339047.\n",
            "[2021-08-14 07:26:29,852 INFO] Step 5000/15000; acc:  53.94; ppl:  6.56; xent: 1.88; lr: 0.00062; 5257/5485 tok/s;   4015 sec\n",
            "[2021-08-14 07:26:29,853 INFO] valid's transforms: TransformPipe()\n",
            "[2021-08-14 07:26:29,855 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-dev.en, data/kftt-data-1.0/data/tok/kyoto-dev.ja, align=None)...\n",
            "[2021-08-14 07:26:30,173 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 07:26:30,173 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 07:26:30,175 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 07:26:42,805 INFO] Validation perplexity: 13.6188\n",
            "[2021-08-14 07:26:42,805 INFO] Validation accuracy: 47.533\n",
            "[2021-08-14 07:27:21,551 INFO] Step 5050/15000; acc:  54.45; ppl:  6.71; xent: 1.90; lr: 0.00062; 4002/4104 tok/s;   4067 sec\n",
            "[2021-08-14 07:28:01,336 INFO] Step 5100/15000; acc:  53.28; ppl:  7.01; xent: 1.95; lr: 0.00063; 5381/5434 tok/s;   4107 sec\n",
            "[2021-08-14 07:28:40,558 INFO] Step 5150/15000; acc:  54.34; ppl:  6.71; xent: 1.90; lr: 0.00064; 5166/5335 tok/s;   4146 sec\n",
            "[2021-08-14 07:29:19,715 INFO] Step 5200/15000; acc:  55.30; ppl:  6.46; xent: 1.87; lr: 0.00064; 5203/5244 tok/s;   4185 sec\n",
            "[2021-08-14 07:30:00,122 INFO] Step 5250/15000; acc:  54.12; ppl:  6.67; xent: 1.90; lr: 0.00065; 5636/6014 tok/s;   4225 sec\n",
            "[2021-08-14 07:30:40,062 INFO] Step 5300/15000; acc:  49.19; ppl:  8.32; xent: 2.12; lr: 0.00065; 5270/5815 tok/s;   4265 sec\n",
            "[2021-08-14 07:31:18,625 INFO] Step 5350/15000; acc:  49.14; ppl:  9.37; xent: 2.24; lr: 0.00066; 5048/5645 tok/s;   4304 sec\n",
            "[2021-08-14 07:31:57,872 INFO] Step 5400/15000; acc:  52.91; ppl:  7.59; xent: 2.03; lr: 0.00067; 5287/5386 tok/s;   4343 sec\n",
            "[2021-08-14 07:32:37,835 INFO] Step 5450/15000; acc:  46.89; ppl:  9.83; xent: 2.29; lr: 0.00067; 5230/5611 tok/s;   4383 sec\n",
            "[2021-08-14 07:33:17,234 INFO] Step 5500/15000; acc:  46.94; ppl:  9.56; xent: 2.26; lr: 0.00068; 5077/5661 tok/s;   4422 sec\n",
            "[2021-08-14 07:33:51,945 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 07:33:57,769 INFO] Step 5550/15000; acc:  47.38; ppl:  8.73; xent: 2.17; lr: 0.00069; 5545/5635 tok/s;   4463 sec\n",
            "[2021-08-14 07:34:36,998 INFO] Step 5600/15000; acc:  45.80; ppl: 13.55; xent: 2.61; lr: 0.00069; 4935/5513 tok/s;   4502 sec\n",
            "[2021-08-14 07:35:16,717 INFO] Step 5650/15000; acc:  50.71; ppl:  8.98; xent: 2.20; lr: 0.00070; 5232/5296 tok/s;   4542 sec\n",
            "[2021-08-14 07:35:56,769 INFO] Step 5700/15000; acc:  47.16; ppl: 10.22; xent: 2.32; lr: 0.00070; 5228/5549 tok/s;   4582 sec\n",
            "[2021-08-14 07:36:35,930 INFO] Step 5750/15000; acc:  47.56; ppl:  9.75; xent: 2.28; lr: 0.00071; 5011/5543 tok/s;   4621 sec\n",
            "[2021-08-14 07:37:15,284 INFO] Step 5800/15000; acc:  48.95; ppl:  8.63; xent: 2.16; lr: 0.00072; 5278/5764 tok/s;   4661 sec\n",
            "[2021-08-14 07:37:53,780 INFO] Step 5850/15000; acc:  47.56; ppl:  9.41; xent: 2.24; lr: 0.00072; 5184/5710 tok/s;   4699 sec\n",
            "[2021-08-14 07:38:34,369 INFO] Step 5900/15000; acc:  47.36; ppl:  9.33; xent: 2.23; lr: 0.00073; 5339/5743 tok/s;   4740 sec\n",
            "[2021-08-14 07:39:13,950 INFO] Step 5950/15000; acc:  47.70; ppl:  8.88; xent: 2.18; lr: 0.00074; 5186/5965 tok/s;   4779 sec\n",
            "[2021-08-14 07:39:53,363 INFO] Step 6000/15000; acc:  47.94; ppl:  8.79; xent: 2.17; lr: 0.00074; 5280/5888 tok/s;   4819 sec\n",
            "[2021-08-14 07:40:32,849 INFO] Step 6050/15000; acc:  48.11; ppl:  8.71; xent: 2.16; lr: 0.00075; 5038/5798 tok/s;   4858 sec\n",
            "[2021-08-14 07:41:12,532 INFO] Step 6100/15000; acc:  47.59; ppl:  8.99; xent: 2.20; lr: 0.00075; 5220/5694 tok/s;   4898 sec\n",
            "[2021-08-14 07:41:52,090 INFO] Step 6150/15000; acc:  48.81; ppl:  8.21; xent: 2.11; lr: 0.00076; 5139/5734 tok/s;   4937 sec\n",
            "[2021-08-14 07:42:31,049 INFO] Step 6200/15000; acc:  48.66; ppl:  8.55; xent: 2.15; lr: 0.00077; 5316/5579 tok/s;   4976 sec\n",
            "[2021-08-14 07:43:10,780 INFO] Step 6250/15000; acc:  48.18; ppl:  8.88; xent: 2.18; lr: 0.00077; 5153/5733 tok/s;   5016 sec\n",
            "[2021-08-14 07:43:49,800 INFO] Step 6300/15000; acc:  46.92; ppl:  9.55; xent: 2.26; lr: 0.00078; 5099/5568 tok/s;   5055 sec\n",
            "[2021-08-14 07:44:28,759 INFO] Step 6350/15000; acc:  49.00; ppl:  8.54; xent: 2.14; lr: 0.00078; 5022/5578 tok/s;   5094 sec\n",
            "[2021-08-14 07:45:08,962 INFO] Step 6400/15000; acc:  52.13; ppl:  6.95; xent: 1.94; lr: 0.00079; 5227/5410 tok/s;   5134 sec\n",
            "[2021-08-14 07:45:48,077 INFO] Step 6450/15000; acc:  51.32; ppl:  7.32; xent: 1.99; lr: 0.00080; 5124/5428 tok/s;   5173 sec\n",
            "[2021-08-14 07:46:28,975 INFO] Step 6500/15000; acc:  52.16; ppl:  7.01; xent: 1.95; lr: 0.00080; 5689/5438 tok/s;   5214 sec\n",
            "[2021-08-14 07:47:08,325 INFO] Step 6550/15000; acc:  51.33; ppl:  7.58; xent: 2.02; lr: 0.00081; 5194/5716 tok/s;   5254 sec\n",
            "[2021-08-14 07:47:48,563 INFO] Step 6600/15000; acc:  49.74; ppl:  7.90; xent: 2.07; lr: 0.00082; 5393/5767 tok/s;   5294 sec\n",
            "[2021-08-14 07:48:29,187 INFO] Step 6650/15000; acc:  48.33; ppl:  8.33; xent: 2.12; lr: 0.00082; 5399/5829 tok/s;   5334 sec\n",
            "[2021-08-14 07:49:09,100 INFO] Step 6700/15000; acc:  48.69; ppl:  8.07; xent: 2.09; lr: 0.00083; 5310/5726 tok/s;   5374 sec\n",
            "[2021-08-14 07:49:50,014 INFO] Step 6750/15000; acc:  49.33; ppl:  8.11; xent: 2.09; lr: 0.00083; 5386/5806 tok/s;   5415 sec\n",
            "[2021-08-14 07:50:29,970 INFO] Step 6800/15000; acc:  48.96; ppl:  8.32; xent: 2.12; lr: 0.00084; 5097/5739 tok/s;   5455 sec\n",
            "[2021-08-14 07:51:02,867 WARNING] Empty line exists in corpus_1#204445.\n",
            "[2021-08-14 07:51:09,387 INFO] Step 6850/15000; acc:  47.91; ppl:  8.69; xent: 2.16; lr: 0.00085; 5064/5728 tok/s;   5495 sec\n",
            "[2021-08-14 07:51:49,439 INFO] Step 6900/15000; acc:  48.54; ppl:  8.29; xent: 2.12; lr: 0.00085; 5241/5779 tok/s;   5535 sec\n",
            "[2021-08-14 07:52:29,347 INFO] Step 6950/15000; acc:  49.56; ppl:  7.85; xent: 2.06; lr: 0.00086; 5290/5759 tok/s;   5575 sec\n",
            "[2021-08-14 07:53:09,452 INFO] Step 7000/15000; acc:  49.37; ppl:  8.03; xent: 2.08; lr: 0.00086; 5269/5942 tok/s;   5615 sec\n",
            "[2021-08-14 07:53:50,162 INFO] Step 7050/15000; acc:  49.21; ppl:  7.97; xent: 2.08; lr: 0.00087; 5294/5991 tok/s;   5655 sec\n",
            "[2021-08-14 07:54:30,288 INFO] Step 7100/15000; acc:  48.89; ppl:  8.22; xent: 2.11; lr: 0.00088; 5114/5610 tok/s;   5696 sec\n",
            "[2021-08-14 07:55:10,118 INFO] Step 7150/15000; acc:  49.53; ppl:  8.30; xent: 2.12; lr: 0.00088; 5277/5515 tok/s;   5735 sec\n",
            "[2021-08-14 07:55:49,100 INFO] Step 7200/15000; acc:  49.84; ppl:  8.03; xent: 2.08; lr: 0.00089; 5184/5560 tok/s;   5774 sec\n",
            "[2021-08-14 07:56:27,953 INFO] Step 7250/15000; acc:  50.46; ppl:  7.84; xent: 2.06; lr: 0.00090; 4936/5579 tok/s;   5813 sec\n",
            "[2021-08-14 07:57:07,234 INFO] Step 7300/15000; acc:  52.99; ppl:  6.71; xent: 1.90; lr: 0.00090; 5266/5686 tok/s;   5852 sec\n",
            "[2021-08-14 07:57:46,678 INFO] Step 7350/15000; acc:  55.07; ppl:  5.97; xent: 1.79; lr: 0.00091; 5330/5342 tok/s;   5892 sec\n",
            "[2021-08-14 07:58:26,100 INFO] Step 7400/15000; acc:  58.67; ppl:  5.27; xent: 1.66; lr: 0.00091; 5294/5278 tok/s;   5931 sec\n",
            "[2021-08-14 07:59:05,673 INFO] Step 7450/15000; acc:  54.78; ppl:  6.32; xent: 1.84; lr: 0.00092; 5352/5418 tok/s;   5971 sec\n",
            "[2021-08-14 07:59:44,434 INFO] Step 7500/15000; acc:  61.44; ppl:  4.64; xent: 1.54; lr: 0.00093; 5234/5062 tok/s;   6010 sec\n",
            "[2021-08-14 08:00:24,385 INFO] Step 7550/15000; acc:  54.47; ppl:  6.30; xent: 1.84; lr: 0.00093; 5466/5752 tok/s;   6050 sec\n",
            "[2021-08-14 08:01:03,263 INFO] Step 7600/15000; acc:  58.43; ppl:  5.36; xent: 1.68; lr: 0.00094; 5285/5312 tok/s;   6088 sec\n",
            "[2021-08-14 08:01:42,407 INFO] Step 7650/15000; acc:  54.41; ppl:  6.49; xent: 1.87; lr: 0.00095; 5152/5407 tok/s;   6128 sec\n",
            "[2021-08-14 08:02:22,206 INFO] Step 7700/15000; acc:  53.44; ppl:  6.54; xent: 1.88; lr: 0.00095; 5315/5732 tok/s;   6167 sec\n",
            "[2021-08-14 08:02:50,670 WARNING] Empty line exists in corpus_1#339047.\n",
            "[2021-08-14 08:03:01,547 INFO] Step 7750/15000; acc:  55.02; ppl:  6.11; xent: 1.81; lr: 0.00096; 5305/5625 tok/s;   6207 sec\n",
            "[2021-08-14 08:03:41,343 INFO] Step 7800/15000; acc:  56.90; ppl:  5.59; xent: 1.72; lr: 0.00096; 5334/5527 tok/s;   6247 sec\n",
            "[2021-08-14 08:04:20,584 INFO] Step 7850/15000; acc:  57.59; ppl:  5.56; xent: 1.72; lr: 0.00097; 5368/5474 tok/s;   6286 sec\n",
            "[2021-08-14 08:05:00,291 INFO] Step 7900/15000; acc:  55.64; ppl:  6.12; xent: 1.81; lr: 0.00098; 5279/5374 tok/s;   6326 sec\n",
            "[2021-08-14 08:05:38,720 INFO] Step 7950/15000; acc:  60.27; ppl:  5.00; xent: 1.61; lr: 0.00098; 5164/5220 tok/s;   6364 sec\n",
            "[2021-08-14 08:06:18,892 INFO] Step 8000/15000; acc:  55.02; ppl:  6.23; xent: 1.83; lr: 0.00099; 5425/5720 tok/s;   6404 sec\n",
            "[2021-08-14 08:06:59,002 INFO] Step 8050/15000; acc:  55.91; ppl:  5.86; xent: 1.77; lr: 0.00099; 5637/5993 tok/s;   6444 sec\n",
            "[2021-08-14 08:07:37,623 INFO] Step 8100/15000; acc:  50.70; ppl:  7.93; xent: 2.07; lr: 0.00098; 5016/5690 tok/s;   6483 sec\n",
            "[2021-08-14 08:08:16,772 INFO] Step 8150/15000; acc:  54.47; ppl:  6.74; xent: 1.91; lr: 0.00098; 5293/5668 tok/s;   6522 sec\n",
            "[2021-08-14 08:08:55,649 INFO] Step 8200/15000; acc:  54.12; ppl:  6.82; xent: 1.92; lr: 0.00098; 5227/5382 tok/s;   6561 sec\n",
            "[2021-08-14 08:09:35,177 INFO] Step 8250/15000; acc:  50.84; ppl:  7.56; xent: 2.02; lr: 0.00097; 5193/5700 tok/s;   6600 sec\n",
            "[2021-08-14 08:10:15,365 INFO] Step 8300/15000; acc:  48.88; ppl:  8.15; xent: 2.10; lr: 0.00097; 5305/5652 tok/s;   6641 sec\n",
            "[2021-08-14 08:10:32,006 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 08:10:54,359 INFO] Step 8350/15000; acc:  50.46; ppl:  8.51; xent: 2.14; lr: 0.00097; 5148/5552 tok/s;   6680 sec\n",
            "[2021-08-14 08:11:34,494 INFO] Step 8400/15000; acc:  52.59; ppl:  8.16; xent: 2.10; lr: 0.00096; 5264/5577 tok/s;   6720 sec\n",
            "[2021-08-14 08:12:13,930 INFO] Step 8450/15000; acc:  51.90; ppl:  8.03; xent: 2.08; lr: 0.00096; 5208/5312 tok/s;   6759 sec\n",
            "[2021-08-14 08:12:53,201 INFO] Step 8500/15000; acc:  49.84; ppl:  8.42; xent: 2.13; lr: 0.00096; 5147/5591 tok/s;   6798 sec\n",
            "[2021-08-14 08:13:32,319 INFO] Step 8550/15000; acc:  51.23; ppl:  7.63; xent: 2.03; lr: 0.00096; 5174/5679 tok/s;   6838 sec\n",
            "[2021-08-14 08:14:11,033 INFO] Step 8600/15000; acc:  52.12; ppl:  7.24; xent: 1.98; lr: 0.00095; 5239/5829 tok/s;   6876 sec\n",
            "[2021-08-14 08:14:50,771 INFO] Step 8650/15000; acc:  49.43; ppl:  8.17; xent: 2.10; lr: 0.00095; 5382/5765 tok/s;   6916 sec\n",
            "[2021-08-14 08:15:29,910 INFO] Step 8700/15000; acc:  50.47; ppl:  7.73; xent: 2.04; lr: 0.00095; 5252/5866 tok/s;   6955 sec\n",
            "[2021-08-14 08:16:09,331 INFO] Step 8750/15000; acc:  50.26; ppl:  7.54; xent: 2.02; lr: 0.00094; 5220/5904 tok/s;   6995 sec\n",
            "[2021-08-14 08:16:48,662 INFO] Step 8800/15000; acc:  50.90; ppl:  7.40; xent: 2.00; lr: 0.00094; 5170/5871 tok/s;   7034 sec\n",
            "[2021-08-14 08:17:27,833 INFO] Step 8850/15000; acc:  50.12; ppl:  7.68; xent: 2.04; lr: 0.00094; 5148/5709 tok/s;   7073 sec\n",
            "[2021-08-14 08:18:07,320 INFO] Step 8900/15000; acc:  50.92; ppl:  7.34; xent: 1.99; lr: 0.00094; 5197/5839 tok/s;   7113 sec\n",
            "[2021-08-14 08:18:46,444 INFO] Step 8950/15000; acc:  51.36; ppl:  7.21; xent: 1.98; lr: 0.00093; 5243/5628 tok/s;   7152 sec\n",
            "[2021-08-14 08:19:26,038 INFO] Step 9000/15000; acc:  51.37; ppl:  7.35; xent: 1.99; lr: 0.00093; 5436/5748 tok/s;   7191 sec\n",
            "[2021-08-14 08:20:04,742 INFO] Step 9050/15000; acc:  49.09; ppl:  8.26; xent: 2.11; lr: 0.00093; 5017/5659 tok/s;   7230 sec\n",
            "[2021-08-14 08:20:43,499 INFO] Step 9100/15000; acc:  50.55; ppl:  7.74; xent: 2.05; lr: 0.00093; 5156/5758 tok/s;   7269 sec\n",
            "[2021-08-14 08:21:23,195 INFO] Step 9150/15000; acc:  54.15; ppl:  6.22; xent: 1.83; lr: 0.00092; 5141/5457 tok/s;   7308 sec\n",
            "[2021-08-14 08:22:02,410 INFO] Step 9200/15000; acc:  55.38; ppl:  5.89; xent: 1.77; lr: 0.00092; 5054/5302 tok/s;   7348 sec\n",
            "[2021-08-14 08:22:42,300 INFO] Step 9250/15000; acc:  54.86; ppl:  6.05; xent: 1.80; lr: 0.00092; 5343/5386 tok/s;   7388 sec\n",
            "[2021-08-14 08:23:22,863 INFO] Step 9300/15000; acc:  55.04; ppl:  6.08; xent: 1.80; lr: 0.00092; 5561/5636 tok/s;   7428 sec\n",
            "[2021-08-14 08:24:02,265 INFO] Step 9350/15000; acc:  55.65; ppl:  6.04; xent: 1.80; lr: 0.00091; 5251/5745 tok/s;   7468 sec\n",
            "[2021-08-14 08:24:43,679 INFO] Step 9400/15000; acc:  51.00; ppl:  6.97; xent: 1.94; lr: 0.00091; 5543/5860 tok/s;   7509 sec\n",
            "[2021-08-14 08:25:23,935 INFO] Step 9450/15000; acc:  51.87; ppl:  6.70; xent: 1.90; lr: 0.00091; 5390/5790 tok/s;   7549 sec\n",
            "[2021-08-14 08:26:05,334 INFO] Step 9500/15000; acc:  52.00; ppl:  6.88; xent: 1.93; lr: 0.00091; 5265/5682 tok/s;   7591 sec\n",
            "[2021-08-14 08:26:46,356 INFO] Step 9550/15000; acc:  52.70; ppl:  6.78; xent: 1.91; lr: 0.00090; 5204/5692 tok/s;   7632 sec\n",
            "[2021-08-14 08:27:25,875 INFO] Step 9600/15000; acc:  51.10; ppl:  7.23; xent: 1.98; lr: 0.00090; 4862/5506 tok/s;   7671 sec\n",
            "[2021-08-14 08:27:40,548 WARNING] Empty line exists in corpus_1#204445.\n",
            "[2021-08-14 08:28:06,672 INFO] Step 9650/15000; acc:  50.90; ppl:  7.29; xent: 1.99; lr: 0.00090; 5105/5766 tok/s;   7712 sec\n",
            "[2021-08-14 08:28:46,999 INFO] Step 9700/15000; acc:  51.88; ppl:  6.77; xent: 1.91; lr: 0.00090; 5186/5710 tok/s;   7752 sec\n",
            "[2021-08-14 08:29:27,816 INFO] Step 9750/15000; acc:  52.89; ppl:  6.61; xent: 1.89; lr: 0.00090; 5220/5725 tok/s;   7793 sec\n",
            "[2021-08-14 08:30:08,372 INFO] Step 9800/15000; acc:  51.96; ppl:  6.89; xent: 1.93; lr: 0.00089; 5132/5929 tok/s;   7834 sec\n",
            "[2021-08-14 08:30:48,936 INFO] Step 9850/15000; acc:  52.32; ppl:  6.79; xent: 1.92; lr: 0.00089; 5131/5710 tok/s;   7874 sec\n",
            "[2021-08-14 08:31:29,674 INFO] Step 9900/15000; acc:  51.60; ppl:  7.01; xent: 1.95; lr: 0.00089; 5230/5599 tok/s;   7915 sec\n",
            "[2021-08-14 08:32:10,068 INFO] Step 9950/15000; acc:  53.50; ppl:  6.67; xent: 1.90; lr: 0.00089; 5166/5395 tok/s;   7955 sec\n",
            "[2021-08-14 08:32:49,584 INFO] Step 10000/15000; acc:  52.54; ppl:  6.92; xent: 1.93; lr: 0.00088; 4845/5370 tok/s;   7995 sec\n",
            "[2021-08-14 08:32:49,587 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-dev.en, data/kftt-data-1.0/data/tok/kyoto-dev.ja, align=None)...\n",
            "[2021-08-14 08:32:49,620 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 08:32:49,620 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 08:32:49,622 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 08:33:03,213 INFO] Validation perplexity: 9.12451\n",
            "[2021-08-14 08:33:03,213 INFO] Validation accuracy: 53.3667\n",
            "[2021-08-14 08:33:42,869 INFO] Step 10050/15000; acc:  55.16; ppl:  5.98; xent: 1.79; lr: 0.00088; 3722/4171 tok/s;   8048 sec\n",
            "[2021-08-14 08:34:23,489 INFO] Step 10100/15000; acc:  56.90; ppl:  5.39; xent: 1.68; lr: 0.00088; 5243/5377 tok/s;   8089 sec\n",
            "[2021-08-14 08:35:03,190 INFO] Step 10150/15000; acc:  59.81; ppl:  4.78; xent: 1.56; lr: 0.00088; 5204/5228 tok/s;   8128 sec\n",
            "[2021-08-14 08:35:43,216 INFO] Step 10200/15000; acc:  61.42; ppl:  4.53; xent: 1.51; lr: 0.00088; 5230/5179 tok/s;   8168 sec\n",
            "[2021-08-14 08:36:23,280 INFO] Step 10250/15000; acc:  57.71; ppl:  5.35; xent: 1.68; lr: 0.00087; 5240/5305 tok/s;   8209 sec\n",
            "[2021-08-14 08:37:03,303 INFO] Step 10300/15000; acc:  60.76; ppl:  4.66; xent: 1.54; lr: 0.00087; 5263/5306 tok/s;   8249 sec\n",
            "[2021-08-14 08:37:42,795 INFO] Step 10350/15000; acc:  60.41; ppl:  4.71; xent: 1.55; lr: 0.00087; 5234/5355 tok/s;   8288 sec\n",
            "[2021-08-14 08:38:22,458 INFO] Step 10400/15000; acc:  60.90; ppl:  4.77; xent: 1.56; lr: 0.00087; 5151/5157 tok/s;   8328 sec\n",
            "[2021-08-14 08:39:02,375 INFO] Step 10450/15000; acc:  55.55; ppl:  5.87; xent: 1.77; lr: 0.00086; 5095/5524 tok/s;   8368 sec\n",
            "[2021-08-14 08:39:42,503 INFO] Step 10500/15000; acc:  56.71; ppl:  5.49; xent: 1.70; lr: 0.00086; 5188/5595 tok/s;   8408 sec\n",
            "[2021-08-14 08:39:54,631 WARNING] Empty line exists in corpus_1#339047.\n",
            "[2021-08-14 08:40:22,948 INFO] Step 10550/15000; acc:  59.00; ppl:  4.88; xent: 1.59; lr: 0.00086; 5225/5445 tok/s;   8448 sec\n",
            "[2021-08-14 08:41:03,105 INFO] Step 10600/15000; acc:  60.27; ppl:  4.80; xent: 1.57; lr: 0.00086; 5218/5350 tok/s;   8488 sec\n",
            "[2021-08-14 08:41:43,140 INFO] Step 10650/15000; acc:  59.07; ppl:  5.07; xent: 1.62; lr: 0.00086; 5328/5414 tok/s;   8528 sec\n",
            "[2021-08-14 08:42:22,641 INFO] Step 10700/15000; acc:  59.85; ppl:  4.91; xent: 1.59; lr: 0.00085; 5020/5155 tok/s;   8568 sec\n",
            "[2021-08-14 08:43:01,713 INFO] Step 10750/15000; acc:  62.45; ppl:  4.41; xent: 1.48; lr: 0.00085; 5060/5127 tok/s;   8607 sec\n",
            "[2021-08-14 08:43:42,701 INFO] Step 10800/15000; acc:  57.46; ppl:  5.35; xent: 1.68; lr: 0.00085; 5623/5937 tok/s;   8648 sec\n",
            "[2021-08-14 08:44:23,396 INFO] Step 10850/15000; acc:  55.34; ppl:  5.84; xent: 1.76; lr: 0.00085; 5301/5820 tok/s;   8689 sec\n",
            "[2021-08-14 08:45:02,782 INFO] Step 10900/15000; acc:  55.10; ppl:  6.35; xent: 1.85; lr: 0.00085; 4948/5579 tok/s;   8728 sec\n",
            "[2021-08-14 08:45:42,982 INFO] Step 10950/15000; acc:  59.72; ppl:  5.09; xent: 1.63; lr: 0.00084; 5278/5434 tok/s;   8768 sec\n",
            "[2021-08-14 08:46:23,423 INFO] Step 11000/15000; acc:  54.32; ppl:  6.42; xent: 1.86; lr: 0.00084; 5043/5354 tok/s;   8809 sec\n",
            "[2021-08-14 08:47:03,161 INFO] Step 11050/15000; acc:  53.44; ppl:  6.49; xent: 1.87; lr: 0.00084; 5063/5566 tok/s;   8848 sec\n",
            "[2021-08-14 08:47:43,983 INFO] Step 11100/15000; acc:  52.93; ppl:  6.36; xent: 1.85; lr: 0.00084; 5343/5543 tok/s;   8889 sec\n",
            "[2021-08-14 08:47:44,799 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 08:48:23,306 INFO] Step 11150/15000; acc:  54.33; ppl:  7.41; xent: 2.00; lr: 0.00084; 4950/5502 tok/s;   8929 sec\n",
            "[2021-08-14 08:49:04,088 INFO] Step 11200/15000; acc:  57.04; ppl:  6.03; xent: 1.80; lr: 0.00084; 5195/5251 tok/s;   8969 sec\n",
            "[2021-08-14 08:49:44,077 INFO] Step 11250/15000; acc:  53.80; ppl:  6.88; xent: 1.93; lr: 0.00083; 5092/5393 tok/s;   9009 sec\n",
            "[2021-08-14 08:50:24,312 INFO] Step 11300/15000; acc:  53.98; ppl:  6.63; xent: 1.89; lr: 0.00083; 5020/5584 tok/s;   9050 sec\n",
            "[2021-08-14 08:51:04,084 INFO] Step 11350/15000; acc:  54.57; ppl:  6.19; xent: 1.82; lr: 0.00083; 5132/5602 tok/s;   9089 sec\n",
            "[2021-08-14 08:51:43,941 INFO] Step 11400/15000; acc:  53.65; ppl:  6.51; xent: 1.87; lr: 0.00083; 5127/5615 tok/s;   9129 sec\n",
            "[2021-08-14 08:52:24,630 INFO] Step 11450/15000; acc:  52.67; ppl:  6.78; xent: 1.91; lr: 0.00083; 5307/5664 tok/s;   9170 sec\n",
            "[2021-08-14 08:53:04,467 INFO] Step 11500/15000; acc:  52.71; ppl:  6.58; xent: 1.88; lr: 0.00082; 5127/5893 tok/s;   9210 sec\n",
            "[2021-08-14 08:53:44,509 INFO] Step 11550/15000; acc:  52.96; ppl:  6.51; xent: 1.87; lr: 0.00082; 5252/5878 tok/s;   9250 sec\n",
            "[2021-08-14 08:54:24,166 INFO] Step 11600/15000; acc:  53.07; ppl:  6.51; xent: 1.87; lr: 0.00082; 4946/5701 tok/s;   9289 sec\n",
            "[2021-08-14 08:55:04,027 INFO] Step 11650/15000; acc:  52.75; ppl:  6.62; xent: 1.89; lr: 0.00082; 5187/5660 tok/s;   9329 sec\n",
            "[2021-08-14 08:55:43,382 INFO] Step 11700/15000; acc:  53.81; ppl:  6.22; xent: 1.83; lr: 0.00082; 5096/5733 tok/s;   9369 sec\n",
            "[2021-08-14 08:56:23,361 INFO] Step 11750/15000; acc:  53.64; ppl:  6.37; xent: 1.85; lr: 0.00082; 5321/5567 tok/s;   9409 sec\n",
            "[2021-08-14 08:57:02,329 INFO] Step 11800/15000; acc:  53.72; ppl:  6.44; xent: 1.86; lr: 0.00081; 5224/5743 tok/s;   9448 sec\n",
            "[2021-08-14 08:57:41,643 INFO] Step 11850/15000; acc:  51.67; ppl:  7.12; xent: 1.96; lr: 0.00081; 5134/5664 tok/s;   9487 sec\n",
            "[2021-08-14 08:58:20,101 INFO] Step 11900/15000; acc:  54.22; ppl:  6.33; xent: 1.84; lr: 0.00081; 5062/5627 tok/s;   9525 sec\n",
            "[2021-08-14 08:58:59,637 INFO] Step 11950/15000; acc:  58.53; ppl:  4.92; xent: 1.59; lr: 0.00081; 5235/5450 tok/s;   9565 sec\n",
            "[2021-08-14 08:59:38,840 INFO] Step 12000/15000; acc:  56.70; ppl:  5.46; xent: 1.70; lr: 0.00081; 5056/5354 tok/s;   9604 sec\n",
            "[2021-08-14 09:00:19,896 INFO] Step 12050/15000; acc:  58.76; ppl:  4.93; xent: 1.60; lr: 0.00081; 5630/5442 tok/s;   9645 sec\n",
            "[2021-08-14 09:00:59,644 INFO] Step 12100/15000; acc:  57.82; ppl:  5.34; xent: 1.67; lr: 0.00080; 5328/5718 tok/s;   9685 sec\n",
            "[2021-08-14 09:01:40,446 INFO] Step 12150/15000; acc:  56.84; ppl:  5.41; xent: 1.69; lr: 0.00080; 5438/5871 tok/s;   9726 sec\n",
            "[2021-08-14 09:02:21,187 INFO] Step 12200/15000; acc:  54.23; ppl:  5.95; xent: 1.78; lr: 0.00080; 5419/5810 tok/s;   9766 sec\n",
            "[2021-08-14 09:03:01,170 INFO] Step 12250/15000; acc:  54.37; ppl:  5.86; xent: 1.77; lr: 0.00080; 5307/5758 tok/s;   9806 sec\n",
            "[2021-08-14 09:03:41,651 INFO] Step 12300/15000; acc:  54.90; ppl:  5.92; xent: 1.78; lr: 0.00080; 5413/5817 tok/s;   9847 sec\n",
            "[2021-08-14 09:04:21,139 INFO] Step 12350/15000; acc:  54.76; ppl:  5.96; xent: 1.79; lr: 0.00080; 5149/5759 tok/s;   9886 sec\n",
            "[2021-08-14 09:04:58,221 WARNING] Empty line exists in corpus_1#204445.\n",
            "[2021-08-14 09:04:59,767 INFO] Step 12400/15000; acc:  53.59; ppl:  6.25; xent: 1.83; lr: 0.00079; 4985/5695 tok/s;   9925 sec\n",
            "[2021-08-14 09:05:39,778 INFO] Step 12450/15000; acc:  53.79; ppl:  6.13; xent: 1.81; lr: 0.00079; 5343/5892 tok/s;   9965 sec\n",
            "[2021-08-14 09:06:20,054 INFO] Step 12500/15000; acc:  54.61; ppl:  5.87; xent: 1.77; lr: 0.00079; 5219/5686 tok/s;  10005 sec\n",
            "[2021-08-14 09:06:59,743 INFO] Step 12550/15000; acc:  55.23; ppl:  5.81; xent: 1.76; lr: 0.00079; 5272/5899 tok/s;  10045 sec\n",
            "[2021-08-14 09:07:40,098 INFO] Step 12600/15000; acc:  54.20; ppl:  5.99; xent: 1.79; lr: 0.00079; 5252/5979 tok/s;  10085 sec\n",
            "[2021-08-14 09:08:19,869 INFO] Step 12650/15000; acc:  54.26; ppl:  6.05; xent: 1.80; lr: 0.00079; 5250/5772 tok/s;  10125 sec\n",
            "[2021-08-14 09:08:59,159 INFO] Step 12700/15000; acc:  55.14; ppl:  5.96; xent: 1.79; lr: 0.00078; 5177/5524 tok/s;  10164 sec\n",
            "[2021-08-14 09:09:38,512 INFO] Step 12750/15000; acc:  55.67; ppl:  5.84; xent: 1.76; lr: 0.00078; 5277/5514 tok/s;  10204 sec\n",
            "[2021-08-14 09:10:17,232 INFO] Step 12800/15000; acc:  55.62; ppl:  5.86; xent: 1.77; lr: 0.00078; 4979/5638 tok/s;  10242 sec\n",
            "[2021-08-14 09:10:56,877 INFO] Step 12850/15000; acc:  58.35; ppl:  5.02; xent: 1.61; lr: 0.00078; 5203/5668 tok/s;  10282 sec\n",
            "[2021-08-14 09:11:36,238 INFO] Step 12900/15000; acc:  60.52; ppl:  4.50; xent: 1.50; lr: 0.00078; 5263/5357 tok/s;  10321 sec\n",
            "[2021-08-14 09:12:15,808 INFO] Step 12950/15000; acc:  62.96; ppl:  4.13; xent: 1.42; lr: 0.00078; 5343/5290 tok/s;  10361 sec\n",
            "[2021-08-14 09:12:55,487 INFO] Step 13000/15000; acc:  60.60; ppl:  4.61; xent: 1.53; lr: 0.00078; 5373/5444 tok/s;  10401 sec\n",
            "[2021-08-14 09:13:34,769 INFO] Step 13050/15000; acc:  65.01; ppl:  3.82; xent: 1.34; lr: 0.00077; 5263/5097 tok/s;  10440 sec\n",
            "[2021-08-14 09:14:14,720 INFO] Step 13100/15000; acc:  60.34; ppl:  4.62; xent: 1.53; lr: 0.00077; 5392/5595 tok/s;  10480 sec\n",
            "[2021-08-14 09:14:53,076 INFO] Step 13150/15000; acc:  63.40; ppl:  4.11; xent: 1.41; lr: 0.00077; 5183/5320 tok/s;  10518 sec\n",
            "[2021-08-14 09:15:32,451 INFO] Step 13200/15000; acc:  60.34; ppl:  4.74; xent: 1.56; lr: 0.00077; 5190/5331 tok/s;  10558 sec\n",
            "[2021-08-14 09:16:12,229 INFO] Step 13250/15000; acc:  57.89; ppl:  5.11; xent: 1.63; lr: 0.00077; 5311/5740 tok/s;  10597 sec\n",
            "[2021-08-14 09:16:46,952 WARNING] Empty line exists in corpus_1#339047.\n",
            "[2021-08-14 09:16:51,915 INFO] Step 13300/15000; acc:  59.41; ppl:  4.78; xent: 1.56; lr: 0.00077; 5304/5653 tok/s;  10637 sec\n",
            "[2021-08-14 09:17:31,632 INFO] Step 13350/15000; acc:  61.61; ppl:  4.33; xent: 1.47; lr: 0.00076; 5298/5484 tok/s;  10677 sec\n",
            "[2021-08-14 09:18:11,187 INFO] Step 13400/15000; acc:  62.60; ppl:  4.27; xent: 1.45; lr: 0.00076; 5421/5518 tok/s;  10716 sec\n",
            "[2021-08-14 09:18:50,667 INFO] Step 13450/15000; acc:  60.76; ppl:  4.61; xent: 1.53; lr: 0.00076; 5202/5297 tok/s;  10756 sec\n",
            "[2021-08-14 09:19:29,296 INFO] Step 13500/15000; acc:  63.83; ppl:  4.08; xent: 1.41; lr: 0.00076; 5140/5261 tok/s;  10795 sec\n",
            "[2021-08-14 09:20:09,424 INFO] Step 13550/15000; acc:  60.18; ppl:  4.72; xent: 1.55; lr: 0.00076; 5426/5612 tok/s;  10835 sec\n",
            "[2021-08-14 09:20:49,671 INFO] Step 13600/15000; acc:  61.38; ppl:  4.45; xent: 1.49; lr: 0.00076; 5637/5988 tok/s;  10875 sec\n",
            "[2021-08-14 09:21:29,579 INFO] Step 13650/15000; acc:  55.89; ppl:  5.83; xent: 1.76; lr: 0.00076; 5122/5815 tok/s;  10915 sec\n",
            "[2021-08-14 09:22:08,664 INFO] Step 13700/15000; acc:  60.11; ppl:  4.89; xent: 1.59; lr: 0.00076; 5261/5679 tok/s;  10954 sec\n",
            "[2021-08-14 09:22:48,307 INFO] Step 13750/15000; acc:  60.44; ppl:  4.81; xent: 1.57; lr: 0.00075; 5217/5350 tok/s;  10994 sec\n",
            "[2021-08-14 09:23:27,697 INFO] Step 13800/15000; acc:  56.20; ppl:  5.62; xent: 1.73; lr: 0.00075; 5237/5707 tok/s;  11033 sec\n",
            "[2021-08-14 09:24:07,432 INFO] Step 13850/15000; acc:  54.54; ppl:  5.96; xent: 1.78; lr: 0.00075; 5173/5619 tok/s;  11073 sec\n",
            "[2021-08-14 09:24:27,639 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-train.en, data/kftt-data-1.0/data/tok/kyoto-train.ja, align=None)...\n",
            "[2021-08-14 09:24:46,985 INFO] Step 13900/15000; acc:  56.37; ppl:  5.73; xent: 1.75; lr: 0.00075; 5262/5567 tok/s;  11112 sec\n",
            "[2021-08-14 09:25:26,844 INFO] Step 13950/15000; acc:  59.14; ppl:  5.57; xent: 1.72; lr: 0.00075; 5228/5559 tok/s;  11152 sec\n",
            "[2021-08-14 09:26:06,368 INFO] Step 14000/15000; acc:  57.68; ppl:  5.68; xent: 1.74; lr: 0.00075; 5268/5364 tok/s;  11192 sec\n",
            "[2021-08-14 09:26:45,117 INFO] Step 14050/15000; acc:  56.01; ppl:  5.96; xent: 1.78; lr: 0.00075; 5125/5589 tok/s;  11230 sec\n",
            "[2021-08-14 09:27:24,317 INFO] Step 14100/15000; acc:  55.66; ppl:  5.83; xent: 1.76; lr: 0.00074; 5146/5669 tok/s;  11270 sec\n",
            "[2021-08-14 09:28:03,446 INFO] Step 14150/15000; acc:  56.79; ppl:  5.53; xent: 1.71; lr: 0.00074; 5305/5828 tok/s;  11309 sec\n",
            "[2021-08-14 09:28:43,196 INFO] Step 14200/15000; acc:  54.36; ppl:  6.16; xent: 1.82; lr: 0.00074; 5257/5664 tok/s;  11348 sec\n",
            "[2021-08-14 09:29:22,552 INFO] Step 14250/15000; acc:  54.67; ppl:  5.98; xent: 1.79; lr: 0.00074; 5288/5863 tok/s;  11388 sec\n",
            "[2021-08-14 09:30:01,909 INFO] Step 14300/15000; acc:  54.45; ppl:  5.92; xent: 1.78; lr: 0.00074; 5318/6025 tok/s;  11427 sec\n",
            "[2021-08-14 09:30:41,203 INFO] Step 14350/15000; acc:  55.02; ppl:  5.87; xent: 1.77; lr: 0.00074; 5163/5865 tok/s;  11466 sec\n",
            "[2021-08-14 09:31:20,446 INFO] Step 14400/15000; acc:  54.37; ppl:  6.01; xent: 1.79; lr: 0.00074; 5077/5675 tok/s;  11506 sec\n",
            "[2021-08-14 09:32:00,423 INFO] Step 14450/15000; acc:  55.03; ppl:  5.81; xent: 1.76; lr: 0.00074; 5259/5837 tok/s;  11546 sec\n",
            "[2021-08-14 09:32:39,832 INFO] Step 14500/15000; acc:  55.55; ppl:  5.72; xent: 1.74; lr: 0.00073; 5194/5649 tok/s;  11585 sec\n",
            "[2021-08-14 09:33:19,158 INFO] Step 14550/15000; acc:  55.92; ppl:  5.71; xent: 1.74; lr: 0.00073; 5469/5752 tok/s;  11624 sec\n",
            "[2021-08-14 09:33:58,134 INFO] Step 14600/15000; acc:  53.28; ppl:  6.50; xent: 1.87; lr: 0.00073; 5034/5681 tok/s;  11663 sec\n",
            "[2021-08-14 09:34:36,743 INFO] Step 14650/15000; acc:  54.58; ppl:  6.13; xent: 1.81; lr: 0.00073; 5214/5792 tok/s;  11702 sec\n",
            "[2021-08-14 09:35:16,063 INFO] Step 14700/15000; acc:  58.95; ppl:  4.82; xent: 1.57; lr: 0.00073; 5117/5480 tok/s;  11741 sec\n",
            "[2021-08-14 09:35:55,150 INFO] Step 14750/15000; acc:  60.05; ppl:  4.62; xent: 1.53; lr: 0.00073; 5114/5348 tok/s;  11780 sec\n",
            "[2021-08-14 09:36:34,546 INFO] Step 14800/15000; acc:  59.98; ppl:  4.64; xent: 1.54; lr: 0.00073; 5316/5421 tok/s;  11820 sec\n",
            "[2021-08-14 09:37:14,974 INFO] Step 14850/15000; acc:  60.15; ppl:  4.66; xent: 1.54; lr: 0.00073; 5650/5657 tok/s;  11860 sec\n",
            "[2021-08-14 09:37:53,992 INFO] Step 14900/15000; acc:  60.77; ppl:  4.65; xent: 1.54; lr: 0.00072; 5261/5787 tok/s;  11899 sec\n",
            "[2021-08-14 09:38:34,972 INFO] Step 14950/15000; acc:  56.32; ppl:  5.27; xent: 1.66; lr: 0.00072; 5553/5866 tok/s;  11940 sec\n",
            "[2021-08-14 09:39:15,699 INFO] Step 15000/15000; acc:  56.31; ppl:  5.28; xent: 1.66; lr: 0.00072; 5432/5828 tok/s;  11981 sec\n",
            "[2021-08-14 09:39:15,702 INFO] Loading ParallelCorpus(data/kftt-data-1.0/data/tok/kyoto-dev.en, data/kftt-data-1.0/data/tok/kyoto-dev.ja, align=None)...\n",
            "[2021-08-14 09:39:15,736 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 09:39:15,736 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 09:39:15,738 WARNING] The batch will be filled until we reach 1,its size may exceed 32 tokens\n",
            "[2021-08-14 09:39:27,908 INFO] Validation perplexity: 7.16784\n",
            "[2021-08-14 09:39:27,908 INFO] Validation accuracy: 57.0439\n",
            "[2021-08-14 09:39:28,665 INFO] Saving checkpoint data/kftt-data-1.0/run/model_step_15000.pt\n"
          ]
        }
      ],
      "source": [
        "!onmt_train -config data/transformer_kyoto_en_ja.yml"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "25OYAwmTinYp",
        "outputId": "1471581e-b0c5-4e74-e4d3-9efa2634f47b"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "slack message: train 実行完了\n"
          ]
        }
      ],
      "source": [
        "slacknotice.send(\"train 実行完了\")"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/",
          "height": 69
        },
        "id": "IzeI9Y_bJa6H",
        "outputId": "27d3aa75-f056-4638-ff4b-d98f4df13416"
      },
      "outputs": [
        {
          "data": {
            "application/vnd.google.colaboratory.intrinsic+json": {
              "type": "string"
            },
            "text/plain": [
              "'\\n!export CUDA_VISIBLE_DEVICES=0 && python train.py -data preprocessed_dataset -save_model save_model_name -layers 6 -rnn_size 512 -word_vec_size 512 -transformer_ff 2048 -heads 8 -encoder_type transformer -decoder_type transformer -position_encoding -train_steps 200000 -max_generator_batches 2 -dropout 0.1 -batch_size 4096 -batch_type tokens -normalization tokens -accum_count 2 -optim adam -adam_beta2 0.998 -decay_method noam -warmup_steps 8000 -learning_rate 2 -max_grad_norm 0 -param_init 0 -param_init_glorot -label_smoothing 0.1 -valid_steps 10000 -save_checkpoint_steps 40000 -world_size 1 -gpu_ranks 0 \\n'"
            ]
          },
          "execution_count": 18,
          "metadata": {
            "tags": []
          },
          "output_type": "execute_result"
        }
      ],
      "source": [
        "# 恐らく前のバージョンでのコマンドであるため実行できない\n",
        "# ->このコマンドをyamlファイルに置き換えたらできるかもしれない->できた\n",
        "\"\"\"\n",
        "!export CUDA_VISIBLE_DEVICES=0 && \\\n",
        "python train.py -data preprocessed_dataset -save_model save_model_name \\\n",
        "-layers 6 -rnn_size 512 -word_vec_size 512 \\\n",
        "-transformer_ff 2048 -heads 8 -encoder_type transformer -decoder_type transformer -position_encoding \\\n",
        "-train_steps 200000 -max_generator_batches 2 -dropout 0.1 -batch_size 4096 -batch_type tokens \\\n",
        "-normalization tokens -accum_count 2 -optim adam -adam_beta2 0.998 -decay_method noam \\\n",
        "-warmup_steps 8000 -learning_rate 2 -max_grad_norm 0 -param_init 0 -param_init_glorot \\\n",
        "-label_smoothing 0.1 -valid_steps 10000 -save_checkpoint_steps 40000 -world_size 1 -gpu_ranks 0\n",
        "\"\"\""
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {
        "id": "7GyaZfwVhOus"
      },
      "source": [
        "## 翻訳（検証）"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "tgbQX6gmg-Co",
        "outputId": "0d4bb9f1-77c8-4cdc-e448-839332423cb0"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "\u001b[1;30;43mストリーミング出力は最後の 5000 行に切り捨てられました。\u001b[0m\n",
            "SENT 161: ['Japanese', 'National', 'Railways', 'Steam', 'Locomotive', 'Class', 'D50']\n",
            "PRED 161: 日本 の <unk> 一覧\n",
            "PRED SCORE: -5.1505\n",
            "\n",
            "[2021-08-14 10:38:04,693 INFO] \n",
            "SENT 162: ['Manufactured', 'in', '1925', 'by', 'Hitachi', ',', 'Ltd', '.']\n",
            "PRED 162: 1925 年 （ 大正 14 年 ） 、 常陸 <unk> に よ る <unk> 。\n",
            "PRED SCORE: -10.5660\n",
            "\n",
            "[2021-08-14 10:38:04,696 INFO] \n",
            "SENT 163: ['Transferred', 'from', 'the', 'Noogata', 'Engine', 'Depot', '.']\n",
            "PRED 163: <unk> <unk> から の <unk> 。\n",
            "PRED SCORE: -5.7900\n",
            "\n",
            "[2021-08-14 10:38:04,697 INFO] \n",
            "SENT 164: ['Registration', 'deleted', 'in', '1979', '.']\n",
            "PRED 164: <unk> 年 に <unk> <unk> 。\n",
            "PRED SCORE: -6.3943\n",
            "\n",
            "[2021-08-14 10:38:04,697 INFO] \n",
            "SENT 165: ['Japanese', 'National', 'Railways', 'Steam', 'Locomotive', 'Class', 'D51']\n",
            "PRED 165: 日本 の <unk> 一覧\n",
            "PRED SCORE: -5.1505\n",
            "\n",
            "[2021-08-14 10:38:04,697 INFO] \n",
            "SENT 166: ['Manufactured', 'in', '1936', 'by', 'Kawasaki', 'Rolling-Stock', 'Mfg', '.', 'Co', '.']\n",
            "PRED 166: 1936 年 （ 昭和 11 年 ） 、 川崎 <unk> に よ っ て <unk> 。\n",
            "PRED SCORE: -9.6104\n",
            "\n",
            "[2021-08-14 10:38:04,697 INFO] \n",
            "SENT 167: ['Transferred', 'from', 'the', 'Hamada', 'Engine', 'Depot', '.']\n",
            "PRED 167: <unk> <unk> から の <unk> 。\n",
            "PRED SCORE: -5.7900\n",
            "\n",
            "[2021-08-14 10:38:04,698 INFO] \n",
            "SENT 168: ['Registration', 'deleted', 'in', '1987', '.']\n",
            "PRED 168: 1987 年 に <unk> <unk> 。\n",
            "PRED SCORE: -4.8217\n",
            "\n",
            "[2021-08-14 10:38:04,698 INFO] \n",
            "SENT 169: ['Class', 'D51', '#', '200', '-', 'Working', '(', 'registered', ')']\n",
            "PRED 169: <unk> 200 種 - <unk> （ <unk> ）\n",
            "PRED SCORE: -6.0582\n",
            "\n",
            "[2021-08-14 10:38:04,698 INFO] \n",
            "SENT 170: ['Manufactured', 'in', '1938', 'by', 'Hamamatsu', 'Plant', ',', 'Tokai', 'Passenger', 'Railway', ',', 'Railway', 'Ministry', '.']\n",
            "PRED 170: 1938 年 （ 昭和 13 年 ） に は <unk> <unk> ・ 東海 <unk> ・ <unk> <unk> に よ っ て <unk> さ れ た 。\n",
            "PRED SCORE: -15.4694\n",
            "\n",
            "[2021-08-14 10:38:04,699 INFO] \n",
            "SENT 171: ['Transferred', 'from', 'the', 'Nakatsugawa', 'Engine', 'Depot', '.']\n",
            "PRED 171: <unk> <unk> から の <unk> 。\n",
            "PRED SCORE: -5.7900\n",
            "\n",
            "[2021-08-14 10:38:04,699 INFO] \n",
            "SENT 172: ['Registration', 'deleted', 'in', '1979', '(', 'for', 'working', 'preservation', ')', '.']\n",
            "PRED 172: <unk> <unk>\n",
            "PRED SCORE: -4.0744\n",
            "\n",
            "[2021-08-14 10:38:04,699 INFO] \n",
            "SENT 173: ['Registration', 'restored', 'in', '1987', '.']\n",
            "PRED 173: 1987 年 に 復活 。\n",
            "PRED SCORE: -3.4701\n",
            "\n",
            "[2021-08-14 10:38:04,699 INFO] \n",
            "SENT 174: ['Japanese', 'National', 'Railways', 'Steam', 'Locomotive', 'Class', 'D52']\n",
            "PRED 174: 日本 の <unk> 一覧\n",
            "PRED SCORE: -5.1505\n",
            "\n",
            "[2021-08-14 10:38:04,700 INFO] \n",
            "SENT 175: ['Manufactured', 'in', '1946', 'by', 'Mitsubishi', 'Heavy', 'Industries', ',', 'Ltd', '.']\n",
            "PRED 175: <unk> 年 、 <unk> <unk> <unk> に よ る <unk> 。\n",
            "PRED SCORE: -9.6896\n",
            "\n",
            "[2021-08-14 10:38:04,700 INFO] \n",
            "SENT 176: ['Transferred', 'from', 'the', 'Goryoukaku', 'Engine', 'Depot', '.']\n",
            "PRED 176: <unk> <unk> から の <unk> 。\n",
            "PRED SCORE: -5.7900\n",
            "\n",
            "[2021-08-14 10:38:04,700 INFO] \n",
            "SENT 177: ['Registration', 'deleted', 'in', '1979', '.']\n",
            "PRED 177: <unk> 年 に <unk> <unk> 。\n",
            "PRED SCORE: -6.3943\n",
            "\n",
            "[2021-08-14 10:38:04,700 INFO] \n",
            "SENT 178: ['Image', 'JRW-B2010', ':', 'Class', 'B20', '#', '10']\n",
            "PRED 178: 画像 <unk> 10 種\n",
            "PRED SCORE: -6.2284\n",
            "\n",
            "[2021-08-14 10:38:04,701 INFO] \n",
            "SENT 179: ['Image', 'JNR9633', ':', '9633']\n",
            "PRED 179: イメージ <unk> ： <unk>\n",
            "PRED SCORE: -5.1599\n",
            "\n",
            "[2021-08-14 10:38:04,701 INFO] \n",
            "SENT 180: ['Image', 'D50', '140', 'with', 'Umekoji', 'Steam', 'Locomotive', 'Museum', 'mg540', ':', 'Class', 'D50', '#', '140']\n",
            "PRED 180: <unk> <unk> 美術 館 <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -12.7925\n",
            "\n",
            "[2021-08-14 10:38:05,696 INFO] \n",
            "SENT 181: ['Image', 'D51-1', 'and', 'C62-1', 'Umekoji', ':', 'Class', 'D51', '#', '1', 'and', 'C62', '#', '1']\n",
            "PRED 181: イメージ <unk> ・ <unk> <unk> ： 1 種 、 <unk> 1 面\n",
            "PRED SCORE: -12.9920\n",
            "\n",
            "[2021-08-14 10:38:05,696 INFO] \n",
            "SENT 182: ['Image', 'JNR-D51200', ':', 'Class', 'D51', '#', '200', '(', 'Steamliner', ')']\n",
            "PRED 182: 画像 <unk> <unk> 200 種 （ <unk> ）\n",
            "PRED SCORE: -8.1047\n",
            "\n",
            "[2021-08-14 10:38:05,696 INFO] \n",
            "SENT 183: ['Image', 'JNR-C5345', ':', 'Class', 'C53', '#', '45']\n",
            "PRED 183: 画像 <unk> <unk> <unk> 45 種\n",
            "PRED SCORE: -6.2868\n",
            "\n",
            "[2021-08-14 10:38:05,697 INFO] \n",
            "SENT 184: ['Image', 'JRW-C56160', ':', 'Class', 'C56', '#', '160', '(', 'SL', 'Kita', 'Biwako', ')']\n",
            "PRED 184: 画像 <unk> <unk> ： <unk> <unk> （ <unk> <unk> ）\n",
            "PRED SCORE: -8.8088\n",
            "\n",
            "[2021-08-14 10:38:05,697 INFO] \n",
            "SENT 185: ['Image', '2006', '08200011.JPG']\n",
            "PRED 185: イメージ <unk>\n",
            "PRED SCORE: -2.4471\n",
            "\n",
            "[2021-08-14 10:38:05,697 INFO] \n",
            "SENT 186: ['Image', 'JNR-C621-SteamLoco', ':', 'Class', 'C62', '#', '1']\n",
            "PRED 186: 画像 <unk> <unk> <unk> 1 種\n",
            "PRED SCORE: -8.0658\n",
            "\n",
            "[2021-08-14 10:38:05,697 INFO] \n",
            "SENT 187: ['Image', 'JRW-C622', ':', 'Class', 'C62', '#', '2']\n",
            "PRED 187: 画像 <unk> 2 種 <unk> <unk> 2 種\n",
            "PRED SCORE: -8.9145\n",
            "\n",
            "[2021-08-14 10:38:05,697 INFO] \n",
            "SENT 188: ['Japanese', 'National', 'Railways', 'Diesel', 'Locomotive', 'Class', 'DE10']\n",
            "PRED 188: 日本 の <unk> 一覧\n",
            "PRED SCORE: -5.1505\n",
            "\n",
            "[2021-08-14 10:38:05,698 INFO] \n",
            "SENT 189: ['Registered', ';', '2', 'DE10s', 'belonging', 'to', 'Umekoji', '.']\n",
            "PRED 189: <unk> （ <unk> ） ： <unk> に 属 する <unk> 2 人\n",
            "PRED SCORE: -11.1931\n",
            "\n",
            "[2021-08-14 10:38:05,698 INFO] \n",
            "SENT 190: ['Japanese', 'National', 'Railways', 'Passenger', 'Car', '50', 'Series']\n",
            "PRED 190: 日本 <unk> <unk> 50 系 <unk>\n",
            "PRED SCORE: -3.9935\n",
            "\n",
            "[2021-08-14 10:38:05,698 INFO] \n",
            "SENT 191: ['Used', 'as', 'a', 'lounge', '.']\n",
            "PRED 191: <unk> と し て の <unk>\n",
            "PRED SCORE: -3.5285\n",
            "\n",
            "[2021-08-14 10:38:05,698 INFO] \n",
            "SENT 192: ['At', 'first', 'glance', 'it', 'seems', 'to', 'be', 'in', 'its', 'original', 'shape', ',', 'but', 'piping', 'of', 'household', 'air', 'conditioners', 'is', 'arranged', 'in', 'the', 'back', ',', 'with', 'a', 'row', 'of', 'outdoor', 'units', '.']\n",
            "PRED 192: 当初 は <unk> の 形 を し て い た よう で あ る が 、 <unk> の <unk> を <unk> に <unk> し 、 屋外 の <unk> を <unk> する 。\n",
            "PRED SCORE: -25.5463\n",
            "\n",
            "[2021-08-14 10:38:05,699 INFO] \n",
            "SENT 193: ['The', 'toilet', 'cannot', 'be', 'used', '.']\n",
            "PRED 193: <unk> は 使用 でき な い 。\n",
            "PRED SCORE: -3.7082\n",
            "\n",
            "[2021-08-14 10:38:05,699 INFO] \n",
            "SENT 194: ['Umekoji', ':', '90', 'Years', 'of', 'History', '(', 'West', 'Japan', 'Railway', 'Company', ',', '2004', ')', 'ISBN', '4777050718']\n",
            "PRED 194: <unk> 年 （ 平成 16 年 ） ： <unk> 90 年 （ 平成 16 年 ） ： <unk>\n",
            "PRED SCORE: -13.4072\n",
            "\n",
            "[2021-08-14 10:38:05,699 INFO] \n",
            "SENT 195: ['Japanese', 'National', 'Railways', 'Rolling', 'Stock', '12', ':', 'Tokaido', 'Line', 'III', '(', 'Hoikusha', ',', '1984', ')', 'ISBN', '458653012X']\n",
            "PRED 195: 日本 <unk> <unk> <unk> 12 号 <unk> <unk> <unk> （ 1984 年 <unk> ） <unk>\n",
            "PRED SCORE: -10.4143\n",
            "\n",
            "[2021-08-14 10:38:05,699 INFO] \n",
            "SENT 196: ['Umekoji', 'Steam', 'Locomotive', 'Museum', '(', 'Takahiro', 'SEKI', ')']\n",
            "PRED 196: <unk> <unk> 資料 館\n",
            "PRED SCORE: -4.2672\n",
            "\n",
            "[2021-08-14 10:38:05,700 INFO] \n",
            "SENT 197: ['Railway', 'Fan', '(', 'Magazine', ')', '(', 'Koyusha', ')', ',', 'December', 'issue', ',', '1994', ',', 'No.', '404', 'Special', 'Feature', ':', 'The', 'Age', 'When', 'Umekoji', \"'s\", 'Steam', 'Locomotives', 'Were', 'In', 'Service']\n",
            "PRED 197: <unk> <unk> ( <unk> ) （ <unk> 年 12 月 号 ） <unk> 年 12 月 号 <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -21.8545\n",
            "\n",
            "[2021-08-14 10:38:05,700 INFO] \n",
            "SENT 198: ['The', 'issue', 'featured', 'development', 'of', 'Umekoji', 'Park', 'and', 'acceptance', 'of', 'C62', '#', '1', 'in', '1994', ',', 'and', 'carried', 'the', 'logs', 'of', 'respective', 'steam', 'locomotives', 'preserved', '.']\n",
            "PRED 198: 平成 6 年 （ 1994 年 ） に は <unk> <unk> の <unk> <unk> と <unk> 1 号 の 開発 問題 が <unk> し 、 それぞれ の <unk> <unk> を <unk> し た 。\n",
            "PRED SCORE: -25.3082\n",
            "\n",
            "[2021-08-14 10:38:05,700 INFO] \n",
            "SENT 199: ['Umekoji', 'S.T.O.R.Y.', '1-2', ',', 'Reizou', 'TAKAYAMA']\n",
            "PRED 199: <unk> <unk> 、 高山 <unk>\n",
            "PRED SCORE: -3.6105\n",
            "\n",
            "[2021-08-14 10:38:05,700 INFO] \n",
            "SENT 200: ['Railway', 'Fan', '(', 'Koyusha', ')', ',', 'January-February', 'issue', ',', '1998', 'No.', '441-442']\n",
            "PRED 200: <unk> <unk> 問題 、 <unk> <unk> 号\n",
            "PRED SCORE: -5.9803\n",
            "\n",
            "[2021-08-14 10:38:05,700 INFO] \n",
            "SENT 201: ['Shomyo', 'is', 'one', 'of', 'the', 'traditional', 'forms', 'of', 'Japanese', 'music', '.']\n",
            "PRED 201: <unk> （ <unk> ） は 、 日本 の 伝統 的 な 音楽 形態 の 一 つ 。\n",
            "PRED SCORE: -6.5741\n",
            "\n",
            "[2021-08-14 10:38:05,702 INFO] \n",
            "SENT 202: ['It', 'is', 'a', 'chant', 'of', 'Buddhist', 'scriptures', 'and', 'a', 'religious', 'music', 'for', 'ceremonies', '.']\n",
            "PRED 202: 経典 や 宗教 音楽 で あ る 。\n",
            "PRED SCORE: -5.0442\n",
            "\n",
            "[2021-08-14 10:38:05,702 INFO] \n",
            "SENT 203: ['It', 'is', 'also', 'called', 'Bonbai', 'and', 'Bonnoku', 'in', 'Japanese', '.']\n",
            "PRED 203: <unk> ・ <unk> と も い う 。\n",
            "PRED SCORE: -4.8873\n",
            "\n",
            "[2021-08-14 10:38:05,703 INFO] \n",
            "SENT 204: ['It', 'is', 'written', 'as', '聲明', 'in', 'the', 'old', 'form', '.']\n",
            "PRED 204: 古 い 形 で <unk> と 書 く 。\n",
            "PRED SCORE: -6.8035\n",
            "\n",
            "[2021-08-14 10:38:05,703 INFO] \n",
            "SENT 205: ['Shomyo', 'is', 'the', 'name', 'for', 'one', 'of', 'the', 'academic', 'fields', '(', 'Gomyo', ')', 'of', 'ancient', 'India', '.']\n",
            "PRED 205: <unk> （ <unk> ） は 古代 インド の <unk> の 一 つ 。\n",
            "PRED SCORE: -5.8854\n",
            "\n",
            "[2021-08-14 10:38:05,703 INFO] \n",
            "SENT 206: ['Gomyo', 'refers', 'to', 'five', 'academic', 'fields', '-', 'Shomyo', '(', 'phonology', 'and', 'grammar', ')', ',', 'Kugyomyo', '(', 'technics', 'and', 'technology', ')', ',', 'Ihomyo', '(', 'medical', 'science', ')', ',', 'Inmyo', '(', 'ethics', ')', 'and', 'Naimyo', '(', 'study', 'of', 'a', 'scholar', \"'s\", 'religion', ',', 'as', 'in', 'Buddhism', 'for', 'a', 'Buddhist', ')', '.']\n",
            "PRED 206: <unk> （ <unk> ） と は 、 仏教 に お い て 、 <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> など の 5 つ の <unk> を 指 す 。\n",
            "PRED SCORE: -17.2960\n",
            "\n",
            "[2021-08-14 10:38:05,703 INFO] \n",
            "SENT 207: ['It', 'was', 'introduced', 'to', 'Japan', 'together', 'with', 'Buddhism', 'and', 'became', 'well', 'established', '.']\n",
            "PRED 207: 仏教 と とも に 日本 に 伝来 し 、 定着 し た 。\n",
            "PRED SCORE: -6.0560\n",
            "\n",
            "[2021-08-14 10:38:05,704 INFO] \n",
            "SENT 208: ['There', 'is', 'a', 'record', 'that', 'a', 'Buddhist', 'ceremony', 'involving', 'the', 'use', 'of', 'Shomyo', 'was', 'held', 'at', 'the', 'opening', 'ceremony', 'for', 'the', 'Todai-ji', 'Temple', 'Great', 'Buddha', 'Eye', 'in', '754', ',', 'so', 'it', 'is', 'believed', 'that', 'Shomyo', 'flourished', 'during', 'the', 'Nara', 'period', '.']\n",
            "PRED 208: 天平勝宝 6 年 （ 754 年 ） の 東大 寺 大仏 <unk> 供養 の 際 に <unk> の <unk> が 開 か れ た と い う 記録 が あ り 、 奈良 時代 に は <unk> が <unk> た と さ れ る 。\n",
            "PRED SCORE: -23.0883\n",
            "\n",
            "[2021-08-14 10:38:05,704 INFO] \n",
            "SENT 209: ['During', 'the', 'early', 'Heian', 'period', ',', 'Saicho', 'and', 'Kukai', 'introduced', 'Shomyo', 'and', 'founded', 'Tendai', 'Shomyo', 'and', 'Shingon', 'Shomyo', ',', 'respectively', '.']\n",
            "PRED 209: 平安 時代 初期 に は 最澄 と 空海 が <unk> <unk> を 紹介 し 、 天台 <unk> と 真言 <unk> を 開 い た 。\n",
            "PRED SCORE: -14.4496\n",
            "\n",
            "[2021-08-14 10:38:05,704 INFO] \n",
            "SENT 210: ['Buddhist', 'sects', 'other', 'than', 'the', 'Tendai-shu', 'and', 'Shingon-shu', 'sects', 'also', 'have', 'their', 'own', 'Shomyo', ',', 'each', 'of', 'which', 'has', 'been', 'handed', 'down', 'to', 'the', 'present', 'day', '.']\n",
            "PRED 210: また 、 <unk> ・ <unk> 以外 の 宗派 に よ っ て は 現在 まで 伝え られ て い る 。\n",
            "PRED SCORE: -19.0603\n",
            "\n",
            "[2021-08-14 10:38:06,248 INFO] \n",
            "SENT 211: ['Because', 'Shomyo', 'was', 'passed', 'down', 'by', 'Kuden', '(', 'handing', 'down', 'from', 'month', 'to', 'ear', ')', ',', 'there', 'was', 'no', 'musical', 'notation', '.']\n",
            "PRED 211: <unk> に よ っ て 伝え られ た ため 、 <unk> は な かっ た 。\n",
            "PRED SCORE: -12.1770\n",
            "\n",
            "[2021-08-14 10:38:06,248 INFO] \n",
            "SENT 212: ['Therefore', ',', 'its', 'initiation', 'was', 'extremely', 'difficult', '.']\n",
            "PRED 212: その ため 、 <unk> は 非常 に 難し かっ た 。\n",
            "PRED SCORE: -5.6963\n",
            "\n",
            "[2021-08-14 10:38:06,248 INFO] \n",
            "SENT 213: ['Later', ',', 'Hakase', 'was', 'invented', 'as', 'an', 'equivalent', 'of', 'musical', 'notation', '.']\n",
            "PRED 213: その 後 、 <unk> は <unk> の <unk> と し て 考案 さ れ た 。\n",
            "PRED SCORE: -9.1324\n",
            "\n",
            "[2021-08-14 10:38:06,249 INFO] \n",
            "SENT 214: ['There', 'are', 'differences', 'in', 'technical', 'terms', '(', 'such', 'as', 'Hakase', ')', 'in', 'each', 'school', '.']\n",
            "PRED 214: 各 流派 の <unk> （ <unk> など ） の 違い が あ る 。\n",
            "PRED SCORE: -10.2251\n",
            "\n",
            "[2021-08-14 10:38:06,249 INFO] \n",
            "SENT 215: ['However', ',', 'Hakase', 'was', 'a', 'reference', 'to', 'chant', ',', 'and', 'in', 'order', 'to', 'learn', 'Shomyo', ',', 'kuden', '(', 'also', 'called', 'roi', ',', 'or', 'direct', 'initiation', 'by', 'an', 'instructor', ')', 'was', 'necessary', ';', 'therefore', ',', 'conservation', 'and', 'inheritance', 'were', 'impossible', 'from', 'the', 'perspective', 'of', 'a', 'master', 'to', 'a', 'disciple', '.']\n",
            "PRED 215: しかし ながら 、 <unk> は <unk> の 参考 と な っ た もの で あ り 、 <unk> <unk> （ <unk> ） を 学 ぶ ため に 必要 な もの で あ っ た ため 、 <unk> ・ 相続 は 弟子 へ の <unk> から <unk> でき な かっ た 。\n",
            "PRED SCORE: -38.5305\n",
            "\n",
            "[2021-08-14 10:38:06,249 INFO] \n",
            "SENT 216: ['Therefore', ',', 'the', 'development', 'of', 'instructors', 'and', 'successors', 'was', 'a', 'must', '.']\n",
            "PRED 216: その ため 、 <unk> ・ <unk> の 開発 は <unk> で あ る 。\n",
            "PRED SCORE: -11.0094\n",
            "\n",
            "[2021-08-14 10:38:06,249 INFO] \n",
            "SENT 217: ['Numerous', 'schools', 'were', 'extinguished', 'due', 'to', 'various', 'circumstances', '.']\n",
            "PRED 217: <unk> 学校 は 様々 な 事情 に よ り 消滅 し た 。\n",
            "PRED SCORE: -8.7749\n",
            "\n",
            "[2021-08-14 10:38:06,250 INFO] \n",
            "SENT 218: ['Tendai', 'Shomyo', 'developed', 'independently', ',', 'in', 'accordance', 'with', 'what', 'Saicho', 'had', 'introduced', '.']\n",
            "PRED 218: 天台 <unk> は 、 最澄 の <unk> に 従 っ て 独自 に 発展 し た 。\n",
            "PRED SCORE: -11.9134\n",
            "\n",
            "[2021-08-14 10:38:06,250 INFO] \n",
            "SENT 219: ['After', 'Saicho', ',', 'Ennin', 'and', 'Annen', 'made', 'it', 'prosperous', '.']\n",
            "PRED 219: 最澄 の 後 、 円仁 ・ 安然 ら が <unk> し た 。\n",
            "PRED SCORE: -11.4637\n",
            "\n",
            "[2021-08-14 10:38:06,250 INFO] \n",
            "SENT 220: ['Ryonin', ',', 'the', 'founder', 'of', 'Yuzunembutsu-shu', 'sect', ',', 'is', 'known', 'as', 'the', 'patriarch', 'of', 'the', 'Restoration', '.']\n",
            "PRED 220: 宗祖 良忍 は 中興 開山 と し て 知 ら れ る 。\n",
            "PRED SCORE: -7.1027\n",
            "\n",
            "[2021-08-14 10:38:06,250 INFO] \n",
            "SENT 221: ['In', '1109', ',', 'Ryonin', 'built', 'Raigoin', 'Temple', '(', 'Sakyo', 'Ward', ',', 'Kyoto', 'City', ')', 'in', 'Ohara', ',', 'Kyoto', '.']\n",
            "PRED 221: <unk> 2 年 （ <unk> 年 ） に は 京都 の 大原 に <unk> 寺 ( 京都 市 左京 区 ) を 建立 し た 。\n",
            "PRED SCORE: -12.6676\n",
            "\n",
            "[2021-08-14 10:38:06,250 INFO] \n",
            "SENT 222: ['Raigoin', 'Temple', ',', 'in', 'Ohara', ',', 'was', 'called', 'Gyozan', 'as', 'the', 'temple', \"'s\", 'title', ',', 'having', 'been', 'named', 'after', 'Gyozan', ',', 'the', 'birthplace', 'of', 'Shomyo', 'in', 'China', '.']\n",
            "PRED 222: 大原 の <unk> 寺 は 、 中国 の <unk> 発祥 の 地 で あ る <unk> に ちな ん で <unk> と 呼 ば れ た 。\n",
            "PRED SCORE: -14.0313\n",
            "\n",
            "[2021-08-14 10:38:06,251 INFO] \n",
            "SENT 223: ['Before', 'long', ',', 'Raigoin', 'Temple', 'and', 'Shorinin', 'Temple', 'were', 'known', 'as', 'the', 'dojos', 'of', 'Ohara', 'School', 'Gyozan', 'Shomyo', '.']\n",
            "PRED 223: やがて <unk> 寺 と <unk> 寺 は 大原 小 学校 の <unk> と し て 知 ら れ た 。\n",
            "PRED SCORE: -10.8163\n",
            "\n",
            "[2021-08-14 10:38:06,251 INFO] \n",
            "SENT 224: ['Jakugen', 'developed', 'a', 'school', 'later', ',', 'so', 'there', 'were', 'two', 'schools', 'of', 'Shomyo', 'in', 'Ohara', '.']\n",
            "PRED 224: 後 に <unk> が 学校 を 発展 さ せ た ため 、 大原 に は <unk> の 2 校 が あ っ た 。\n",
            "PRED SCORE: -15.6101\n",
            "\n",
            "[2021-08-14 10:38:06,251 INFO] \n",
            "SENT 225: ['Subsequently', ',', 'Shukai', 'restored', 'Ohara', 'Shomyo', '.']\n",
            "PRED 225: その 後 、 <unk> は 大原 <unk> を 復活 さ せ た 。\n",
            "PRED SCORE: -5.3805\n",
            "\n",
            "[2021-08-14 10:38:06,251 INFO] \n",
            "SENT 226: ['Tanchi', 'established', 'a', 'stream', 'based', 'on', 'a', 'new', 'form', 'of', 'music', 'theory', '.']\n",
            "PRED 226: <unk> は 、 新し い 音楽 理論 に 基づ い て <unk> を 形成 し た 。\n",
            "PRED SCORE: -12.6303\n",
            "\n",
            "[2021-08-14 10:38:06,252 INFO] \n",
            "SENT 227: ['Since', 'then', ',', 'it', 'became', 'the', 'center', 'of', 'Tendai', 'Shomyo', ',', 'and', 'it', 'has', 'been', 'inherited', 'by', 'the', 'present', 'Tendai', 'Shomyo', '.']\n",
            "PRED 227: 以来 、 天台 <unk> の 中心 と な り 、 現在 の 天台 <unk> に 引き継 が れ て い る 。\n",
            "PRED SCORE: -8.2556\n",
            "\n",
            "[2021-08-14 10:38:06,252 INFO] \n",
            "SENT 228: ['The', 'Yuzunembutsu-shu', 'sect', ',', 'Jodo-shu', 'sect', 'and', 'Jodo', 'Shinshu', 'sect', 'represent', 'the', 'lineage', 'of', 'Tendai', 'Shomyo', '.']\n",
            "PRED 228: 浄土 宗 ・ 浄土 真宗 ・ 浄土 真宗 は 天台 <unk> の 系統 を 指 す 。\n",
            "PRED SCORE: -9.5130\n",
            "\n",
            "[2021-08-14 10:38:06,252 INFO] \n",
            "SENT 229: ['Shingon', 'Shomyo', 'has', 'been', 'passed', 'down', 'to', 'the', 'present', 'day', 'based', 'on', 'what', 'Kukai', 'introduced', '.']\n",
            "PRED 229: 現在 の <unk> は 、 空海 の 紹介 に よ り 伝え られ て い る 。\n",
            "PRED SCORE: -13.8942\n",
            "\n",
            "[2021-08-14 10:38:06,252 INFO] \n",
            "SENT 230: ['Shomyo', 'was', 'systematized', 'after', 'Shinga', '.']\n",
            "PRED 230: <unk> は <unk> <unk> に よ っ て 体系 化 さ れ た 。\n",
            "PRED SCORE: -8.0383\n",
            "\n",
            "[2021-08-14 10:38:06,253 INFO] \n",
            "SENT 231: ['Particularly', ',', 'Kancho', 'was', 'known', 'as', 'the', 'patriarch', 'of', 'the', 'Restoration', '.']\n",
            "PRED 231: 特に <unk> は 維新 の 祖 と し て 知 ら れ た 。\n",
            "PRED SCORE: -7.2216\n",
            "\n",
            "[2021-08-14 10:38:06,253 INFO] \n",
            "SENT 232: ['He', 'worked', 'on', 'the', 'composition', 'and', 'control', 'of', 'Shomyo', '.']\n",
            "PRED 232: <unk> の 構成 ・ 支配 に 当た っ た 。\n",
            "PRED SCORE: -6.6401\n",
            "\n",
            "[2021-08-14 10:38:06,253 INFO] \n",
            "SENT 233: ['There', 'were', 'numerous', 'schools', 'until', 'the', 'Kamakura', 'period', ',', 'but', 'the', 'princely', 'priest', 'Kakusho', 'reorganized', 'them', 'into', 'four', ':', 'the', 'Honsoinryu', 'School', ',', 'Shinsoinryu', 'School', ',', 'Daigoryu', 'School', 'and', 'Nakagawa-Daishinryu', 'School', '.']\n",
            "PRED 233: 鎌倉 時代 まで は 多く の 流派 が あ っ た が 、 <unk> <unk> は <unk> 流 、 <unk> 流 、 <unk> 流 、 <unk> 流 の 4 校 に <unk> し た 。\n",
            "PRED SCORE: -20.7492\n",
            "\n",
            "[2021-08-14 10:38:06,253 INFO] \n",
            "SENT 234: ['Shomyo', ',', 'of', 'the', 'Kogi', '(', 'old', ')', 'Shingonshu', 'sect', ',', 'declined', 'and', 'became', 'extinct', 'with', 'the', 'emergence', 'of', 'the', 'Edo', 'period', '.']\n",
            "PRED 234: 真言 宗 系 の <unk> は 衰退 し 、 江戸 時代 の <unk> と <unk> し た 。\n",
            "PRED SCORE: -13.5488\n",
            "\n",
            "[2021-08-14 10:38:06,254 INFO] \n",
            "SENT 235: ['The', 'Honsoinryu', 'School', ',', 'Shinsoinryu', 'School', 'and', 'Daigoryu', 'School', 'were', 'extinguished', 'by', 'the', 'middle', 'of', 'the', 'Meiji', 'period', '.']\n",
            "PRED 235: 明治 中期 に は <unk> 学校 ・ <unk> 学校 ・ <unk> 学校 が <unk> し た 。\n",
            "PRED SCORE: -11.6950\n",
            "\n",
            "[2021-08-14 10:38:06,254 INFO] \n",
            "SENT 236: ['Currently', ',', 'it', 'is', 'divided', 'into', 'Chizan', 'Shomyo', '(', 'Chishakuin', ',', 'Kyoto', ')', ',', 'Buzan', 'Shomyo', '(', 'Hase-dera', 'Temple', ',', 'Nara', ')', ',', 'Nanzan-shinryu', 'School', '(', 'Mt', '.', 'Koya-san', 'and', 'Kogi', 'Shingonshu', 'sect', 'temples', ',', 'Kyoto', ')', '.']\n",
            "PRED 236: 現在 は <unk> <unk> （ 京都 ・ 智積 院 ） 、 豊山 <unk> （ 奈良 ・ 長谷 寺 ） 、 <unk> 小 学校 （ 京都 ・ 真言 宗 寺院 ） に 分かれ て い る 。\n",
            "PRED SCORE: -16.0991\n",
            "\n",
            "[2021-08-14 10:38:06,254 INFO] \n",
            "SENT 237: ['Chizan', 'Shomyo', 'and', 'Buzan', 'Shomyo', '(', 'Shingi', '(', 'new', ')', 'Shingonshu', 'sect', 'Shomyo', ')', ':', 'Shomyo', 'of', 'Chizan-ha', 'Buddhists', ',', 'Shingon-shu', 'sect', 'and', 'that', 'of', 'Buzan-ha', 'Buddhists', ',', 'Shingon-shu', 'sect', 'were', 'originally', 'derived', 'from', 'the', 'Nakagawa-Daishinryu', 'School', '.']\n",
            "PRED 237: <unk> <unk> と <unk> <unk> （ 真言 宗 <unk> ） ： <unk> <unk> の <unk> で あ り 、 仏教 寺院 で あ る <unk> 宗 と <unk> 宗 <unk> の <unk> は 、 元々 は <unk> 流 に 由来 する 。\n",
            "PRED SCORE: -42.4587\n",
            "\n",
            "[2021-08-14 10:38:06,254 INFO] \n",
            "SENT 238: ['Raiyu', 'took', 'in', 'the', 'traditional', 'school', 'of', 'Daigo', '.']\n",
            "PRED 238: 醍醐 流 で は <unk> が 行 わ れ た 。\n",
            "PRED SCORE: -7.7398\n",
            "\n",
            "[2021-08-14 10:38:06,255 INFO] \n",
            "SENT 239: ['In', '1585', ',', 'when', 'Negoro-ji', 'Temple', '(', 'Wakayama', 'Prefecture', ')', 'was', 'burned', 'down', 'by', 'Hideyoshi', 'TOYOTOMI', 'and', 'went', 'into', 'decline', ',', 'the', 'Chizan', 'and', 'Buzan', 'schools', 'formed', 'a', 'school', 'based', 'on', 'the', 'traditional', 'school', 'of', 'Daigo', '.']\n",
            "PRED 239: 1585 年 （ 天正 13 年 ） に は 豊臣 秀吉 に よ っ て 根来 寺 ( 和歌山 県 ) が 焼失 し て 衰退 し た 際 に は 、 <unk> ・ <unk> が 醍醐 の <unk> に よ っ て 学校 を 形成 し た 。\n",
            "PRED SCORE: -28.7758\n",
            "\n",
            "[2021-08-14 10:38:06,255 INFO] \n",
            "SENT 240: ['It', 'features', 'Buzan', \"'s\", \"'\", 'Logic', \"'\", 'and', 'Chizan', \"'s\", \"'\", 'Shomyo', '.', \"'\"]\n",
            "PRED 240: 「 <unk> 」 と <unk> の 「 <unk> 」 を 特徴 と する 。\n",
            "PRED SCORE: -6.8479\n",
            "\n",
            "[2021-08-14 10:38:06,678 INFO] \n",
            "SENT 241: ['Nanzan-shinryu', 'School', '(', 'Kogi', 'Shingonshu', 'sect', 'Shomyo', ')', ':', 'This', 'school', 'is', 'based', 'on', 'the', 'Nakagawa-Daishinryu', 'School', '.']\n",
            "PRED 241: <unk> 学校 （ <unk> <unk> ） ： <unk> 学校 を 本拠 と する 。\n",
            "PRED SCORE: -13.1356\n",
            "\n",
            "[2021-08-14 10:38:06,678 INFO] \n",
            "SENT 242: ['The', 'Nakagawa-Daishinryu', 'School', 'has', 'Daishin', ',', 'of', 'Naka-no-gawadera', 'Temple', ',', 'Nara', ',', 'as', 'the', 'founder', 'of', 'the', 'school', '.']\n",
            "PRED 242: <unk> 流 の 開祖 と し て は 、 奈良 ・ <unk> 寺 の <unk> <unk> が あ る 。\n",
            "PRED SCORE: -16.8304\n",
            "\n",
            "[2021-08-14 10:38:06,678 INFO] \n",
            "SENT 243: ['During', 'the', 'years', '1232', 'and', '1233', ',', 'Shoshin', ',', 'of', 'Sanboin', 'Temple', 'in', 'Renge-dani', '(', 'Mt', '.', 'Koya-san', ')', ',', 'moved', 'his', 'stronghold', 'to', 'Mt', '.', 'Koya-san', '.']\n",
            "PRED 243: <unk> ・ <unk> 年間 に は <unk> 寺 の <unk> が <unk> 山 に 本拠 を 移 し た 。\n",
            "PRED SCORE: -12.8173\n",
            "\n",
            "[2021-08-14 10:38:06,679 INFO] \n",
            "SENT 244: ['Later', ',', 'it', 'was', 'called', 'the', 'Nanzan-shinryu', 'School', ',', 'being', 'named', 'after', 'Nanzan', ',', 'another', 'name', 'for', 'Mt', '.', 'Koya-san', '.']\n",
            "PRED 244: 後 に <unk> 山 の 別名 で あ る <unk> に ちな ん で <unk> 学校 と 呼 ば れ た 。\n",
            "PRED SCORE: -13.1901\n",
            "\n",
            "[2021-08-14 10:38:06,679 INFO] \n",
            "SENT 245: ['It', 'is', 'also', 'called', 'the', 'Shinryu', 'School', 'or', 'the', 'Yasan', 'Shinryu', 'School', '.']\n",
            "PRED 245: <unk> 学校 ・ <unk> 学校 と も い う 。\n",
            "PRED SCORE: -7.0391\n",
            "\n",
            "[2021-08-14 10:38:06,679 INFO] \n",
            "SENT 246: ['The', 'music', 'of', 'Heikyoku', ',', 'Yokyoku', ',', 'Minyo', 'or', 'Joruri', 'can', 'be', 'said', 'to', 'be', 'variations', 'of', 'Shomyo', '.']\n",
            "PRED 246: <unk> 、 <unk> 、 <unk> 、 浄瑠璃 など の 音楽 は <unk> <unk> の <unk> と いえ る 。\n",
            "PRED SCORE: -14.4817\n",
            "\n",
            "[2021-08-14 10:38:06,680 INFO] \n",
            "SENT 247: ['Its', 'has', 'had', 'a', 'great', 'impact', 'on', 'monophony', '(', 'unaccompanied', 'music', ')', '.']\n",
            "PRED 247: <unk> に 大きな 影響 を 与え た 。\n",
            "PRED SCORE: -5.6240\n",
            "\n",
            "[2021-08-14 10:38:06,680 INFO] \n",
            "SENT 248: ['Emperor', 'Tenchi', '(', 'Tenji', ')']\n",
            "PRED 248: <unk> 天皇\n",
            "PRED SCORE: -1.6815\n",
            "\n",
            "[2021-08-14 10:38:06,680 INFO] \n",
            "SENT 249: ['Male']\n",
            "PRED 249: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:06,680 INFO] \n",
            "SENT 250: ['Empress', 'Suiko', '(', '626', ')', '-', 'Emperor', 'Tenchi', '(', 'Tenji', ')', '(', 'January', '10', ',', '672', ')']\n",
            "PRED 250: 推古 天皇 - <unk> 天皇 （ <unk> 年 1 月 10 日 ）\n",
            "PRED SCORE: -4.3674\n",
            "\n",
            "[2021-08-14 10:38:06,681 INFO] \n",
            "SENT 251: ['The', '38th', 'Emperor']\n",
            "PRED 251: <unk> 天皇\n",
            "PRED SCORE: -1.1923\n",
            "\n",
            "[2021-08-14 10:38:06,681 INFO] \n",
            "SENT 252: ['Kokufu', 'Shigo', 'is', 'Amemikoto', 'hirakasuwake', 'no', 'mikoto', '/', 'Amatsumikoto', 'sakiwake', 'no', 'mikoto']\n",
            "PRED 252: 国風 諡号 は <unk> <unk> ・ <unk> <unk> 。\n",
            "PRED SCORE: -6.8544\n",
            "\n",
            "[2021-08-14 10:38:06,681 INFO] \n",
            "SENT 253: ['The', 'first', 'name', 'is', 'Kazuraki', '(', 'Katsuragi', ')', '.']\n",
            "PRED 253: 名 は <unk> 。\n",
            "PRED SCORE: -3.3371\n",
            "\n",
            "[2021-08-14 10:38:06,681 INFO] \n",
            "SENT 254: ['It', 'is', 'presumed', 'that', 'he', 'was', 'once', 'called', 'Kazuraki', 'no', 'miko', '(', 'Katsuragi', 'no', 'miko', ')', '.']\n",
            "PRED 254: <unk> の <unk> と さ れ る 。\n",
            "PRED SCORE: -5.7927\n",
            "\n",
            "[2021-08-14 10:38:06,682 INFO] \n",
            "SENT 255: ['He', 'is', 'generally', 'known', 'as', 'Nakano', 'Oe', 'no', 'Oji', '(', 'Naka', 'no', 'Oe', 'no', 'Miko', ')', '.']\n",
            "PRED 255: 一般 に は 中 <unk> の 君 と 呼 ば れ る 。\n",
            "PRED SCORE: -8.2975\n",
            "\n",
            "[2021-08-14 10:38:06,682 INFO] \n",
            "SENT 256: ['The', '\"', 'oe', '\"', 'means', '\"', 'prince', ',', '\"', 'and', '\"', 'Nakano', 'oe', '\"', 'means', '\"', 'second', 'prince', '.', '\"']\n",
            "PRED 256: <unk> （ <unk> ） と は 、 皇子 を 指 し 、 <unk> と は 第 二 皇子 を 指 す 。\n",
            "PRED SCORE: -14.3775\n",
            "\n",
            "[2021-08-14 10:38:06,682 INFO] \n",
            "SENT 257: ['Overview']\n",
            "PRED 257: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:06,683 INFO] \n",
            "SENT 258: ['He', 'was', 'the', 'second', 'prince', 'of', 'Emperor', 'Jome', '.']\n",
            "PRED 258: <unk> 天皇 の 第 二 皇子 。\n",
            "PRED SCORE: -1.7528\n",
            "\n",
            "[2021-08-14 10:38:06,683 INFO] \n",
            "SENT 259: ['The', 'mother', 'was', 'Takara', 'no', 'Himemiko', '(', 'later', 'called', 'Empress', 'Kogyoku', ')', '.']\n",
            "PRED 259: 母 は <unk> 皇太后 。\n",
            "PRED SCORE: -4.4441\n",
            "\n",
            "[2021-08-14 10:38:06,683 INFO] \n",
            "SENT 260: ['The', 'Empress', 'was', 'Yamatohime', 'no', 'Okimi', ',', 'daughter', 'of', 'Emperor', \"'s\", 'half-brother', ',', 'Furuhito', 'no', 'Oe', 'no', 'Miko', '.']\n",
            "PRED 260: 皇后 は 天皇 の 異母 弟 <unk> <unk> の 娘 、 <unk> <unk> 。\n",
            "PRED SCORE: -11.4702\n",
            "\n",
            "[2021-08-14 10:38:06,683 INFO] \n",
            "SENT 261: ['The', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'plotted', 'a', 'rebellion', 'with', 'NAKATOMI', 'no', 'Kamatari', 'and', 'seized', 'power', 'in', 'a', 'coup', 'to', 'kill', 'SOGA', 'no', 'Iruka', ',', 'by', 'which', 'his', 'uncle', 'Emperor', 'Kotoku', 'came', 'to', 'power', 'and', 'he', 'became', 'a', 'prince', '.']\n",
            "PRED 261: <unk> 天皇 （ <unk> 年 - <unk> 年 ） は 、 叔父 の <unk> 天皇 が 権力 を 握 り 、 皇子 と な っ た <unk> <unk> を <unk> の <unk> で <unk> し た 。\n",
            "PRED SCORE: -28.3905\n",
            "\n",
            "[2021-08-14 10:38:06,684 INFO] \n",
            "SENT 262: ['He', 'established', 'a', 'new', 'era--the', 'Taika--and', 'made', 'many', 'reforms', 'during', 'this', 'period', '(', 'he', 'was', 'a', 'key', 'person', 'in', 'the', 'Taika', 'reforms', 'and', 'Itsushi', 'no', 'hen', ')', '.']\n",
            "PRED 262: この 時期 に は 新た な <unk> <unk> を 確立 し た （ <unk> <unk> ・ <unk> <unk> の <unk> ） 。\n",
            "PRED SCORE: -18.9573\n",
            "\n",
            "[2021-08-14 10:38:06,684 INFO] \n",
            "SENT 263: ['He', 'devised', 'a', 'plan', 'to', 'trap', 'an', 'opposition', 'group', 'that', 'included', 'Arima', 'no', 'Miko', ',', 'who', 'might', 'have', 'caused', 'a', 'coup', 'in', 'the', 'future', ',', 'and', 'they', 'were', 'executed', '.']\n",
            "PRED 263: 将来 <unk> を 起こ し た の で は な い か と 思 わ れ る <unk> <unk> ら の 反対 運動 を <unk> し た 。\n",
            "PRED SCORE: -21.8212\n",
            "\n",
            "[2021-08-14 10:38:06,684 INFO] \n",
            "SENT 264: ['As', 'Baekje', 'was', 'destroyed', 'by', 'the', 'Silla', '(', 'Kingdom', ')', 'and', 'Tang', 'in', '660', ',', 'the', 'Baekje', 'prince', ',', 'Buyeo', 'Pung', ',', 'who', 'was', 'staying', 'at', 'the', 'Imperial', 'Court', ',', 'was', 'sent', 'back', 'to', 'his', 'country', 'to', 'save', 'Baekje', '.']\n",
            "PRED 264: <unk> 2 年 （ <unk> 年 ） に 新羅 と 唐 に よ っ て <unk> が 滅ぼ さ れ た ため 、 朝廷 に 滞在 し て い た <unk> 王 が 帰国 し た 。\n",
            "PRED SCORE: -20.7307\n",
            "\n",
            "[2021-08-14 10:38:06,684 INFO] \n",
            "SENT 265: ['The', 'Emperor', 'stayed', 'at', 'Tsukushi', 'to', 'send', 'covert', 'troops', 'to', 'Baekje', ',', 'but', 'Empress', 'Saimei', 'died', 'in', '661', '.']\n",
            "PRED 265: 天皇 は <unk> に <unk> を 送 る ため <unk> に <unk> し た が 、 <unk> 2 年 （ <unk> 年 ） に 皇太后 が 死去 し た 。\n",
            "PRED SCORE: -18.8105\n",
            "\n",
            "[2021-08-14 10:38:06,685 INFO] \n",
            "SENT 266: ['Eventually', ',', 'the', 'Emperor', 'took', 'control', 'of', 'the', 'government', 'without', 'having', 'an', 'enthronement', 'ceremony', ',', 'but', 'then', 'he', 'was', 'severely', 'defeated', 'in', 'the', 'Battle', 'of', 'Hakusukinoe', 'and', 'moved', 'to', 'Otsu', 'City', 'to', 'be', 'enthroned', 'in', '663', '.']\n",
            "PRED 266: やがて 天皇 は 即位 式 を 持 た ず に <unk> を 掌握 し た が 、 <unk> の 戦い で 敗れ 、 <unk> 年 に 大津 市 に <unk> し た 。\n",
            "PRED SCORE: -20.7287\n",
            "\n",
            "[2021-08-14 10:38:06,685 INFO] \n",
            "SENT 267: ['After', 'the', 'Battle', 'of', 'Hakusukinoe', 'a', 'castle', 'surrounded', 'by', 'water', 'was', 'built', ',', 'and', 'Noroshi', 'and', 'Sakimori', '(', 'the', 'conscript', 'soldier', 'system', 'in', 'the', 'old', 'days', ')', 'were', 'organized', 'to', 'protect', 'the', 'territory', '.']\n",
            "PRED 267: <unk> の 戦い の 後 、 <unk> に 囲 ま れ た 城 を <unk> し 、 <unk> を 守 る ため に <unk> ・ <unk> が 組織 さ れ た 。\n",
            "PRED SCORE: -22.0177\n",
            "\n",
            "[2021-08-14 10:38:06,686 INFO] \n",
            "SENT 268: ['Moreover', ',', 'the', 'system', 'of', 'ranking', 'officials', 'was', 'changed', 'from', '19', 'levels', 'to', '26', 'levels', '.']\n",
            "PRED 268: また 、 <unk> <unk> の 制度 は 19 段 から 26 段 に 変更 さ れ た 。\n",
            "PRED SCORE: -10.8288\n",
            "\n",
            "[2021-08-14 10:38:06,686 INFO] \n",
            "SENT 269: ['In', '670', 'the', 'first', 'national', 'family', 'registry', ',', '\"', 'Kogo-nenjaku', ',', '\"', 'was', 'introduced', '.']\n",
            "PRED 269: <unk> 年 に 初めて の <unk> <unk> 『 <unk> 』 が <unk> さ れ た 。\n",
            "PRED SCORE: -12.8085\n",
            "\n",
            "[2021-08-14 10:38:06,687 INFO] \n",
            "SENT 270: ['According', 'to', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', ',', '\"', 'the', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'wanted', 'the', 'first', 'prince', ',', 'Otomo', 'no', 'Miko', ',', 'to', 'be', 'his', 'successor', '.']\n",
            "PRED 270: 『 日本 書紀 』 に よ れ ば 、 <unk> 天皇 は 第 一 皇子 で あ る 大友 皇子 を 即位 さ せ た 。\n",
            "PRED SCORE: -12.4560\n",
            "\n",
            "[2021-08-14 10:38:07,606 INFO] \n",
            "SENT 271: ['However', ',', 'after', 'the', 'death', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'his', 'brother', ',', 'Oama', 'no', 'Miko', '(', 'Emperor', 'Temmu', ')', ',', 'defeated', 'Otomo', 'no', 'Miko', 'in', 'the', 'Jinshin', 'War', '(', 'the', 'Jinshin', 'Disturbance', ')', 'and', 'was', 'enthroned', '.']\n",
            "PRED 271: しかし 、 <unk> 天皇 （ <unk> 天皇 ） の 死後 、 <unk> の 乱 （ <unk> の 乱 ） で 大友 <unk> を 破 り 即位 し た 。\n",
            "PRED SCORE: -14.6863\n",
            "\n",
            "[2021-08-14 10:38:07,607 INFO] \n",
            "SENT 272: ['Subsequently', ',', 'Emperor', 'Temmu', \"'s\", 'ancestry', 'remained', 'in', 'power', 'until', 'Empress', 'Shotoku', '.']\n",
            "PRED 272: その 後 、 <unk> 天皇 の 治世 は 称徳 天皇 まで 続 い た 。\n",
            "PRED SCORE: -7.1318\n",
            "\n",
            "[2021-08-14 10:38:07,607 INFO] \n",
            "SENT 273: ['After', 'the', 'death', 'of', 'Empress', 'Shotoku', ',', 'Sirakabe', 'no', 'Okimi', ',', 'a', 'grandchild', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'was', 'enthroned', 'as', 'Emperor', 'Konin', 'and', 'subsequently', 'Emperor', 'Tenchi', \"'s\", '(', 'Tenji', \"'s\", ')', 'ancestry', 'stayed', 'in', 'power', '.']\n",
            "PRED 273: 称徳 天皇 の 死後 、 <unk> 天皇 の 孫 で あ る <unk> <unk> （ <unk> 天皇 ） が <unk> 天皇 と し て 即位 し 、 <unk> 天皇 の <unk> （ <unk> の 曾孫 ） が <unk> し た 。\n",
            "PRED SCORE: -21.3745\n",
            "\n",
            "[2021-08-14 10:38:07,607 INFO] \n",
            "SENT 274: ['It', 'is', 'said', 'that', 'because', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'took', 'Nukata', 'no', 'Okimi', 'away', 'from', 'Oama', 'no', 'Miko', '(', 'Emperor', 'Temmu', ')', ',', 'he', 'sent', 'his', 'four', 'daughters', 'to', 'Oama', 'no', 'Miko', '(', 'Emperor', 'Temmu', ')', 'to', 'become', 'princesses', 'for', 'an', 'expiation', '.']\n",
            "PRED 274: <unk> 天皇 （ <unk> 天皇 ） が <unk> <unk> （ <unk> 天皇 ） から <unk> し た ため 、 4 人 の <unk> を <unk> <unk> （ <unk> 天皇 ） に 派遣 し て <unk> の <unk> と な っ た と さ れ る 。\n",
            "PRED SCORE: -27.7638\n",
            "\n",
            "[2021-08-14 10:38:07,608 INFO] \n",
            "SENT 275: ['Brief', 'Personal', 'History']\n",
            "PRED 275: <unk>\n",
            "PRED SCORE: -0.9145\n",
            "\n",
            "[2021-08-14 10:38:07,608 INFO] \n",
            "SENT 276: ['Born', 'in', '626']\n",
            "PRED 276: <unk> 年 に 生まれ る 。\n",
            "PRED SCORE: -4.2512\n",
            "\n",
            "[2021-08-14 10:38:07,608 INFO] \n",
            "SENT 277: ['Rittaishi', '(', 'the', 'ceremony', 'to', 'institute', 'the', 'Crown', 'Prince', ')', 'was', 'held', 'on', 'July', '15', ',', '645', '.']\n",
            "PRED 277: <unk> 年 7 月 15 日 に <unk> 式 が 行 わ れ た 。\n",
            "PRED SCORE: -7.6282\n",
            "\n",
            "[2021-08-14 10:38:07,609 INFO] \n",
            "SENT 278: ['Politics', 'began', 'without', 'having', 'an', 'enthronement', 'ceremony', 'August', '27', ',', '661', '.']\n",
            "PRED 278: <unk> 年 8 月 27 日 に 即位 式 が 行 わ れ な く な っ た 。\n",
            "PRED SCORE: -10.5672\n",
            "\n",
            "[2021-08-14 10:38:07,609 INFO] \n",
            "SENT 279: ['The', 'enthronement', 'was', 'held', 'on', 'February', '23', ',', '668', '.']\n",
            "PRED 279: <unk> 年 2 月 23 日 に 即位 。\n",
            "PRED SCORE: -4.2146\n",
            "\n",
            "[2021-08-14 10:38:07,609 INFO] \n",
            "SENT 280: ['He', 'died', 'on', 'January', '10', ',', '672', 'at', 'age', '46', '.']\n",
            "PRED 280: <unk> 年 1 月 10 日 に <unk> 歳 で 死去 。\n",
            "PRED SCORE: -5.6684\n",
            "\n",
            "[2021-08-14 10:38:07,610 INFO] \n",
            "SENT 281: ['(', 'According', 'to', '\"', 'Fuso-Ryakki', '\"', ',', 'he', 'died', 'from', 'an', 'illness', ',', 'but', 'another', 'explanation', 'that', 'has', 'been', 'offered', 'is', 'that', 'he', 'went', 'missing', 'in', 'the', 'mountains', 'and', 'that', 'Emperor', 'Temmu', 'had', 'him', 'assassinated', '.', ')']\n",
            "PRED 281: （ 『 <unk> 抄 』 に よ れ ば <unk> で <unk> し た と あ る が 、 山 に <unk> し た と する 説 と 、 <unk> 天皇 が <unk> し た と する 説 も あ る ） 。\n",
            "PRED SCORE: -24.4477\n",
            "\n",
            "[2021-08-14 10:38:07,610 INFO] \n",
            "SENT 282: ['It', 'was', 'one', 'of', 'the', 'mysteries', 'of', 'the', 'mid-seventh', 'century', 'that', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'did', 'not', 'stay', 'in', 'power', 'for', 'a', 'long', 'time', '.']\n",
            "PRED 282: <unk> 天皇 （ <unk> ） が 長 期間 に わた っ て <unk> し な かっ た の は 13 世紀 の <unk> の 一 つ で あ る 。\n",
            "PRED SCORE: -19.5443\n",
            "\n",
            "[2021-08-14 10:38:07,610 INFO] \n",
            "SENT 283: ['Various', 'theories', 'have', 'been', 'suggested', 'in', 'regard', 'to', 'the', 'matter', '.']\n",
            "PRED 283: これ に つ い て は 諸説 あ る 。\n",
            "PRED SCORE: -4.8384\n",
            "\n",
            "[2021-08-14 10:38:07,611 INFO] \n",
            "SENT 284: ['This', 'was', 'the', 'consideration', 'for', 'setting', 'up', 'Emperor', 'Temmu', \"'s\", 'backbone', '.']\n",
            "PRED 284: これ は <unk> 天皇 の <unk> を <unk> する ため の もの で あ る 。\n",
            "PRED SCORE: -9.2321\n",
            "\n",
            "[2021-08-14 10:38:07,611 INFO] \n",
            "SENT 285: ['There', 'was', 'an', 'accepted', 'theory', 'that', 'Emperor', 'Temmu', 'was', 'a', 'younger', 'brother', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', ',', 'but', 'this', 'is', 'denied', ';', 'another', 'theory', 'is', 'that', 'Emperor', 'Temmu', 'was', 'Aya', 'no', 'Miko', ',', 'whom', 'Empress', 'Kogyoku', 'had', 'before', 'she', 'married', 'Emperor', 'Jomei', ',', 'and', 'that', 'he', 'was', 'an', 'older', 'half-brother', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', '.']\n",
            "PRED 285: <unk> 天皇 は <unk> 天皇 の 弟 で あ る と する 説 が あ る が 、 これ は <unk> 天皇 が <unk> 天皇 に 嫁 ぐ 前 に <unk> 天皇 を <unk> し た <unk> <unk> で あ り 、 <unk> 天皇 の 異母 兄 と する 説 も あ る 。\n",
            "PRED SCORE: -27.6902\n",
            "\n",
            "[2021-08-14 10:38:07,611 INFO] \n",
            "SENT 286: ['It', 'is', 'apparent', 'that', 'Emperor', 'Temmu', 'was', 'older', 'than', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'after', 'tracing', 'back', 'their', 'ages', 'according', 'to', 'the', 'Emperor', 'Tenchi', \"'s\", '(', 'Tenji', \"'s\", ')', 'age', 'at', 'death', 'in', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', '\"', 'and', 'the', 'Emperor', 'Temmu', \"'s\", 'age', 'at', 'death', 'in', 'other', 'history', 'books', '.']\n",
            "PRED 286: 『 日本 書紀 』 、 『 日本 書紀 』 に よ れ ば <unk> 天皇 の 没年 （ <unk> 年 ） 、 <unk> 天皇 の 時代 に よ り <unk> 天皇 より も 古 い と さ れ る 。\n",
            "PRED SCORE: -31.2569\n",
            "\n",
            "[2021-08-14 10:38:07,612 INFO] \n",
            "SENT 287: ['The', 'information', 'is', 'consistent', 'in', 'the', 'same', 'historical', 'records', ',', 'and', 'there', 'are', 'eight', 'to', 'nine', 'years', 'of', 'age', 'difference', 'between', 'the', 'two', 'emperors', '.']\n",
            "PRED 287: 同 時代 史料 に は 8 ～ 9 歳 の 記事 が あ る 。\n",
            "PRED SCORE: -12.7425\n",
            "\n",
            "[2021-08-14 10:38:07,612 INFO] \n",
            "SENT 288: ['Some', 'people', 'say', 'that', 'Emperor', 'Temmu', \"'s\", 'age', 'was', 'purposely', 'falsified', 'since', 'it', 'was', 'an', 'embarrassing', 'fact', 'that', 'the', 'younger', 'brother', 'became', 'the', 'emperor', 'before', 'his', 'older', 'brother', 'even', 'though', 'they', 'are', 'half-brothers', 'with', 'the', 'same', 'mother', ';', 'but', 'some', 'argue', 'that', 'according', 'to', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', ',', '\"', 'Emperor', 'Temmu', \"'s\", 'age', 'was', '16', 'when', 'his', 'father', ',', 'Emperor', 'Jomei', ',', 'was', 'enthroned', ',', 'but', 'it', 'was', 'said', 'that', 'he', 'was', '16', 'when', 'his', 'father', 'died', '.']\n",
            "PRED 288: 一説 に は 、 <unk> 天皇 の 時代 は 、 同じ 母 と <unk> さ れ て い る もの の 、 弟 が 天皇 に な っ た の で は な い か と する 説 も あ る が 、 『 日本 書紀 』 に よ れ ば <unk> 天皇 の 時代 は 16 歳 で あ っ た と する 説 も あ る が 、 16 歳 の 時 と さ れ る 。\n",
            "PRED SCORE: -52.9424\n",
            "\n",
            "[2021-08-14 10:38:07,612 INFO] \n",
            "SENT 289: ['Therefore', ',', 'the', 'Emperor', \"'s\", 'real', 'year', 'of', 'birth', 'is', '614', ',', 'according', 'to', 'the', 'Royal', 'Family', 'Tree', '(', 'Honcho-koin-jounroku', ')', '.']\n",
            "PRED 289: その ため 、 天皇 の 生母 は <unk> <unk> （ <unk> 年 ） で あ る 。\n",
            "PRED SCORE: -11.6271\n",
            "\n",
            "[2021-08-14 10:38:07,612 INFO] \n",
            "SENT 290: ['It', 'was', 'usual', 'to', 'have', 'no', 'successor', 'to', 'the', 'Imperial', 'Throne', 'for', 'some', 'period', '(', 'in', 'fact', ',', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'and', 'Empress', 'Jito', ',', 'who', 'were', 'in', 'power', 'before', 'and', 'after', 'Emperor', 'Temmu', ',', 'took', 'control', 'of', 'the', 'government', 'without', 'having', 'an', 'enthronement', 'ceremony', ')', '.']\n",
            "PRED 290: 通常 、 <unk> 天皇 以前 に 権力 に あ っ た <unk> 天皇 （ <unk> 天皇 ） と <unk> 皇后 （ <unk> 皇后 ） が <unk> を 掌握 し な かっ た 。\n",
            "PRED SCORE: -28.4713\n",
            "\n",
            "[2021-08-14 10:38:07,614 INFO] \n",
            "SENT 291: ['Some', 'argue', 'that', 'this', 'caused', 'the', 'errors', 'in', 'their', 'ages', '.']\n",
            "PRED 291: これ に よ り 、 時代 に よ っ て <unk> が 生 じ た と する 説 も あ る 。\n",
            "PRED SCORE: -14.5228\n",
            "\n",
            "[2021-08-14 10:38:07,614 INFO] \n",
            "SENT 292: ['Some', 'people', 'have', 'said', 'that', 'because', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', '\"', 'and', 'other', 'indicated', 'history', 'books', 'are', 'edited', 'in', 'different', 'years', 'and', 'they', 'are', 'different', 'in', 'character', ',', 'they', 'cannot', 'be', 'treated', 'alike', '.', '\"']\n",
            "PRED 292: 『 日本 書紀 』 など に よ れ ば 、 時代 に よ っ て 異な っ た 史書 を 記 し た もの で あ り 、 『 日本 書紀 』 と は 別 に 扱 う こと は でき な い 』 と する 説 も あ る 。\n",
            "PRED SCORE: -37.4295\n",
            "\n",
            "[2021-08-14 10:38:07,615 INFO] \n",
            "SENT 293: ['Please', 'refer', 'to', 'the', 'section', '\"', 'The', 'Age', 'of', 'Emperor', 'Temmu', '.', '\"']\n",
            "PRED 293: <unk> 天皇 の 時代 を 参照 。\n",
            "PRED SCORE: -4.1516\n",
            "\n",
            "[2021-08-14 10:38:07,615 INFO] \n",
            "SENT 294: ['There', 'is', 'a', 'theory', 'that', 'the', 'Isshi', 'no', 'Hen', 'was', 'a', 'coup', 'caused', 'by', 'Karu', 'no', 'Miko', '(', 'Emperor', 'Kotoku', ')', ',', 'in', 'which', 'Naka', 'no', 'Oe', 'no', 'Oji', '(', 'Naka', 'no', 'Oe', 'no', 'Miko', ')', 'lost', 'his', 'position', '.']\n",
            "PRED 294: <unk> の 君 は 、 <unk> の 君 （ <unk> 天皇 ） が 失脚 し た <unk> 王 （ <unk> 天皇 ） に よ る <unk> と する 説 が あ る 。\n",
            "PRED SCORE: -19.4495\n",
            "\n",
            "[2021-08-14 10:38:07,615 INFO] \n",
            "SENT 295: ['It', 'has', 'recently', 'been', 'indicated', 'that', 'Naka', 'no', 'Oe', 'no', 'Oji', '(', 'Naka', 'no', 'Oe', 'no', 'Miko', ')', 'and', 'Sogano', 'Iruka', 'had', 'a', 'relatively', 'good', 'relationship', 'and', 'similar', 'basic', 'policies', '.']\n",
            "PRED 295: 近年 で は 、 <unk> <unk> と <unk> <unk> は 比較 的 <unk> な 関係 を 持 っ て い た こと が 分か っ て い る 。\n",
            "PRED SCORE: -19.0266\n",
            "\n",
            "[2021-08-14 10:38:07,616 INFO] \n",
            "SENT 296: ['This', 'way', 'there', 'is', 'no', 'reason', 'that', 'Naka', 'no', 'Oe', 'no', 'Oji', '(', 'Naka', 'no', 'Oe', 'no', 'Miko', ')', 'would', 'have', 'assassinated', 'Iruka', '.']\n",
            "PRED 296: この よう に 、 中 <unk> の 君 （ 中 の 君 ） が <unk> を <unk> し た の で は な い 。\n",
            "PRED SCORE: -21.7597\n",
            "\n",
            "[2021-08-14 10:38:07,616 INFO] \n",
            "SENT 297: ['Because', 'there', 'is', 'falsification', 'in', 'the', 'definition', 'of', 'Taika', \"'s\", 'reform', 'in', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', ',', '\"', 'this', 'theory', 'has', 'become', 'apparent', '.']\n",
            "PRED 297: 『 日本 書紀 』 に よ れ ば <unk> の 改革 に つ い て は <unk> が あ る ため 、 この 説 は <unk> 化 し て い る 。\n",
            "PRED SCORE: -21.9665\n",
            "\n",
            "[2021-08-14 10:38:07,616 INFO] \n",
            "SENT 298: ['This', 'theory', 'gets', 'a', 'lot', 'of', 'attention', 'because', 'it', 'can', 'explain', 'Empress', 'Kogyoku', \"'s\", 'abdication', 'or', 'the', 'reason', 'that', 'the', 'Soga', 'Family', '(', 'except', 'Iruka', ')', 'was', 'not', 'displaced', 'from', 'politics', 'after', 'the', 'coup', '.']\n",
            "PRED 298: この 説 は 、 <unk> 皇后 の <unk> を 説明 し たり 、 <unk> 家 （ <unk> を 除 く ） が 政治 から <unk> さ れ な かっ た こと に よ る もの で あ る 。\n",
            "PRED SCORE: -28.2515\n",
            "\n",
            "[2021-08-14 10:38:07,617 INFO] \n",
            "SENT 299: ['There', 'is', 'a', 'theory', 'that', 'the', 'enthronement', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'was', 'delayed', 'due', 'to', 'the', 'complaints', 'against', 'his', 'relationship', 'with', 'women', '.']\n",
            "PRED 299: <unk> 天皇 の 即位 は 、 女性 と の 関係 に よ る <unk> で あ る と する 説 が あ る 。\n",
            "PRED SCORE: -13.1461\n",
            "\n",
            "[2021-08-14 10:38:07,617 INFO] \n",
            "SENT 300: ['This', 'is', 'based', 'on', 'the', 'theory', 'that', 'Emperor', 'Kotoku', 'sent', 'a', 'poem', 'to', 'his', 'wife', 'Hashihito', 'no', 'Himemiko', '(', 'Emperor', 'Tenchi', \"'s\", '(', 'Tenji', ')', 'sister', 'with', 'the', 'same', 'mother', ')', 'indicating', 'that', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'was', 'having', 'an', 'affair', 'with', 'her', ',', 'which', 'is', 'contained', 'in', '\"', 'Chronicles', 'of', 'Japan', '(', 'Nihon', 'Shoki', ')', '.', '\"']\n",
            "PRED 300: これ は 、 <unk> 天皇 が 妻 の <unk> <unk> （ <unk> 天皇 の <unk> ） に 歌 を 送 っ た と する 説 （ 『 日本 書紀 』 ） に よ る 。\n",
            "PRED SCORE: -19.8280\n",
            "\n",
            "[2021-08-14 10:38:08,723 INFO] \n",
            "SENT 301: ['In', 'those', 'days', ',', 'romance', 'and', 'marriage', 'were', 'allowed', 'between', 'half-sisters', 'and', 'brothers', 'from', 'different', 'mothers', 'but', 'not', 'between', 'half-brothers', 'and', 'sisters', 'from', 'the', 'same', 'mother', ';', 'however', ',', 'in', 'the', 'comic', 'story', '\"', 'Tenjo', 'no', 'niji', '(', 'The', 'Rainbow', 'in', 'the', 'Sky', ')', ',', '\"', 'by', 'Machiko', 'SATONAKA', ',', 'it', 'is', 'described', 'that', 'there', 'was', 'a', 'romance', 'involving', 'this', 'kind', 'of', 'forbidden', 'love', ';', 'Hashihito', 'no', 'Himemiko', 'was', 'persuaded', 'to', 'marry', 'with', 'Karu', 'no', 'Miko', '(', 'Emperor', 'Kotoku', ')', ',', 'but', 'she', 'kept', 'the', 'relationship', 'with', 'Emperor', 'Tenchi', '(', 'Tenji', ')', ',', 'and', 'Arima', 'no', 'Miko', 'was', 'furious', 'after', 'knowing', 'this', 'and', 'became', 'angry', 'at', 'Hashihito', 'no', 'Himemiko', '.']\n",
            "PRED 301: 当時 、 <unk> と <unk> 兄弟 の 間 で は <unk> と の <unk> が 認め られ て い た が 、 <unk> <unk> の 『 <unk> の <unk> 』 に お い て は 、 この よう な <unk> が 禁 じ られ て い た こと が 記 さ れ て お り 、 <unk> 天皇 （ <unk> 天皇 ） と の 関係 を 知 っ て い た と さ れ て い る が 、 これ を 知 っ て い た の で は な い か と 記 さ れ て い る 。\n",
            "PRED SCORE: -68.4472\n",
            "\n",
            "[2021-08-14 10:38:08,723 INFO] \n",
            "SENT 302: ['There', 'is', 'a', 'theory', 'that', 'Hashihito', 'no', 'Himemiko', 'ascended', 'the', 'throne', 'as', 'the', 'princess', 'of', 'the', 'previous', 'Emperor', 'but', 'one', 'and', 'became', 'an', 'Empress', 'after', 'the', 'death', 'of', 'Empress', 'Saimei', ';', 'however', ',', 'for', 'some', 'reason', 'her', 'name', 'was', 'erased', 'from', 'the', 'record', '.']\n",
            "PRED 302: <unk> <unk> が <unk> 天皇 の 皇女 と し て 即位 し た と する 説 も あ る が 、 <unk> 皇后 の 死後 に 皇后 と な っ た と する 説 も あ る が 、 その ため に 名前 が <unk> さ れ た と する 説 も あ る 。\n",
            "PRED SCORE: -28.8108\n",
            "\n",
            "[2021-08-14 10:38:08,724 INFO] \n",
            "SENT 303: ['In', 'the', 'Man', \"'yoshu\", '(', '\"', 'The', 'Anthology', 'of', 'Myriad', 'Leaves', ')', ',', '\"', '\"', 'Nakatsusumera-mikoto', '\"', 'is', 'considered', 'to', 'be', 'Hashihito', 'no', 'Himemiko', ',', 'and', 'it', 'is', 'said', 'that', 'the', 'one', 'named', '\"', 'Nakatsusumera-mikoto', '\"', 'was', 'a', 'temporary', 'Emperor', 'until', 'the', 'enthronement', 'of', 'Emperor', 'Tenchi', '(', 'Tenji', ')', '.']\n",
            "PRED 303: 『 <unk> 』 は <unk> の 君 と さ れ 、 <unk> 天皇 の 即位 まで の 一時 的 な 天皇 と さ れ る 。\n",
            "PRED SCORE: -16.0945\n",
            "\n",
            "[2021-08-14 10:38:08,724 INFO] \n",
            "SENT 304: ['If', 'Hashihito', 'no', 'Himemiko', 'was', 'the', 'same', 'person', 'as', '\"', 'Nakatsusumera-mikoto', ',', '\"', 'there', 'is', 'a', 'question', 'why', 'only', 'she', 'had', 'this', 'special', 'name', ';', 'alternatively', ',', 'it', 'is', 'said', 'that', 'this', 'name', 'could', 'have', 'been', 'for', 'Empress', 'Saimei', ',', 'but', 'there', 'is', 'no', 'proof', '.']\n",
            "PRED 304: <unk> <unk> が 「 <unk> 」 と 同一 人物 で あ る と すれ ば 、 この <unk> のみ が <unk> 皇后 に <unk> さ れ た の で は な い か と 言 わ れ る が 確証 は な い 。\n",
            "PRED SCORE: -32.8350\n",
            "\n",
            "[2021-08-14 10:38:08,724 INFO] \n",
            "SENT 305: ['It', 'is', 'hard', 'to', 'prove', ',', 'since', 'this', 'is', 'about', 'political', 'history', 'with', 'limited', 'data', ';', 'however', ',', 'it', 'is', 'expected', 'to', 'have', 'clearer', 'information', 'from', 'close', 'study', 'in', 'relation', 'to', 'the', 'findings', 'of', 'archaeology', '.']\n",
            "PRED 305: これ は <unk> に 限 ら れ た 政治 史 に つ い て は <unk> な もの で あ る が 、 <unk> の <unk> から <unk> の <unk> に 近 い 情報 を 提供 する 必要 が あ る 。\n",
            "PRED SCORE: -34.0667\n",
            "\n",
            "[2021-08-14 10:38:08,724 INFO] \n",
            "SENT 306: ['Poems']\n",
            "PRED 306: 歌\n",
            "PRED SCORE: -1.2138\n",
            "\n",
            "[2021-08-14 10:38:08,725 INFO] \n",
            "SENT 307: ['The', 'Emperor', 'Tenchi', '(', 'Tenji', ')', 'was', 'a', 'poet', 'who', 'had', 'four', 'poems', 'in', '\"', 'Man', \"'yoshu\", '(', 'The', 'Anthology', 'of', 'Myriad', 'Leaves', ')', '.', '\"']\n",
            "PRED 307: <unk> 天皇 （ <unk> てんのう ） は 、 『 <unk> <unk> 』 に 4 首 の 歌 を 詠 ん だ 歌人 。\n",
            "PRED SCORE: -12.9890\n",
            "\n",
            "[2021-08-14 10:38:08,725 INFO] \n",
            "SENT 308: ['He', 'was', 'respected', 'as', 'the', 'Emperor', 'of', 'the', 'Heian', 'dynasty', ',', 'and', 'one', 'of', 'his', 'poems', 'is', 'found', 'at', 'the', 'beginning', 'of', '\"', 'One', 'Hundred', 'Waka', 'Poems', '(', 'the', 'Ogura', 'Anthology', 'of', 'One', 'Hundred', 'Tanka-poems', 'by', 'One', 'Hundred', 'Poets', ')', '.', '\"']\n",
            "PRED 308: 平安 時代 の 天皇 と し て 重ん じ られ 、 『 百 人 一 首 』 の 冒頭 に 歌 が あ る 。\n",
            "PRED SCORE: -14.3617\n",
            "\n",
            "[2021-08-14 10:38:08,725 INFO] \n",
            "SENT 309: ['I', 'am', 'sitting', 'in', 'the', 'barn', 'next', 'to', 'a', 'rice', 'field', 'when', 'rice', 'is', 'harvested', 'in', 'the', 'autumn', 'and', 'my', 'kimono', 'sleeves', 'get', 'wet', 'by', 'night', 'dew', ',', 'as', 'the', 'roof', 'of', 'the', 'barn', 'is', 'covered', 'with', 'rough-bladed', 'hay', '.']\n",
            "PRED 309: 秋 に <unk> を <unk> し 、 夜 に <unk> を <unk> に し て <unk> の <unk> を <unk> の <unk> に <unk> る 。\n",
            "PRED SCORE: -29.1641\n",
            "\n",
            "[2021-08-14 10:38:08,725 INFO] \n",
            "SENT 310: ['The', 'following', 'poem', 'is', 'from', '\"', 'Man', \"'yoshu\", '(', 'The', 'Anthology', 'of', 'Myriad', 'Leaves', ')', '.', '\"']\n",
            "PRED 310: 『 <unk> <unk> 』 に よ る 。\n",
            "PRED SCORE: -6.0765\n",
            "\n",
            "[2021-08-14 10:38:08,726 INFO] \n",
            "SENT 311: ['In', 'ancient', 'days', ',', 'Mt', '.', 'Kagu-yama', 'loved', 'Mt', '.', 'Unebi-yama', 'and', 'fought', 'against', 'Mt', '.', 'Miminashi-yama', 'for', 'love', ';', 'there', 'is', 'no', 'doubt', 'we', 'still', 'fight', 'for', 'love', 'between', 'wives', ',', 'as', 'it', 'has', 'been', 'the', 'same', 'since', 'the', 'age', 'of', 'the', 'gods', '.']\n",
            "PRED 311: 古代 に お い て は 、 <unk> 山 は <unk> 山 を 愛 し て <unk> 山 と 戦 っ て い た が 、 神 の 時代 から 同じ よう な <unk> で あ る ため 、 <unk> と の <unk> に は <unk> が な い 。\n",
            "PRED SCORE: -38.5065\n",
            "\n",
            "[2021-08-14 10:38:08,726 INFO] \n",
            "SENT 312: ['The', 'Saionji', 'Family', 'were', 'court', 'nobility', 'descended', 'from', 'the', 'Fujiwara', 'clan', '.']\n",
            "PRED 312: <unk> 家 （ <unk> <unk> ） は 、 藤原 氏 の <unk> 。\n",
            "PRED SCORE: -6.8379\n",
            "\n",
            "[2021-08-14 10:38:08,726 INFO] \n",
            "SENT 313: ['The', 'Saionji', 'Family', 'was', 'of', 'the', 'Fujiwara', 'clan', 'Fujiwara-hokke', 'Kaninryu', ',', 'and', 'the', 'Kakaku', '(', 'family', 'rank', 'of', 'court', 'nobility', ')', 'was', 'the', 'Seiga', 'Family', '.']\n",
            "PRED 313: <unk> 家 （ <unk> <unk> ） は 、 藤原 氏 の <unk> で あ り 、 <unk> は <unk> 家 で あ る 。\n",
            "PRED SCORE: -13.8535\n",
            "\n",
            "[2021-08-14 10:38:08,726 INFO] \n",
            "SENT 314: ['The', 'Toin', 'Family', 'and', 'Imadegawa', '/', 'Kikutei', 'Family', 'were', 'branch', 'families', 'of', 'the', 'Saionji', 'Family', '.']\n",
            "PRED 314: <unk> 家 と <unk> 家 は <unk> 家 の 分家 で あ る 。\n",
            "PRED SCORE: -7.0122\n",
            "\n",
            "[2021-08-14 10:38:08,727 INFO] \n",
            "SENT 315: ['There', 'was', 'a', 'samurai', 'family--the', 'Saionji', 'clan', 'in', 'Iyo-no-kuni--as', 'a', 'major', 'offshoot', 'that', 'used', 'the', 'Saionji', 'surname', '.']\n",
            "PRED 315: <unk> 姓 を 名乗 る 主要 な <unk> と し て は 、 <unk> 氏 が あ っ た 。\n",
            "PRED SCORE: -17.1934\n",
            "\n",
            "[2021-08-14 10:38:08,727 INFO] \n",
            "SENT 316: ['The', 'family', 'crest', 'is', 'Hidari-mitsudomoe', '.']\n",
            "PRED 316: <unk> は <unk> 。\n",
            "PRED SCORE: -2.3268\n",
            "\n",
            "[2021-08-14 10:38:08,727 INFO] \n",
            "SENT 317: ['The', 'progenitor', 'of', 'the', 'Saionji', 'Family', 'was', 'FUJIWARA', 'no', 'Michisue', ',', 'the', 'third', 'son', 'of', 'FUJIWARA', 'no', 'Kimizane', '.']\n",
            "PRED 317: 藤原 <unk> の 三男 藤原 <unk> を 祖 と する 。\n",
            "PRED SCORE: -5.8971\n",
            "\n",
            "[2021-08-14 10:38:08,727 INFO] \n",
            "SENT 318: ['Kintsune', 'SAIONJI', ',', 'who', 'was', 'a', 'great', 'grandson', 'of', 'Michisue', ',', 'was', 'confined', 'by', 'the', 'imperial', 'court', 'during', 'the', 'Jokyu-no-ran', 'War', 'because', ',', 'having', 'married', 'the', 'niece', 'of', 'MINAMOTO', 'no', 'Yoritomo', ',', 'he', 'was', 'being', 'watched', 'over', 'as', 'a', 'relative', 'of', 'the', 'Kamakura', 'bakufu', '(', 'Japanese', 'feudal', 'government', 'headed', 'by', 'a', 'shogun', ')', ';', 'after', 'the', 'war', ',', 'however', ',', 'Kintsune', 'gained', 'the', 'confidence', 'of', 'the', 'shogunate', ',', 'wielded', 'the', 'real', 'power', 'in', 'the', 'imperial', 'court', 'through', 'holding', 'the', 'office', 'of', 'Kanto', 'Moshitsugi', ',', 'and', 'rose', 'to', 'the', 'position', 'of', 'Daijo', 'daijin', '(', 'grand', 'minister', 'of', 'state', ')', ',', 'raising', 'the', 'social', 'standing', 'of', 'the', 'Saionji', 'Family', '.']\n",
            "PRED 318: <unk> の 曾孫 で あ る <unk> <unk> は 、 <unk> の 乱 で 朝廷 に <unk> さ れ 、 鎌倉 幕府 の <unk> と し て <unk> さ れ た が 、 戦後 に な る と 、 <unk> は 関東 の <unk> を 得 て 朝廷 の <unk> を 掌握 し て い た 。\n",
            "PRED SCORE: -39.6638\n",
            "\n",
            "[2021-08-14 10:38:08,728 INFO] \n",
            "SENT 319: ['The', 'family', 'name', 'of', 'Saionji', 'comes', 'from', 'the', 'name', 'of', 'the', 'temple', 'Kintsune', 'built', 'at', 'Bettei', ',', 'in', 'Kyoto', '(', 'Kitayama-so', ',', 'Kadono-gun', ',', 'Yamashiro-no-kuni', ')', '.']\n",
            "PRED 319: <unk> の 名字 は 、 京都 の <unk> （ <unk> ・ <unk> ・ <unk> ） に 建立 さ れ た <unk> に 由来 する 。\n",
            "PRED SCORE: -17.7810\n",
            "\n",
            "[2021-08-14 10:38:08,728 INFO] \n",
            "SENT 320: ['This', 'hall', 'is', 'also', 'called', 'Kitayama-dono', 'Palace', ',', 'and', 'the', 'current', 'Kinkaku-ji', 'Temple', 'was', 'built', 'by', 'Yoshimitsu', 'ASHIKAGA', 'after', 'he', 'was', 'given', 'this', 'land', 'by', 'the', 'Saionji', 'Family', '.']\n",
            "PRED 320: この <unk> は <unk> 御所 と も 呼 ば れ 、 現在 の 金閣 は <unk> 家 の <unk> を 受け て 足利 義満 が 建立 し た もの で あ る 。\n",
            "PRED SCORE: -16.2127\n",
            "\n",
            "[2021-08-14 10:38:08,728 INFO] \n",
            "SENT 321: ['Since', 'the', 'generation', 'of', 'Kintsune', ',', 'the', 'Saionji', 'Family', 'gained', 'support', 'from', 'the', 'Kamakura', 'shogunate', 'and', 'came', 'to', 'power', 'that', 'surpassed', 'the', 'sekke', 'throughout', 'the', 'Kamakura', 'era', '.']\n",
            "PRED 321: <unk> の 代 から 鎌倉 幕府 の 支援 を 受け 、 鎌倉 時代 を 通 じ て 摂家 を <unk> し た 。\n",
            "PRED SCORE: -12.8978\n",
            "\n",
            "[2021-08-14 10:38:08,728 INFO] \n",
            "SENT 322: ['Sanekane', 'SAIONJI', 'approached', 'Daikaku-ji', 'through', 'genealogy', 'and', 'made', 'his', 'daughters', 'marry', 'Kameyama', 'ho-ou', ',', 'the', 'ex-emperor', ',', 'or', 'the', 'Emperor', 'Godaigo', '.']\n",
            "PRED 322: <unk> <unk> は 系図 を 通 じ て 大覚 寺 に 接近 し 、 <unk> 亀山 <unk> 、 後 醍醐 天皇 と 結婚 し た 。\n",
            "PRED SCORE: -13.4428\n",
            "\n",
            "[2021-08-14 10:38:08,728 INFO] \n",
            "SENT 323: ['However', ',', 'since', 'the', 'generation', 'of', 'Sanekane', \"'s\", 'son', 'Kinhira', 'SAIONJI', ',', 'the', 'Saionji', 'Family', 'this', 'time', 'supported', 'the', 'Jimyoin-to', 'genealogy', 'when', 'the', 'Daikakuji-to', 'genealogy', 'started', 'to', 'keep', 'a', 'distance', 'from', 'the', 'bakufu', ',', 'thereby', 'deepening', 'the', 'conflict', 'with', 'the', 'Daikakuji-to', 'genealogy', '.']\n",
            "PRED 323: しかし 、 <unk> の 子 ・ <unk> <unk> の 代 に な る と 、 この 時期 に は <unk> の 系譜 が 幕府 から <unk> し 始め る と <unk> 系図 を 支持 し 、 <unk> と の 紛争 が <unk> し た 。\n",
            "PRED SCORE: -34.3338\n",
            "\n",
            "[2021-08-14 10:38:08,729 INFO] \n",
            "SENT 324: ['Thereafter', ',', 'at', 'the', 'generation', 'of', 'Kinmune', 'SAIONJI', ',', 'the', 'Saionji', 'Family', 'was', 'dismissed', 'from', 'the', 'post', 'of', 'Kanto', 'Moshitsugi', 'after', 'the', 'fall', 'of', 'the', 'Kamakura', 'shogunate', '.']\n",
            "PRED 324: その 後 、 鎌倉 幕府 滅亡 後 に <unk> 家 は 関東 <unk> を <unk> し た 。\n",
            "PRED SCORE: -10.1306\n",
            "\n",
            "[2021-08-14 10:38:08,729 INFO] \n",
            "SENT 325: ['Kinmune', 'harbored', 'Yasuie', 'HOJO', ',', 'who', 'was', 'a', 'remnant', 'of', 'the', 'Hojo', 'clan', ',', 'the', 'assassinated', 'Emperor', 'Godaigo', ',', 'who', 'had', 'started', 'Kenmu-no-shinsei', ';', 'plotted', 'a', 'rebellion', 'to', 'back', 'the', 'ex-emperor', 'Gofushimi', 'of', 'Jimyoin-to', 'genealogy', ';', 'and', 'was', 'arrested', 'and', 'executed', ',', 'the', 'plot', 'having', 'been', 'exposed', 'by', 'the', 'betrayal', 'of', 'Kinmune', \"'s\", 'younger', 'brother', ',', 'Kinshige', 'SAIONJI', '.']\n",
            "PRED 325: 北条 氏 の <unk> で あ る 北条 <unk> を <unk> し た 後 醍醐 天皇 は <unk> を 開始 し 、 <unk> 系図 の <unk> を <unk> し た が 、 <unk> の 弟 の <unk> <unk> の <unk> に よ っ て <unk> さ れ た <unk> は 捕らえ られ た 。\n",
            "PRED SCORE: -35.8829\n",
            "\n",
            "[2021-08-14 10:38:08,729 INFO] \n",
            "SENT 326: ['During', 'the', 'period', 'of', 'the', 'Northern', 'and', 'Southern', 'Courts', ',', 'Kinmune', \"'s\", 'son', 'Sanetoshi', 'SAIONJI', 'served', 'Hokucho', '(', 'Japan', ')', 'and', 'rose', 'to', 'the', 'post', 'of', 'minister', 'of', 'the', 'right', ',', 'whereby', 'the', 'family', 'name', 'was', 'restored', '.']\n",
            "PRED 326: 南北朝 時代 ( 日本 ) に は <unk> の 子 <unk> <unk> が <unk> <unk> ( 日本 ) に 仕え て 右 大臣 に 昇 り 、 <unk> を 再興 し た 。\n",
            "PRED SCORE: -15.9564\n",
            "\n",
            "[2021-08-14 10:38:08,729 INFO] \n",
            "SENT 327: ['During', 'the', 'Muromachi', 'and', 'Edo', 'periods', 'the', 'Saionji', 'Family', 'was', 'also', 'known', 'for', 'having', 'biwa', '(', 'Japanese', 'lute', ')', 'players', 'as', 'a', 'family', 'business', '.']\n",
            "PRED 327: 室町 時代 ・ 江戸 時代 に は <unk> を <unk> と し て <unk> し た こと で も 知 ら れ た 。\n",
            "PRED SCORE: -12.8787\n",
            "\n",
            "[2021-08-14 10:38:08,730 INFO] \n",
            "SENT 328: ['In', 'the', 'early', 'days', 'of', 'the', 'Edo', 'period', ',', 'Saneharu', 'SAIONJI', 'welcomed', 'Tokuhime', ',', 'who', 'was', 'the', 'eldest', 'daughter', 'of', 'Kyumu', 'NAGAOKA', '(', 'also', 'known', 'as', 'Tadataka', 'HOSOKAWA', ')', ',', 'as', 'the', 'Midaidokoro', '(', 'wife', 'of', 'a', 'shogun', 'or', 'a', 'highest-ranking', 'nobleman', ')', 'of', 'the', 'heir', '(', 'later', 'disinherited', ')', 'of', 'Tadaoki', 'HOSOKAWA', ',', 'and', 'invited', 'her', 'to', 'accept', 'the', 'post', 'of', 'Sadaijin', '(', 'minister', 'of', 'the', 'left', ')', ';', 'moreover', ',', 'Kyumu', 'NAGAOKA', 'offered', 'various', 'forms', 'of', 'financial', 'support', 'to', 'the', 'Saionji', 'family', ',', 'including', 'donating', 'a', 'property', 'that', 'yielded', '600', 'koku', 'of', 'rice', '(', 'Menko-shuroku', ')', '.']\n",
            "PRED 328: 江戸 時代 初期 に は 細川 <unk> の 正室 と し て <unk> <unk> （ 細川 <unk> ） の <unk> で あ る <unk> <unk> （ 細川 <unk> ） を 迎え て 左 大臣 の <unk> を 招 い た が 、 <unk> <unk> は <unk> <unk> の <unk> を <unk> し た 。\n",
            "PRED SCORE: -42.1051\n",
            "\n",
            "[2021-08-14 10:38:08,817 INFO] \n",
            "SENT 329: ['At', 'the', 'end', 'of', 'the', 'Edo', 'period', ',', 'Kinmochi', 'SAIONJI', 'was', 'adopted', 'from', 'the', 'Tokudaiji', 'Family', 'of', 'the', 'same', 'kaninryu', ',', 'worked', 'as', 'a', 'politician', 'after', 'the', 'Meiji', 'Restoration', ',', 'served', 'as', 'prime', 'minister', ',', 'and', 'had', 'great', 'influence', 'as', 'a', 'genro', 'on', 'the', 'political', 'scene', 'during', 'the', 'Taisho', 'and', 'Showa', 'eras', '.']\n",
            "PRED 329: 幕末 に な る と 、 <unk> <unk> は 明治 維新 後 に <unk> 大臣 を 務め 、 大正 ・ 昭和 の 政治 <unk> の <unk> と し て 大きな 影響 を 与え た 。\n",
            "PRED SCORE: -21.7359\n",
            "\n",
            "[2021-08-14 10:38:08,818 INFO] \n",
            "SENT 330: ['There', 'is', 'an', 'anecdote', 'that', 'Kinmochi', 'was', 'not', 'good', 'at', 'playing', 'the', 'biwa', 'Japanese', 'lute', ',', 'which', 'should', 'have', 'been', 'the', 'family', 'business', 'of', 'the', 'Saionji', 'Family', ',', 'and', 'during', 'Kinmochi', \"'s\", 'time', 'in', 'office', 'as', 'prime', 'minister', ',', 'the', 'Emperor', 'Meiji', 'said', 'out', 'of', 'mischief', 'to', 'Kinmochi', ',', '\"', 'For', 'the', 'first', 'time', 'in', 'a', 'long', 'while', ',', 'I', 'would', 'like', 'to', 'listen', 'to', 'biwa', 'Japanese', 'lute', ',', '\"', 'and', 'therefore', 'he', 'was', 'forced', 'to', 'play', 'the', 'biwa', 'Japanese', 'lute', 'in', 'dire', 'distress', 'together', 'with', 'the', 'officials', 'of', 'Utaryo', 'in', 'the', 'Imperial', 'Household', 'Ministry', '.']\n",
            "PRED 330: <unk> は <unk> 家 の <unk> で あ る 琵琶 <unk> を <unk> に <unk> し な かっ た と い う 逸話 が あ り 、 明治 天皇 の 時代 に は <unk> 大臣 と し て <unk> <unk> の 際 に 「 日本 人 の <unk> を 聞 い て 初めて <unk> を <unk> し た 」 と い う <unk> が あ り 、 宮内 省 の 琵琶 <unk> と とも に 琵琶 <unk> を <unk> さ せ られ た と い う 逸話 が あ る 。\n",
            "PRED SCORE: -75.8706\n",
            "\n",
            "[2021-08-14 10:38:09,392 INFO] \n",
            "SENT 331: ['Mt', '.', 'Hiei', 'is', 'a', 'mountain', 'that', 'straddles', 'the', 'western', 'part', 'of', 'Otsu', 'City', 'in', 'Shiga', 'Prefecture', 'and', 'the', 'northeastern', 'part', 'of', 'Kyoto', 'City', 'in', 'Kyoto', 'Prefecture', '.']\n",
            "PRED 331: 比叡山 （ <unk> ） は 、 滋賀 県 大津 市 と 京都 府 京都 市 の 南西 部 を <unk> する 山 。\n",
            "PRED SCORE: -13.6951\n",
            "\n",
            "[2021-08-14 10:38:09,393 INFO] \n",
            "SENT 332: ['Mt', '.', 'Hiei', 'is', 'the', 'name', 'for', 'the', 'Soji', 'ridge', ',', 'which', 'is', 'formed', 'by', 'two', 'peaks', ':', 'Daihiei', '(', '848.3m', ')', 'on', 'the', 'border', 'between', 'Otsu', 'City', 'and', 'Kyoto', 'City', \"'s\", 'Sakyo', 'Ward', ';', 'and', 'Shimeigatake', 'in', 'Sakyo', 'Ward', '(', '838m', ')', '.']\n",
            "PRED 332: 比叡山 は 大津 市 と 京都 市 左京 区 の 境 に あ る <unk> （ <unk> ） と 、 左京 区 （ <unk> ） に あ る <unk> （ <unk> ） の 2 つ の <unk> で 構成 さ れ る 。\n",
            "PRED SCORE: -22.3031\n",
            "\n",
            "[2021-08-14 10:38:09,393 INFO] \n",
            "SENT 333: ['Daihiei', \"'s\", 'first-order', 'triangulation', 'point', 'is', 'located', 'in', 'Otsu', 'City', '.']\n",
            "PRED 333: <unk> の <unk> <unk> は 大津 市 に あ る 。\n",
            "PRED SCORE: -4.7228\n",
            "\n",
            "[2021-08-14 10:38:09,393 INFO] \n",
            "SENT 334: ['Next', 'to', 'Mt', '.', 'Koya', ',', 'it', 'has', 'long', 'been', 'an', 'object', 'of', 'religious', 'belief', ',', 'flourishing', 'with', 'Enryaku-ji', 'Temple', 'and', 'Hiyoshi', 'Taisha', 'Shrine', 'on', 'it', '.']\n",
            "PRED 334: 高野 山 に 続 い て 、 延暦 寺 や 日吉 大社 と とも に 繁栄 し た 宗教 信仰 の 対象 と な っ て い る 。\n",
            "PRED SCORE: -14.6036\n",
            "\n",
            "[2021-08-14 10:38:09,394 INFO] \n",
            "SENT 335: ['It', 'is', 'part', 'of', 'the', 'Higashiyama', 'mountains', '(', 'Kyoto', 'Prefecture', ')', '.']\n",
            "PRED 335: 東山 ( 京都 府 ) の 一部 。\n",
            "PRED SCORE: -2.5513\n",
            "\n",
            "[2021-08-14 10:38:09,394 INFO] \n",
            "SENT 336: ['It', 'is', 'also', 'known', 'as', 'Eizan', ',', 'Hokurei', ',', 'Tendaisan', ',', 'Miyakofuji', ',', 'etc', '.']\n",
            "PRED 336: 叡山 、 <unk> 、 <unk> 、 <unk> など と も 呼 ば れ る 。\n",
            "PRED SCORE: -4.9935\n",
            "\n",
            "[2021-08-14 10:38:09,394 INFO] \n",
            "SENT 337: ['Overview']\n",
            "PRED 337: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:09,394 INFO] \n",
            "SENT 338: ['Because', 'of', 'its', 'location', 'near', 'the', 'Kimon', 'gate', 'on', 'the', 'northeast', 'side', 'of', 'Kyoto', ',', 'Mt', '.', 'Hiei', 'is', 'considered', 'a', 'castle', 'guardian', '.']\n",
            "PRED 338: 京都 <unk> の <unk> <unk> の 位置 に あ る ため 、 比叡山 は <unk> と さ れ る 。\n",
            "PRED SCORE: -15.4722\n",
            "\n",
            "[2021-08-14 10:38:09,395 INFO] \n",
            "SENT 339: ['The', 'Kojiki', '(', 'Records', 'of', 'Ancient', 'Matters', ')', 'calls', 'Mt', '.', 'Hiei', \"'\", 'Hienoyama', \"'\", ',', 'and', 'records', 'that', 'Oyamakui', 'no', 'kami', 'is', 'enshrined', 'on', 'Hienoyama', 'in', 'Omi', 'Province', ',', 'and', 'Narikabura', 'is', 'the', 'object', 'of', 'worship', '.']\n",
            "PRED 339: 『 古事 記 』 に よ れ ば 「 <unk> 山 」 と あ り 、 近江 国 の <unk> 山 に <unk> 神 が 祀 ら れ て い る と 記 さ れ て い る 。\n",
            "PRED SCORE: -23.1182\n",
            "\n",
            "[2021-08-14 10:38:09,395 INFO] \n",
            "SENT 340: ['Ever', 'since', 'Enryaku-ji', 'Temple', 'was', 'founded', 'on', 'Hienoyama', ',', 'Oyamakui', 'no', 'kami', ',', 'as', 'the', 'god', 'of', 'the', 'land', ',', 'has', 'been', 'a', 'guardian', 'deity', 'of', 'the', 'Tendai', 'Sect', 'and', 'Enryaku-ji', 'Temple', ';', 'and', 'a', 'mountain-king', 'sect', 'based', 'on', 'him', 'has', 'spread', 'in', 'the', 'area', '.']\n",
            "PRED 340: 延暦 寺 が <unk> に 建立 さ れ た こと から 、 土地 の 神 と し て の <unk> 神 は 天台 宗 ・ 延暦 寺 の 守護 神 で あ り 、 地域 に お い て も <unk> 宗 が 広ま っ た 。\n",
            "PRED SCORE: -29.1981\n",
            "\n",
            "[2021-08-14 10:38:09,395 INFO] \n",
            "SENT 341: ['Also', ',', 'it', 'is', 'the', 'mountain', 'where', 'Enryaku-ji', 'Temple', \"'s\", 'Thousand-Day', 'Circumambulation', 'Practice', 'is', 'done', ',', 'including', 'a', 'pilgrimage', 'to', 'the', 'shrines', 'at', 'the', 'peak', 'of', 'Mt', '.', 'Hiei', ',', 'and', 'to', 'Hiyoshi', 'Taisha', 'Shrine', 'at', 'its', 'foot', '.']\n",
            "PRED 341: また 、 延暦 寺 の 強訴 が 行 わ れ る 山 で あ り 、 比叡山 山頂 や 麓 の 日吉 大社 へ の 参詣 など が あ る 。\n",
            "PRED SCORE: -22.2382\n",
            "\n",
            "[2021-08-14 10:38:09,395 INFO] \n",
            "SENT 342: ['Hiking', 'is', 'popular', ',', 'and', 'a', 'famous', 'trail', 'begins', 'at', 'Shugakuin', 'in', 'Sakyo', 'Ward', 'of', 'Kyoto', 'City', 'and', 'goes', 'up', 'Kirarazaka', 'hill', ';', 'another', 'one', 'on', 'the', 'Shiga', 'Prefecture', 'side', 'begins', 'in', 'Monzenmachi', ',', 'Sakamoto', '(', 'Otsu', 'City', ')', ',', 'and', 'goes', 'up', 'through', 'Mudojidani', 'valley', '.']\n",
            "PRED 342: <unk> 路 は 人気 が あ り 、 京都 市 左京 区 の <unk> <unk> で <unk> <unk> を <unk> し 、 滋賀 県 側 は 坂本 ( 大津 市 ) に <unk> し 、 <unk> <unk> を 越え る 。\n",
            "PRED SCORE: -29.8650\n",
            "\n",
            "[2021-08-14 10:38:09,396 INFO] \n",
            "SENT 343: ['The', 'path', 'on', 'Kirarazaka', 'hill', 'has', 'long', 'been', 'used', 'by', 'monks', ',', 'monk', 'soldiers', 'and', 'imperial', 'messengers', 'traveling', 'between', 'Kyoto', 'and', 'Enryaku-ji', 'Temple', ',', 'and', 'is', 'still', 'visited', 'by', 'many', 'hikers', 'today', '.']\n",
            "PRED 343: <unk> <unk> の 道 は 、 古く から 僧侶 ・ <unk> ・ <unk> が 京都 と 延暦 寺 の 間 の <unk> を <unk> し て お り 、 現在 で も <unk> が 多 い 。\n",
            "PRED SCORE: -31.8337\n",
            "\n",
            "[2021-08-14 10:38:09,396 INFO] \n",
            "SENT 344: ['The', 'Tokaido', 'Nature', 'Trail', 'passes', 'through', 'the', 'mountain', 'on', 'the', 'way', 'from', 'Otsu', 'to', 'Kyoto', '/', 'Ohara', '.']\n",
            "PRED 344: <unk> <unk> は 大津 から 京都 ・ 大原 に 至 る 途中 で 山 を <unk> する 。\n",
            "PRED SCORE: -14.6810\n",
            "\n",
            "[2021-08-14 10:38:09,396 INFO] \n",
            "SENT 345: ['Many', 'tourists', 'come', 'on', 'holidays', ',', 'since', 'they', 'can', 'reach', 'the', 'top', 'via', 'toll', 'road', ',', 'cable', 'car', ',', 'and', 'ropeway', '.']\n",
            "PRED 345: <unk> は <unk> <unk> 、 <unk> <unk> 、 <unk> <unk> など を 通 じ て <unk> に 向か う こと が 多 い 。\n",
            "PRED SCORE: -20.9641\n",
            "\n",
            "[2021-08-14 10:38:09,396 INFO] \n",
            "SENT 346: ['There', 'used', 'to', 'be', 'a', 'Mt', '.', 'Hiei', 'Amusement', 'Park', 'and', 'a', 'Mt', '.', 'Hiei', 'Artificial', 'Ski', 'Slope', ',', 'but', 'both', 'were', 'closed', 'before', '2002', ';', 'the', 'site', 'of', 'the', 'ski', 'slope', 'is', 'now', 'a', 'cosmos', 'flower', 'garden', ',', 'and', 'there', 'is', 'an', 'art', 'museum', '-', 'Hiei', 'Garden', 'Museum', '-', 'on', 'the', 'former', 'location', 'of', 'the', 'amusement', 'park', '.']\n",
            "PRED 346: かつて は 比叡山 <unk> <unk> と 比叡山 <unk> <unk> が あ っ た が 、 2002 年 以前 に <unk> さ れ て い た が 、 現在 は <unk> の <unk> が <unk> の <unk> と な っ て お り 、 <unk> <unk> の 所在 地 に は 比叡山 美術 館 が あ る 。\n",
            "PRED SCORE: -40.0812\n",
            "\n",
            "[2021-08-14 10:38:09,396 INFO] \n",
            "SENT 347: ['There', 'was', 'also', 'a', 'Forest', 'Land', 'Amusement', 'Park', 'in', 'Yase', ',', 'at', 'the', 'foot', 'of', 'the', 'mountain', 'on', 'the', 'Kyoto', 'side', ',', 'although', 'that', 'was', 'closed', 'on', 'November', '30', ',', '2001', ',', 'and', 'a', 'members-only', 'resort', 'hotel', 'now', 'stands', 'in', 'that', 'location', '.']\n",
            "PRED 347: また 、 2001 年 （ 平成 13 年 ） 11 月 30 日 に <unk> さ れ た が 、 京都 側 の 山麓 に は <unk> <unk> が あ り 、 現在 で は <unk> <unk> が <unk> し て い る 。\n",
            "PRED SCORE: -25.8946\n",
            "\n",
            "[2021-08-14 10:38:09,397 INFO] \n",
            "SENT 348: ['Daihiei', 'and', 'Shimeigatake']\n",
            "PRED 348: <unk> ・ <unk>\n",
            "PRED SCORE: -2.1364\n",
            "\n",
            "[2021-08-14 10:38:09,397 INFO] \n",
            "SENT 349: ['The', 'survey', 'findings', 'from', 'the', 'Geographical', 'Survey', 'Institute', 'show', 'the', 'eastern', 'peak', 'as', 'Daihiei', ',', 'the', 'western', 'peak', 'as', 'Shimeigatake', ',', 'and', 'both', 'of', 'them', 'together', 'as', 'Mt', '.', 'Hiei', '.']\n",
            "PRED 349: <unk> <unk> 研究 所 の <unk> <unk> に よ れ ば 、 東西 の <unk> が <unk> と し て <unk> し 、 比叡山 と とも に <unk> し た 。\n",
            "PRED SCORE: -26.6534\n",
            "\n",
            "[2021-08-14 10:38:09,397 INFO] \n",
            "SENT 350: ['According', 'to', '\"', 'Ten', 'no', 'Ki', '\"', '(', 'The', 'Record', 'of', 'Survey', ')', ',', 'the', 'first-order', 'triangulation', 'point', 'on', 'the', 'eastern', 'peak', 'is', 'called', '\"', 'Mt', '.', 'Hiei', '\"', '.']\n",
            "PRED 350: 『 <unk> 記 』 に よ れ ば 、 <unk> の <unk> は 「 比叡山 」 と 呼 ば れ る 。\n",
            "PRED SCORE: -11.0106\n",
            "\n",
            "[2021-08-14 10:38:09,397 INFO] \n",
            "SENT 351: ['Although', 'this', 'marker', 'is', 'located', 'at', 'the', 'border', 'between', 'Otsu', 'and', 'Kyoto', 'cities', ',', 'it', 'is', 'inside', 'Otsu', 'City', '.']\n",
            "PRED 351: 大津 と 京都 の 境 に あ る が 、 大津 市 内 に あ る 。\n",
            "PRED SCORE: -8.6518\n",
            "\n",
            "[2021-08-14 10:38:09,398 INFO] \n",
            "SENT 352: ['When', 'one', 'views', 'Mt', '.', 'Hiei', 'from', 'the', 'Kyoto', 'basin', ',', 'it', 'is', 'difficult', 'to', 'see', 'the', 'Daihiei', 'peak', ',', 'so', 'some', 'think', 'that', 'Shimeigatake', 'is', 'the', 'peak', 'of', 'Mt', '.', 'Hiei', '.']\n",
            "PRED 352: 京都 <unk> から の 比叡 山 観 の 中 に は 、 <unk> の <unk> を 見 る こと は 困難 で あ り 、 <unk> が 比叡山 の <unk> と する 見 方 も あ る 。\n",
            "PRED SCORE: -30.2132\n",
            "\n",
            "[2021-08-14 10:38:09,398 INFO] \n",
            "SENT 353: ['The', 'Keifuku', 'Electric', 'Railroad', 'Eizan', 'Ropeway', 'has', 'its', 'Hiei', 'Mountaintop', 'Station', 'placed', 'on', 'the', 'Shimeigatake', 'peak', '.']\n",
            "PRED 353: <unk> <unk> 叡山 <unk> 叡山 <unk> 叡山 <unk> <unk> は <unk> <unk> に 置 か れ て い る 。\n",
            "PRED SCORE: -13.1253\n",
            "\n",
            "[2021-08-14 10:38:09,398 INFO] \n",
            "SENT 354: ['There', 'are', 'conflicting', 'opinions', 'as', 'to', 'the', 'proper', 'way', 'to', 'write', 'and', 'read', '\"', 'Shimeigatake', '\"', ';', 'the', 'GSI', 'lists', 'Shimeigatake', '/', 'Shimeidake', ',', 'while', '\"', 'Place', 'Names', 'of', 'Kyoto', '\"', 'lists', 'Shimeigatake', 'and', 'Shimyo', 'no', 'Mine', '.']\n",
            "PRED 354: 「 <unk> 」 と 読 む 固有 名詞 と し て の 意見 、 <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> など が あ る 。\n",
            "PRED SCORE: -23.8879\n",
            "\n",
            "[2021-08-14 10:38:09,398 INFO] \n",
            "SENT 355: ['Mt', '.', 'Hiei', 'gets', 'its', 'alternate', 'names', ',', 'Mt', '.', 'Tendai', 'and', 'Shimeigatake', ',', 'from', 'Mt', '.', 'Tiantai', 'and', 'Mt', '.', 'Siming', ',', 'sacred', 'mountains', 'in', 'the', 'People', \"'s\", 'Republic', 'of', 'China', 'that', 'have', 'associations', 'with', 'the', 'Tendai', 'Sect', '.']\n",
            "PRED 355: 比叡山 は 天台 山 、 天台 山 、 天台 山 、 中華 人民 共和 国 の 聖地 で あ る <unk> 山 など の 別名 が あ る 。\n",
            "PRED SCORE: -21.3664\n",
            "\n",
            "[2021-08-14 10:38:09,399 INFO] \n",
            "SENT 356: ['Geography']\n",
            "PRED 356: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:09,399 INFO] \n",
            "SENT 357: ['Mt', '.', 'Hiei', 'Viewed', 'from', 'the', 'Side', '(', 'left', 'side', ')']\n",
            "PRED 357: <unk> から の 比叡山 <unk>\n",
            "PRED SCORE: -6.0795\n",
            "\n",
            "[2021-08-14 10:38:09,399 INFO] \n",
            "SENT 358: ['The', 'Tanba', 'plateau', 'and', 'the', 'Hira', 'mountain', 'region', 'are', 'separated', 'by', 'the', 'Hanaore', 'fault', '.']\n",
            "PRED 358: <unk> <unk> と <unk> <unk> は <unk> <unk> に よ っ て 分離 さ れ る 。\n",
            "PRED SCORE: -10.5248\n",
            "\n",
            "[2021-08-14 10:38:09,399 INFO] \n",
            "SENT 359: ['For', 'this', 'reason', ',', 'it', 'is', 'considered', 'to', 'belong', 'to', 'the', 'Hiei', 'mountain', 'region', ',', 'or', 'the', 'Hiei', 'Daigo', 'mountain', 'region', '.']\n",
            "PRED 359: その ため 、 比叡山 や 醍醐 山 に 属 する と さ れ る 。\n",
            "PRED SCORE: -8.3299\n",
            "\n",
            "[2021-08-14 10:38:09,400 INFO] \n",
            "SENT 360: ['Access']\n",
            "PRED 360: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:09,828 INFO] \n",
            "SENT 361: ['Hieizan', 'Railway', 'Line', '(', 'Sakamoto', 'Cable', ')']\n",
            "PRED 361: 比叡山 <unk> <unk>\n",
            "PRED SCORE: -2.6724\n",
            "\n",
            "[2021-08-14 10:38:09,829 INFO] \n",
            "SENT 362: ['Keifuku', 'Electric', 'Railway', 'Keifuku', 'Cable', 'Line', '(', 'Eizan', 'Cable', ')']\n",
            "PRED 362: <unk> <unk> <unk> <unk> （ 叡山 <unk> ）\n",
            "PRED SCORE: -4.6989\n",
            "\n",
            "[2021-08-14 10:38:09,829 INFO] \n",
            "SENT 363: ['Keifuku', 'Electric', 'Railway', 'Eizan', 'Ropeway']\n",
            "PRED 363: <unk> <unk> 叡山 <unk>\n",
            "PRED SCORE: -2.9125\n",
            "\n",
            "[2021-08-14 10:38:09,829 INFO] \n",
            "SENT 364: ['Hieizan', 'Driveway']\n",
            "PRED 364: 比叡山 <unk>\n",
            "PRED SCORE: -1.8434\n",
            "\n",
            "[2021-08-14 10:38:09,829 INFO] \n",
            "SENT 365: ['Kyoto', '/', 'Shiga', 'Prefectural', 'Route', '30', ',', 'Shimogamo-Otsu', 'Road', '(', 'Yamanakagoe', ')']\n",
            "PRED 365: 京都 <unk> ・ 滋賀 県 道 30 号 <unk> <unk> 線\n",
            "PRED SCORE: -5.9427\n",
            "\n",
            "[2021-08-14 10:38:09,830 INFO] \n",
            "SENT 366: ['Hieizan', 'Drive', 'Bus', '/', 'Hieizan', 'Mountain', 'Shuttle', 'Bus']\n",
            "PRED 366: 比叡山 <unk> <unk> ・ 比叡山 <unk> <unk>\n",
            "PRED SCORE: -5.3153\n",
            "\n",
            "[2021-08-14 10:38:09,831 INFO] \n",
            "SENT 367: ['Keihan', 'Bus', 'Yamashina', 'Ticket', 'Office', ',', 'to', 'Mt', '.', 'Hiei']\n",
            "PRED 367: <unk> <unk> 山科 <unk> - 比叡山\n",
            "PRED SCORE: -5.5656\n",
            "\n",
            "[2021-08-14 10:38:09,831 INFO] \n",
            "SENT 368: ['Kyoto', 'Bus', 'Arashiyama', 'Ticket', 'Office', '/', 'Mt', '.', 'Hiei', 'Line', '(', 'Hieizan', 'Drive', 'Bus', ')']\n",
            "PRED 368: 京都 嵐山 <unk> 所 ・ 比叡山 <unk>\n",
            "PRED SCORE: -5.3040\n",
            "\n",
            "[2021-08-14 10:38:09,831 INFO] \n",
            "SENT 369: ['Television', 'Broadcast', 'Towers']\n",
            "PRED 369: テレビ ドラマ\n",
            "PRED SCORE: -1.7056\n",
            "\n",
            "[2021-08-14 10:38:09,831 INFO] \n",
            "SENT 370: ['On', 'the', 'side', 'of', 'Sakyo', 'Ward', 'of', 'Kyoto', 'City', ',', 'there', 'are', 'television', 'stations', 'that', 'service', 'the', 'Kyoto', 'Prefecture', 'area', '.']\n",
            "PRED 370: 京都 市 左京 区 側 に は テレビ 放送 が あ る 。\n",
            "PRED SCORE: -7.5767\n",
            "\n",
            "[2021-08-14 10:38:09,832 INFO] \n",
            "SENT 371: ['The', 'antennae', 'have', 'directional', 'capabilities', 'to', 'prevent', 'the', 'signal', 'from', 'leaking', 'to', 'the', 'Shiga', 'Prefecture', 'side', '.']\n",
            "PRED 371: <unk> は <unk> から 滋賀 県 側 に 向か っ て <unk> を <unk> し た 。\n",
            "PRED SCORE: -14.4266\n",
            "\n",
            "[2021-08-14 10:38:09,832 INFO] \n",
            "SENT 372: ['Land-based', 'Digital', 'Television', 'Broadcasting', 'Facilities']\n",
            "PRED 372: <unk> <unk> テレビ ドラマ\n",
            "PRED SCORE: -4.2349\n",
            "\n",
            "[2021-08-14 10:38:09,832 INFO] \n",
            "SENT 373: ['Began', 'broadcasting', 'on', 'April', '1', ',', '2005', '.']\n",
            "PRED 373: 2005 年 4 月 1 日 <unk> 。\n",
            "PRED SCORE: -4.3029\n",
            "\n",
            "[2021-08-14 10:38:09,832 INFO] \n",
            "SENT 374: ['Land-based', 'Analog', 'Television', 'Broadcasting', 'Facilities']\n",
            "PRED 374: <unk> <unk> テレビ ドラマ\n",
            "PRED SCORE: -4.2349\n",
            "\n",
            "[2021-08-14 10:38:09,832 INFO] \n",
            "SENT 375: ['Notes']\n",
            "PRED 375: <unk>\n",
            "PRED SCORE: -0.7338\n",
            "\n",
            "[2021-08-14 10:38:09,833 INFO] \n",
            "SENT 376: ['NHK', 'Osaka', ',', 'NHK', 'Educational', 'Television', ',', 'MBS', 'Mainichi', 'Broadcasting', ',', 'ABC', 'Asahi', 'Broadcasting', ',', 'KTV', 'Kansai', 'TV', ',', 'and', 'ytv', 'Yomiuri', 'TV', 'signals', 'can', 'be', 'received', 'directly', 'from', 'Mt', '.', 'Ikoma', '(', 'both', 'digital', 'and', 'analog', 'broadcasting', ')', '.']\n",
            "PRED 376: NHK 大阪 放送 局 、 NHK <unk> ドラマ 、 <unk> 朝日 放送 、 <unk> テレビ 朝日 放送 、 読売 テレビ 放送 が 生駒 山 から <unk> さ れ る （ <unk> と <unk> <unk> ） 。\n",
            "PRED SCORE: -30.8410\n",
            "\n",
            "[2021-08-14 10:38:09,833 INFO] \n",
            "SENT 377: ['There', 'are', 'also', 'many', 'households', 'that', 'watch', 'NHK', 'Sogo', 'from', 'the', 'Osaka', 'broadcast', 'on', 'Mt', '.', 'Ikoma', '.']\n",
            "PRED 377: 大阪 放送 の NHK <unk> 放送 を <unk> する <unk> も 多 い 。\n",
            "PRED SCORE: -12.2408\n",
            "\n",
            "[2021-08-14 10:38:09,833 INFO] \n",
            "SENT 378: ['The', '53', 'stations', 'of', 'the', 'Tokaido', 'Road', '(', 'Tokaido', 'gojusan', 'tsugi', ')', 'can', 'mean', ':']\n",
            "PRED 378: <unk> <unk> （ <unk> <unk> ） の <unk> は 、 <unk> を 意味 する 。\n",
            "PRED SCORE: -10.8112\n",
            "\n",
            "[2021-08-14 10:38:09,833 INFO] \n",
            "SENT 379: ['The', '53', 'posting', 'stations', 'on', 'the', 'Tokaido', 'Road', ',', 'which', 'connected', 'Edo', '(', 'Nihonbashi', '(', 'Chuo', 'Ward', ',', 'Tokyo', ')', 'and', 'Kyoto', '(', 'Sanjo', 'Ohashi', 'Bridge', ')', 'during', 'the', 'Edo', 'period', '.']\n",
            "PRED 379: 江戸 時代 に は 江戸 （ 東京 都 <unk> 区 ） と 京都 （ 三条 <unk> ） を 結 ぶ <unk> <unk> に 対 する <unk> <unk> が 行 わ れ た 。\n",
            "PRED SCORE: -16.9382\n",
            "\n",
            "[2021-08-14 10:38:09,834 INFO] \n",
            "SENT 380: ['To', 'be', 'explained', 'in', 'this', 'section', '.']\n",
            "PRED 380: 本項 で 解説 。\n",
            "PRED SCORE: -2.1044\n",
            "\n",
            "[2021-08-14 10:38:09,835 INFO] \n",
            "SENT 381: ['The', 'ukiyoe', 'works', 'painted', 'by', 'Hiroshige', 'UTAGAWA', 'depicted', '53', 'posting', 'stations', '(', 'or', '55', ',', 'including', 'the', 'starting', '/', 'ending', 'stations', ')', '.']\n",
            "PRED 381: <unk> <unk> が 描 い た 作品 は 、 <unk> <unk> （ また は 55 ） を 描 い た もの で あ る 。\n",
            "PRED SCORE: -16.6476\n",
            "\n",
            "[2021-08-14 10:38:09,835 INFO] \n",
            "SENT 382: ['Game', 'software', 'for', 'family', 'computers', 'released', 'by', 'Sunsoft']\n",
            "PRED 382: <unk> の <unk> <unk>\n",
            "PRED SCORE: -5.1383\n",
            "\n",
            "[2021-08-14 10:38:09,836 INFO] \n",
            "SENT 383: ['The', '53', 'stations', 'of', 'the', 'Tokaido', 'Road', '(', 'a', 'game', ')']\n",
            "PRED 383: <unk> <unk> の <unk>\n",
            "PRED SCORE: -3.8837\n",
            "\n",
            "[2021-08-14 10:38:09,836 INFO] \n",
            "SENT 384: ['The', '\"', '53', 'stations', '\"', 'of', 'the', 'Tokaido', 'Road', 'refers', 'to', '53', 'stations', 'in', \"'\", 'Tokaido', 'Road', ',', \"'\", 'which', 'is', 'the', 'major', 'road', 'running', 'through', 'the', 'Tokaido', 'region', 'and', 'is', 'among', 'five', 'provinces', 'and', 'seven', 'circuits', '(', 'Gokishichido', ')', '.']\n",
            "PRED 384: <unk> <unk> の 「 <unk> <unk> 」 は 、 <unk> 地方 を <unk> する 主要 な <unk> で あ る 「 <unk> 道 」 に あ り 、 五 国 七 <unk> の 一 つ で あ る 。\n",
            "PRED SCORE: -27.9648\n",
            "\n",
            "[2021-08-14 10:38:09,836 INFO] \n",
            "SENT 385: ['Many', 'of', 'the', '53', 'stations', 'are', 'established', 'in', 'places', 'where', 'the', 'scenery', 'is', 'beautiful', ',', 'or', 'in', 'famous', 'historic', 'spots', ',', 'and', 'often', 'served', 'as', 'the', 'subjects', 'of', 'ukiyoe', 'or', 'waka', '/', 'haiku', '.']\n",
            "PRED 385: <unk> の 名所 と し て は 、 <unk> が 美し い 場所 や 有名 な 歴史 的 な <unk> など に 多 く 設定 さ れ て お り 、 しばしば <unk> や 俳句 の 主題 と な っ た 。\n",
            "PRED SCORE: -32.6319\n",
            "\n",
            "[2021-08-14 10:38:09,836 INFO] \n",
            "SENT 386: ['Furthermore', ',', 'when', 'it', 'is', 'called', '53', 'stations', 'it', 'refers', 'to', 'the', 'road', 'up', 'to', 'Kyoto', ',', 'but', 'when', 'referring', 'to', 'the', 'road', 'up', 'to', 'Osaka', 'the', 'term', '57', 'stations', 'is', 'used', '.']\n",
            "PRED 386: また 、 <unk> <unk> と 呼 ば れ る 場合 に は 京都 へ の <unk> を 指 す が 、 大阪 へ の <unk> に つ い て は 57 <unk> を 指 す 。\n",
            "PRED SCORE: -24.3170\n",
            "\n",
            "[2021-08-14 10:38:09,837 INFO] \n",
            "SENT 387: ['From', 'here', 'onward', 'we', 'will', 'categorize', 'them', 'according', 'to', 'their', 'respective', 'provinces', '.']\n",
            "PRED 387: ここ から 、 諸国 に よ っ て <unk> が 異な る 。\n",
            "PRED SCORE: -10.9266\n",
            "\n",
            "[2021-08-14 10:38:09,837 INFO] \n",
            "SENT 388: ['Serial', 'numbers', 'are', 'used', ',', 'starting', 'at', 'Shinagawa-juku', 'Station', '.']\n",
            "PRED 388: <unk> <unk> は 、 <unk> <unk> で あ る 。\n",
            "PRED SCORE: -9.5971\n",
            "\n",
            "[2021-08-14 10:38:09,837 INFO] \n",
            "SENT 389: ['*', 'With', 'respect', 'to', 'the', 'local', 'governments', 'that', 'became', 'defunct', 'as', 'a', 'result', 'of', 'the', 'great', 'Heisei', 'merger', ',', 'the', 'names', 'of', 'former', 'local', 'governments', 'are', 'also', 'listed', '.']\n",
            "PRED 389: ※ 平成 の 大 合併 に よ り <unk> と な っ た 地方 <unk> に つ い て は 、 旧 <unk> 名 も 記載 さ れ て い る 。\n",
            "PRED SCORE: -17.7847\n",
            "\n",
            "[2021-08-14 10:38:09,837 INFO] \n",
            "SENT 390: ['Nihonbashi', 'Bridge', '(', 'Chuo', 'Ward', ',', 'Tokyo', ')']\n",
            "PRED 390: <unk> <unk> （ 東京 都 <unk> 区 ）\n",
            "PRED SCORE: -2.2273\n",
            "\n",
            "[2021-08-14 10:38:10,048 INFO] \n",
            "SENT 391: ['1', '.', 'Shinagawa-juku', 'Station', '(', 'Shinagawa', 'Ward', ',', 'Tokyo', ')']\n",
            "PRED 391: 1 . <unk> <unk> <unk> （ 東京 都 品川 区 ）\n",
            "PRED SCORE: -2.9398\n",
            "\n",
            "[2021-08-14 10:38:10,048 INFO] \n",
            "SENT 392: ['2', '.', 'Kawasaki-juku', 'Station', '(', 'Kawasaki', 'Ward', ',', 'Kawasaki', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 392: 2 . <unk> <unk> <unk> （ 神奈川 県 川崎 市 川崎 区 ）\n",
            "PRED SCORE: -3.1969\n",
            "\n",
            "[2021-08-14 10:38:10,049 INFO] \n",
            "SENT 393: ['3', '.', 'Kanagawa-juku', 'Station', '(', 'Kanagawa', 'Ward', ',', 'Yokohama', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 393: 3 . <unk> <unk> <unk> （ 神奈川 県 横浜 市 神奈川 区 ）\n",
            "PRED SCORE: -5.4081\n",
            "\n",
            "[2021-08-14 10:38:10,049 INFO] \n",
            "SENT 394: ['4', '.', 'Hodogaya-juku', 'Station', '(', 'Hodogaya', 'Ward', ',', 'Yokohama', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 394: 4 . <unk> <unk> <unk> （ 神奈川 県 横浜 市 <unk> 区 ）\n",
            "PRED SCORE: -2.8875\n",
            "\n",
            "[2021-08-14 10:38:10,049 INFO] \n",
            "SENT 395: ['5', '.', 'Totsuka-juku', 'Station', '(', 'Totsuka', 'Ward', ',', 'Yokohama', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 395: 5 . <unk> <unk> <unk> （ 神奈川 県 横浜 市 <unk> 区 ）\n",
            "PRED SCORE: -3.0410\n",
            "\n",
            "[2021-08-14 10:38:10,049 INFO] \n",
            "SENT 396: ['6', '.', 'Fujisawa-shuku', 'Station', '(', 'Fujisawa', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 396: 6 . <unk> <unk> <unk> （ 神奈川 県 <unk> 市 ）\n",
            "PRED SCORE: -2.6233\n",
            "\n",
            "[2021-08-14 10:38:10,050 INFO] \n",
            "SENT 397: ['7', '.', 'Hiratsuka-juku', 'Station', '(', 'Hiratsuka', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 397: 7 . <unk> <unk> <unk> （ 神奈川 県 平塚 市 ）\n",
            "PRED SCORE: -2.2357\n",
            "\n",
            "[2021-08-14 10:38:10,050 INFO] \n",
            "SENT 398: ['8', '.', 'Oiso-juku', 'Station', '(', 'Oiso-machi', ',', 'Naka-gun', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 398: 8 . <unk> <unk> <unk> （ 神奈川 県 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -5.3718\n",
            "\n",
            "[2021-08-14 10:38:10,050 INFO] \n",
            "SENT 399: ['9', '.', 'Odawara-juku', 'Station', '(', 'Odawara', 'City', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 399: 9 . <unk> <unk> <unk> （ 神奈川 県 <unk> 市 ）\n",
            "PRED SCORE: -2.6549\n",
            "\n",
            "[2021-08-14 10:38:10,050 INFO] \n",
            "SENT 400: ['10', '.', 'Hakone-juku', 'Station', '(', 'Hakone-machi', ',', 'Ashigara-shimo-gun', ',', 'Kanagawa', 'Prefecture', ')']\n",
            "PRED 400: 10 . <unk> <unk> <unk> （ 神奈川 県 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -5.1929\n",
            "\n",
            "[2021-08-14 10:38:10,050 INFO] \n",
            "SENT 401: ['11', '.', 'Mishima-shuku', 'Station', '(', 'Mishima', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 401: 11 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.7036\n",
            "\n",
            "[2021-08-14 10:38:10,051 INFO] \n",
            "SENT 402: ['12', '.', 'Numazu-juku', 'Station', '(', 'Numazu', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 402: 12 . <unk> <unk> <unk> （ 静岡 県 沼津 市 ）\n",
            "PRED SCORE: -2.6903\n",
            "\n",
            "[2021-08-14 10:38:10,051 INFO] \n",
            "SENT 403: ['13', '.', 'Hara-juku', 'Station', '(', 'Tokaido', 'Road', ')', '(', 'Numazu', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 403: 13 . <unk> <unk> <unk> （ 静岡 県 沼津 市 ）\n",
            "PRED SCORE: -3.2031\n",
            "\n",
            "[2021-08-14 10:38:10,051 INFO] \n",
            "SENT 404: ['14', '.', 'Yoshiwara-juku', 'Station', '(', 'Fuji', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 404: 14 . <unk> <unk> <unk> （ 静岡 県 富士 市 ）\n",
            "PRED SCORE: -2.7664\n",
            "\n",
            "[2021-08-14 10:38:10,051 INFO] \n",
            "SENT 405: ['15', '.', 'Kambara-juku', 'Station', '(', 'Shimizu', 'Ward', ',', 'Shizuoka', 'City', ',', 'Shizuoka', 'Prefecture', '(', 'formerly', 'Kambara-cho', ',', 'Ihara-gun', ')', ')']\n",
            "PRED 405: 15 . <unk> <unk> <unk> （ 静岡 県 静岡 市 <unk> 区 ）\n",
            "PRED SCORE: -4.7276\n",
            "\n",
            "[2021-08-14 10:38:10,052 INFO] \n",
            "SENT 406: ['16', '.', 'Yui-shuku', 'Station', '(', 'Yui-cho', ',', 'Ihara-gun', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 406: 16 . <unk> <unk> <unk> （ 静岡 県 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -4.7816\n",
            "\n",
            "[2021-08-14 10:38:10,052 INFO] \n",
            "SENT 407: ['17', '.', 'Okitsu-shuku', 'Station', '(', 'Shimizu', 'Ward', ',', 'Shizuoka', 'City', ',', 'Shizuoka', 'Prefecture', '(', 'formerly', 'Shimizu', 'City', ')', ')']\n",
            "PRED 407: 17 . <unk> <unk> <unk> （ 静岡 県 静岡 市 <unk> 区 ）\n",
            "PRED SCORE: -3.6587\n",
            "\n",
            "[2021-08-14 10:38:10,052 INFO] \n",
            "SENT 408: ['18', '.', 'Ejiri-juku', 'Station', '(', 'Shimizu', 'Ward', ',', 'Shizuoka', 'City', ',', 'Shizuoka', 'Prefecture', '(', 'formerly', 'Shimizu', 'City', ')', ')']\n",
            "PRED 408: 18 . <unk> <unk> <unk> （ 静岡 県 静岡 市 <unk> 区 ）\n",
            "PRED SCORE: -3.8450\n",
            "\n",
            "[2021-08-14 10:38:10,052 INFO] \n",
            "SENT 409: ['19', '.', 'Fuchu-shuku', 'Station', '(', 'Aoi', 'Ward', ',', 'Shizuoka', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 409: 19 . <unk> <unk> <unk> （ 静岡 県 静岡 市 <unk> 区 ）\n",
            "PRED SCORE: -3.0002\n",
            "\n",
            "[2021-08-14 10:38:10,053 INFO] \n",
            "SENT 410: ['20', '.', 'Mariko-juku', 'Station', '(', 'Suruga', 'Ward', ',', 'Shizuoka', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 410: 20 . <unk> <unk> <unk> （ 静岡 県 静岡 市 駿河 区 ）\n",
            "PRED SCORE: -3.6790\n",
            "\n",
            "[2021-08-14 10:38:10,053 INFO] \n",
            "SENT 411: ['21', '.', 'Okabe-juku', 'Station', '(', 'Okabe-cho', ',', 'Shida-gun', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 411: 21 . <unk> <unk> <unk> （ 静岡 県 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -4.7362\n",
            "\n",
            "[2021-08-14 10:38:10,053 INFO] \n",
            "SENT 412: ['22', '.', 'Fujieda-juku', 'Station', '(', 'Fujieda', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 412: 22 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.4772\n",
            "\n",
            "[2021-08-14 10:38:10,054 INFO] \n",
            "SENT 413: ['23', '.', 'Shimada-juku', 'Station', '(', 'Shimada', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 413: 23 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.6381\n",
            "\n",
            "[2021-08-14 10:38:10,054 INFO] \n",
            "SENT 414: ['24', '.', 'Kanaya-juku', 'Station', '(', 'Shimada', 'City', ',', 'Shizuoka', 'Prefecture', '(', 'formerly', 'Kanaya-cho', ',', 'Haibara-gun', ')', ')']\n",
            "PRED 414: 24 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -5.0781\n",
            "\n",
            "[2021-08-14 10:38:10,054 INFO] \n",
            "SENT 415: ['25', '.', 'Nissaka-shuku', 'Station', '(', 'Kakegawa', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 415: 25 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.7072\n",
            "\n",
            "[2021-08-14 10:38:10,055 INFO] \n",
            "SENT 416: ['26', '.', 'Kakegawa-juku', 'Station', '(', 'Kakegawa', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 416: 26 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.6017\n",
            "\n",
            "[2021-08-14 10:38:10,055 INFO] \n",
            "SENT 417: ['27', '.', 'Fukuroi-juku', 'Station', '(', 'Fukuroi', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 417: 27 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.7284\n",
            "\n",
            "[2021-08-14 10:38:10,055 INFO] \n",
            "SENT 418: ['28', '.', 'Mitsuke-juku', 'Station', '(', 'Iwata', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 418: 28 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -3.0407\n",
            "\n",
            "[2021-08-14 10:38:10,055 INFO] \n",
            "SENT 419: ['29', '.', 'Hamamatsu-juku', 'Station', '(', 'Naka', 'Ward', ',', 'Hamamatsu', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 419: 29 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 中 区 ）\n",
            "PRED SCORE: -3.3902\n",
            "\n",
            "[2021-08-14 10:38:10,055 INFO] \n",
            "SENT 420: ['30', '.', 'Maisaka-juku', 'Station', '(', 'Nishi', 'Ward', ',', 'Hamamatsu', 'City', ',', 'Shizuoka', 'Prefecture', '(', 'formerly', 'Maisaka-cho', ',', 'Hamana-gun', ')', ')']\n",
            "PRED 420: 30 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 西 区 ）\n",
            "PRED SCORE: -5.7435\n",
            "\n",
            "[2021-08-14 10:38:10,605 INFO] \n",
            "SENT 421: ['31', '.', 'Arai-juku', 'Station', '(', 'Arai-cho', ',', 'Hamana-gun', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 421: 31 . <unk> <unk> <unk> （ 静岡 県 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -4.7858\n",
            "\n",
            "[2021-08-14 10:38:10,605 INFO] \n",
            "SENT 422: ['32', '.', 'Shirasuka-juku', 'Station', '(', 'Kosai', 'City', ',', 'Shizuoka', 'Prefecture', ')']\n",
            "PRED 422: 32 . <unk> <unk> <unk> （ 静岡 県 <unk> 市 ）\n",
            "PRED SCORE: -2.8149\n",
            "\n",
            "[2021-08-14 10:38:10,606 INFO] \n",
            "SENT 423: ['33', '.', 'Futagawa-juku', 'Station', '(', 'Toyohashi', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 423: 33 . <unk> <unk> <unk> （ 愛知 県 <unk> 市 ）\n",
            "PRED SCORE: -3.7506\n",
            "\n",
            "[2021-08-14 10:38:10,606 INFO] \n",
            "SENT 424: ['34', '.', 'Yoshida-juku', 'Station', '(', 'Toyohashi', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 424: <unk> <unk> （ 愛知 県 <unk> 市 ）\n",
            "PRED SCORE: -2.2897\n",
            "\n",
            "[2021-08-14 10:38:10,606 INFO] \n",
            "SENT 425: ['35', '.', 'Goyu-shuku', 'Station', '(', 'Toyokawa', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 425: 35 . <unk> <unk> <unk> （ 愛知 県 <unk> 市 ）\n",
            "PRED SCORE: -3.0679\n",
            "\n",
            "[2021-08-14 10:38:10,607 INFO] \n",
            "SENT 426: ['36', '.', 'Akasaka-shuku', '(', 'Tokaido', ')', '(', 'Toyokawa', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 426: 36 <unk> （ 愛知 県 <unk> 市 ）\n",
            "PRED SCORE: -3.3537\n",
            "\n",
            "[2021-08-14 10:38:10,607 INFO] \n",
            "SENT 427: ['37', '.', 'Fujikawa-shuku', 'Station', '(', 'Okazaki', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 427: 37 . <unk> <unk> <unk> （ 愛知 県 岡崎 市 ）\n",
            "PRED SCORE: -2.7167\n",
            "\n",
            "[2021-08-14 10:38:10,607 INFO] \n",
            "SENT 428: ['38', '.', 'Okazaki-shuku', 'Station', '(', 'Okazaki', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 428: 38 . <unk> <unk> <unk> （ 愛知 県 岡崎 市 ）\n",
            "PRED SCORE: -2.4253\n",
            "\n",
            "[2021-08-14 10:38:10,607 INFO] \n",
            "SENT 429: ['39', '.', 'Chiryu-juku', 'Station', '(', 'Chiryu', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 429: 39 . <unk> <unk> <unk> （ 愛知 県 <unk> 市 ）\n",
            "PRED SCORE: -2.9081\n",
            "\n",
            "[2021-08-14 10:38:10,608 INFO] \n",
            "SENT 430: ['40', '.', 'Narumi-juku', 'Station', '(', 'Midori', 'Ward', ',', 'Nagoya', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 430: <unk> <unk> （ 愛知 県 名古屋 市 <unk> 区 ）\n",
            "PRED SCORE: -4.9962\n",
            "\n",
            "[2021-08-14 10:38:10,608 INFO] \n",
            "SENT 431: ['41', '.', 'Miya-juku', 'Station', '(', 'Atsuta', 'Ward', ',', 'Nagoya', 'City', ',', 'Aichi', 'Prefecture', ')']\n",
            "PRED 431: 41 . <unk> <unk> <unk> （ 愛知 県 名古屋 市 <unk> 区 ）\n",
            "PRED SCORE: -3.3760\n",
            "\n",
            "[2021-08-14 10:38:10,608 INFO] \n",
            "SENT 432: ['42', '.', 'Kuwana-juku', 'Station', '(', 'Kuwana', 'City', ',', 'Mie', 'Prefecture', ')']\n",
            "PRED 432: 42 . <unk> <unk> <unk> （ 三重 県 桑名 市 ）\n",
            "PRED SCORE: -2.7814\n",
            "\n",
            "[2021-08-14 10:38:10,608 INFO] \n",
            "SENT 433: ['43', '.', 'Yokkaichi-juku', 'Station', '(', 'Yokkaichi', 'City', ',', 'Mie', 'Prefecture', ')']\n",
            "PRED 433: 43 . <unk> <unk> <unk> （ 三重 県 <unk> 市 ）\n",
            "PRED SCORE: -2.6548\n",
            "\n",
            "[2021-08-14 10:38:10,608 INFO] \n",
            "SENT 434: ['44', '.', 'Ishiyakushi-juku', 'Station', '(', 'Suzuka', 'City', ',', 'Mie', 'Prefecture', ')']\n",
            "PRED 434: 44 . <unk> <unk> <unk> （ 三重 県 <unk> 市 ）\n",
            "PRED SCORE: -2.9982\n",
            "\n",
            "[2021-08-14 10:38:10,609 INFO] \n",
            "SENT 435: ['45', '.', 'Shono-juku', 'Station', '(', 'Suzuka', 'City', ',', 'Mie', 'Prefecture', ')']\n",
            "PRED 435: 45 . <unk> <unk> <unk> （ 三重 県 <unk> 市 ）\n",
            "PRED SCORE: -3.5387\n",
            "\n",
            "[2021-08-14 10:38:10,609 INFO] \n",
            "SENT 436: ['46', '.', 'Kameyama-juku', 'Station', '(', 'Kameyama', 'City', ',', 'Mie', 'Prefecture', ')']\n",
            "PRED 436: <unk> <unk> （ 三重 県 亀山 市 ）\n",
            "PRED SCORE: -2.5529\n",
            "\n",
            "[2021-08-14 10:38:10,609 INFO] \n",
            "SENT 437: ['47', '.', 'Seki-juku', 'Station', '(', 'Kameyama', 'City', ',', 'Mie', 'Prefecture', '(', 'formerly', 'Seki-cho', ',', 'Suzuka-gun', ')', ')']\n",
            "PRED 437: <unk> <unk> （ 三重 県 亀山 市 ）\n",
            "PRED SCORE: -4.4292\n",
            "\n",
            "[2021-08-14 10:38:10,609 INFO] \n",
            "SENT 438: ['48', '.', 'Sakashita-juku', 'Station', '(', 'Kameyama', 'City', ',', 'Mie', 'Prefecture', '(', 'formerly', 'Seki-cho', ',', 'Suzuka-gun', ')', ')']\n",
            "PRED 438: 48 . <unk> <unk> <unk> （ 三重 県 亀山 市 ）\n",
            "PRED SCORE: -4.9796\n",
            "\n",
            "[2021-08-14 10:38:10,610 INFO] \n",
            "SENT 439: ['49', '.', 'Tsuchiyama-juku', 'Station', '(', 'Koka', 'City', ',', 'Shiga', 'Prefecture', '(', 'formerly', 'Tsuchiyama-cho', ',', 'Koka-gun', ')', ')']\n",
            "PRED 439: <unk> <unk> （ 滋賀 県 <unk> 市 ）\n",
            "PRED SCORE: -4.3583\n",
            "\n",
            "[2021-08-14 10:38:10,610 INFO] \n",
            "SENT 440: ['50', '.', 'Minakuchi-juku', 'Station', '(', 'Koka', 'City', ',', 'Shiga', 'Prefecture', '(', 'formerly', 'Minakuchi-cho', ',', 'Koka-gun', ')', ')']\n",
            "PRED 440: 50 <unk> 滋賀 県 <unk> 市 （ 旧 <unk> 郡 <unk> 町 ）\n",
            "PRED SCORE: -7.3425\n",
            "\n",
            "[2021-08-14 10:38:10,610 INFO] \n",
            "SENT 441: ['51', '.', 'Ishibe-juku', 'Station', '(', 'Konan', 'City', ',', 'Shiga', 'Prefecture', '(', 'formerly', 'Ishibe-cho', ',', 'Koka-gun', ')', ')']\n",
            "PRED 441: <unk> <unk> （ 滋賀 県 <unk> 市 ）\n",
            "PRED SCORE: -4.3583\n",
            "\n",
            "[2021-08-14 10:38:10,610 INFO] \n",
            "SENT 442: ['52', '.', 'Kusatsu-shuku', '(', '-juku', ')', 'Station', '(', 'Kusatsu', 'City', ',', 'Shiga', 'Prefecture', ')']\n",
            "PRED 442: <unk> 52 <unk> （ 滋賀 県 <unk> 市 ）\n",
            "PRED SCORE: -4.6973\n",
            "\n",
            "[2021-08-14 10:38:10,611 INFO] \n",
            "SENT 443: ['53', '.', 'Otsu-juku', 'Station', '(', 'Otsu', 'City', 'Shiga', 'Prefecture', ')']\n",
            "PRED 443: <unk> <unk> （ 滋賀 県 大津 市 ）\n",
            "PRED SCORE: -2.7309\n",
            "\n",
            "[2021-08-14 10:38:10,611 INFO] \n",
            "SENT 444: ['Sanjo-Ohashi', 'Bridge', '(', 'Higashiyama', 'Ward', ',', 'Kyoto', 'City', ',', 'Kyoto', 'Prefecture', ')']\n",
            "PRED 444: <unk> <unk> （ 京都 府 京都 市 東山 区 ）\n",
            "PRED SCORE: -2.7871\n",
            "\n",
            "[2021-08-14 10:38:10,611 INFO] \n",
            "SENT 445: ['According', 'to', 'one', 'theory', ',', 'Ieyasu', 'TOKUGAWA', 'set', 'the', 'number', 'of', 'stations', 'from', 'Edo', '(', 'Kanji', 'characters', 'with', 'the', 'same', 'sound', ',', '穢土', ',', 'meaning', 'unclean', 'land', ')', 'to', 'Kyo', '(', 'which', 'means', 'the', 'land', 'where', 'Fugen', 'Bosatsu', '(', '普賢菩薩', ')', 'lives', ')', ',', 'based', 'on', 'a', 'chapter', 'from', 'Kegon-kyo', 'Sutra', ',', 'in', 'which', 'Zenzai-doshi', '(', '善財童子', ')', 'of', \"'\", 'Nyuhokkaibon', '(', '入法界品', ')', ',', \"'\", 'following', 'the', 'orders', 'of', 'Monju', 'Bosatsu', ',', 'achieved', 'enlightenment', 'at', 'the', 'place', 'of', 'Fugen', 'Bosatsu', ',', 'through', '53', 'teachers', '.']\n",
            "PRED 445: 一説 に よ れ ば 、 徳川 家康 は 、 「 文殊 菩薩 」 の <unk> に 従 っ て 、 江戸 から 京 へ の <unk> の 数 を <unk> し た と さ れ る 。\n",
            "PRED SCORE: -32.9090\n",
            "\n",
            "[2021-08-14 10:38:10,611 INFO] \n",
            "SENT 446: ['As', 'an', 'extension', 'of', 'the', 'Tokaido', 'Road', ',', 'the', 'stations', 'of', 'the', 'Kyokaido', 'Road', '(', 'Osaka', 'Kaido', 'Road', ')', 'were', 'established', 'in', '1619', '.']\n",
            "PRED 446: <unk> <unk> の 延長 と し て 、 <unk> 年 に <unk> <unk> （ 大阪 <unk> ） の <unk> が 成立 し た 。\n",
            "PRED SCORE: -14.2408\n",
            "\n",
            "[2021-08-14 10:38:10,612 INFO] \n",
            "SENT 447: ['In', 'some', 'cases', 'the', 'stations', 'of', 'the', 'Kyokaido', 'Road', 'are', 'included', 'and', 'are', 'collectively', 'referred', 'to', 'as', 'the', '57', 'stations', 'of', 'the', 'Tokaido', 'Road', '.']\n",
            "PRED 447: <unk> <unk> の <unk> を 含 む 場合 も あ り 、 <unk> 五十 六 <unk> と 総称 する 。\n",
            "PRED SCORE: -16.1270\n",
            "\n",
            "[2021-08-14 10:38:10,612 INFO] \n",
            "SENT 448: ['Furthermore', ',', 'when', 'entering', 'the', 'Kyokaido', 'Road', 'from', 'the', 'Tokaido', 'Road', ',', 'Sanjo-Ohashi', 'Bridge', 'will', 'not', 'be', 'crossed', ',', 'and', 'the', 'route', 'taken', 'will', 'turn', 'southwest', 'at', 'Higechaya-oiwake', '(', '髭茶屋追分', ')', '(', 'Oiwake-cho', ',', 'Otsu', 'City', ')', ',', 'so', 'the', 'station', 'following', 'Otsu-juku', 'Station', 'will', 'be', 'Fushimi-juku', 'Station', '.']\n",
            "PRED 448: また 、 <unk> <unk> から <unk> <unk> に 入 る と 、 <unk> <unk> は <unk> せ ず 、 <unk> （ 大津 市 <unk> ） で 南西 <unk> （ 大津 市 <unk> 町 ） で 南西 <unk> を <unk> し 、 <unk> は <unk> <unk> と な る 。\n",
            "PRED SCORE: -38.6011\n",
            "\n",
            "[2021-08-14 10:38:10,612 INFO] \n",
            "SENT 449: ['These', 'will', 'be', 'categorized', 'according', 'to', 'their', 'respective', 'provinces', '.']\n",
            "PRED 449: これ ら は 諸国 に よ っ て 分類 さ れ る 。\n",
            "PRED SCORE: -7.5442\n",
            "\n",
            "[2021-08-14 10:38:10,612 INFO] \n",
            "SENT 450: ['The', 'first', 'number', 'is', 'based', 'on', 'the', 'country', '.']\n",
            "PRED 450: 日本 で 最初 に <unk> さ れ た <unk> で あ る 。\n",
            "PRED SCORE: -10.9788\n",
            "\n",
            "[2021-08-14 10:38:11,672 INFO] \n",
            "SENT 451: ['The', 'second', 'number', 'is', 'a', 'serial', 'number', ',', 'starting', 'with', 'Shinagawa-juku', 'Station', '.']\n",
            "PRED 451: 第 二 の 一 つ は <unk> <unk> の <unk> で あ る 。\n",
            "PRED SCORE: -12.8557\n",
            "\n",
            "[2021-08-14 10:38:11,673 INFO] \n",
            "SENT 452: ['54', '.', 'Fushimi-juku', 'Station', '(', 'Kyo', 'Kaido', 'Road', ')', '(', 'Fushimi', 'Ward', ',', 'Kyoto', 'City', ',', 'Kyoto', 'Prefecture', ')']\n",
            "PRED 452: 54 . 京 <unk> （ 京都 府 京都 市 伏見 区 ）\n",
            "PRED SCORE: -4.7706\n",
            "\n",
            "[2021-08-14 10:38:11,673 INFO] \n",
            "SENT 453: ['55', '.', 'Yodo-juku', 'Station', '(', 'Fushimi', 'Ward', ',', 'Kyoto', 'City', ',', 'Kyoto', 'Prefecture', ')']\n",
            "PRED 453: <unk> 55 <unk> （ 京都 府 京都 市 伏見 区 ）\n",
            "PRED SCORE: -4.2417\n",
            "\n",
            "[2021-08-14 10:38:11,673 INFO] \n",
            "SENT 454: ['56', '.', 'Hirakata-juku', 'Station', '(', 'Hirakata', 'City', ',', 'Osaka', 'Prefecture', ')']\n",
            "PRED 454: 56 . <unk> <unk> <unk> （ 大阪 府 枚方 市 ）\n",
            "PRED SCORE: -2.7738\n",
            "\n",
            "[2021-08-14 10:38:11,674 INFO] \n",
            "SENT 455: ['57', '.', 'Moriguchi-shuku', 'Station', '(', 'Moriguchi', 'City', ',', 'Osaka', 'Prefecture', ')']\n",
            "PRED 455: 57 . <unk> <unk> <unk> （ 大阪 府 <unk> 市 ）\n",
            "PRED SCORE: -3.1108\n",
            "\n",
            "[2021-08-14 10:38:11,674 INFO] \n",
            "SENT 456: ['Korai-bashi', 'Bridge', '(', 'Chuo', 'Ward', ',', 'Osaka', 'City', ',', 'Osaka', 'Prefecture', ')']\n",
            "PRED 456: <unk> <unk> （ 大阪 府 大阪 市 <unk> 区 ）\n",
            "PRED SCORE: -2.9291\n",
            "\n",
            "[2021-08-14 10:38:11,674 INFO] \n",
            "SENT 457: ['Note', ':', 'It', 'was', 'formerly', 'Kyobashi', 'Bridge', '(', 'a', 'bridge', 'over', 'Neyagawa-river', ',', 'which', 'is', 'located', 'between', 'the', 'Chuo', 'and', 'Miyakojima', 'Wards', 'of', 'Osaka', 'City', ',', 'Osaka', 'Prefecture', ')', '.']\n",
            "PRED 457: 注 ： 元 は <unk> 橋 。\n",
            "PRED SCORE: -6.2095\n",
            "\n",
            "[2021-08-14 10:38:11,674 INFO] \n",
            "SENT 458: ['\"', 'The', 'Pillow', 'Book', '\"', 'is', 'a', 'zuihitsu', 'essay', '(', 'literally', ',', '\"', 'random', 'jottings', '\"', ')', ',', 'which', 'is', 'said', 'to', 'have', 'been', 'written', 'by', 'Sei', 'Shonagon', ',', 'a', 'female', 'writer', 'who', 'lived', 'in', 'the', 'mid-Heian', 'period', '.']\n",
            "PRED 458: 『 枕 <unk> 』 は 、 平安 時代 中期 の 女性 作家 <unk> <unk> が 著 し た と さ れ る <unk> <unk> で あ る 。\n",
            "PRED SCORE: -15.5203\n",
            "\n",
            "[2021-08-14 10:38:11,675 INFO] \n",
            "SENT 459: ['The', 'title', 'was', 'also', 'written', 'using', 'Chinese', 'characters', 'such', 'as', \"'\", '枕草紙', \"'\", '(', 'Makurazoshi', 'Notebook', ')', ',', \"'\", '枕冊子', \"'\", '(', 'Makura', 'Sasshi', ')', ',', \"'\", '枕双紙', \"'\", '(', 'Makura', 'soshi', ')', ',', 'and', \"'\", '春曙抄', \"'\", '(', 'Shunsho-sho', 'Commentary', ')', ',', 'and', 'the', 'oldest', 'manuscript', '(', 'called', '\"', 'maedabon', '\"', 'in', 'Japanese', ')', ',', 'a', 'copy', 'of', 'which', 'was', 'made', 'in', 'the', 'Kamakura', 'period', ',', 'has', 'a', 'gold-lacquered', 'casket', 'with', 'the', 'Chinese', 'characters', '\"', '清少納言枕草子', '\"', '(', 'Sei', 'Shonagon', ',', 'The', 'Pillow', 'Book', ')', 'written', 'on', 'it', '.']\n",
            "PRED 459: 「 <unk> 」 「 <unk> 」 「 <unk> 」 「 <unk> 」 「 <unk> 」 など の 漢字 表記 も 書 か れ て お り 、 鎌倉 時代 に 作 ら れ た 古 い 写本 （ 『 <unk> 抄 』 ） に は 「 <unk> 」 の 文字 が 記 さ れ て い る 。\n",
            "PRED SCORE: -30.6925\n",
            "\n",
            "[2021-08-14 10:38:11,675 INFO] \n",
            "SENT 460: ['It', 'was', 'also', 'called', '\"', 'Sei', 'Shonagon', 'ki', '.', '\"']\n",
            "PRED 460: <unk> と も い う 。\n",
            "PRED SCORE: -4.2663\n",
            "\n",
            "[2021-08-14 10:38:11,675 INFO] \n",
            "SENT 461: ['Together', 'with', '\"', 'The', 'Tale', 'of', 'Genji', ',', '\"', 'this', 'book', 'is', 'considered', 'one', 'of', 'the', 'twin', 'masterpieces', 'of', 'Heian', 'literature', ',', 'and', 'it', 'had', 'a', 'great', 'influence', 'on', 'the', 'Renga', '(', 'linked', 'verse', ')', ',', 'Haikai', '(', 'seventeen-syllable', 'verse', ')', ',', 'and', 'Kanazoshi', '(', 'old', 'stories', 'witten', 'in', 'the', 'kana', 'script', ')', 'that', 'followed', '.']\n",
            "PRED 461: 『 源氏 物語 』 と とも に 平安 文学 の 代表 作 と さ れ 、 <unk> ・ 俳諧 ・ <unk> に 大きな 影響 を 与え た 。\n",
            "PRED SCORE: -11.5887\n",
            "\n",
            "[2021-08-14 10:38:11,675 INFO] \n",
            "SENT 462: ['Along', 'with', 'both', '\"', 'Hojo-ki', '(', 'The', 'Ten-Foot-Square', 'Hut', ')', ',', '\"', 'written', 'by', 'KAMO', 'no', 'Chomei', ',', 'and', '\"', 'Tsurezuregusa', '(', 'Essays', 'in', 'Idleness', ')', '\"', 'written', 'by', 'Kenko', 'YOSHIDA', ',', 'it', 'is', 'called', 'one', 'of', 'the', 'three', 'Japanese', 'major', 'lists', ',', 'histories', 'and', 'satires', '.']\n",
            "PRED 462: <unk> <unk> の 『 <unk> 』 、 <unk> <unk> の 『 徒然草 』 と 並 ぶ 日本 三 大 <unk> の 一 つ で あ る 。\n",
            "PRED SCORE: -13.3764\n",
            "\n",
            "[2021-08-14 10:38:11,676 INFO] \n",
            "SENT 463: ['Its', 'writing', 'style', 'is', 'extremely', 'individualistic', ':', 'there', 'is', 'no', 'similar', 'book', 'except', '\"', 'Gizan-zassan', '(', 'Gizan', 'Collection', ')', ',', '\"', 'compiled', 'by', 'Shangyin', 'LI', '(', 'courtesy', 'name', 'Yishan', ')', ',', 'a', 'poet', 'of', 'the', 'late', 'Tang', 'dynasty', '.']\n",
            "PRED 463: <unk> 体 は 非常 に <unk> な もの で あ り 、 唐代 後期 の 歌人 で あ る 李 <unk> （ <unk> ） が 編纂 し た 『 <unk> 集 』 以外 に も <unk> な い 。\n",
            "PRED SCORE: -30.5270\n",
            "\n",
            "[2021-08-14 10:38:11,676 INFO] \n",
            "SENT 464: ['According', 'to', 'an', 'afterword', 'to', 'the', 'book', ',', 'her', 'motive', 'for', 'writing', 'the', 'book', 'and', 'the', 'origin', 'of', 'the', 'title', 'came', 'from', 'the', 'episode', 'in', 'which', ',', 'when', 'Naidaijin', '(', 'minister', 'of', 'the', 'center', ')', 'FUJIWARA', 'no', 'Korechika', 'presented', 'to', 'his', 'younger', 'sister', 'FUJIWARA', 'no', 'Empress', 'Teishi', 'and', 'Emperor', 'Ichijo', 'a', 'bundle', 'of', 'paper', ',', 'which', 'was', 'still', 'expensive', 'in', 'those', 'days', ',', 'the', 'Empress', 'inquired', ',', \"'\", 'Emperor', 'used', 'the', 'paper', 'to', 'copy', '\"', 'Shiki', '(', 'Records', 'of', 'the', 'Grand', 'Historian', ')', ',', \"'\", 'what', 'do', 'you', 'think', 'we', 'could', 'write', 'on', 'this', '?', '\"', 'to', 'which', 'Sei', 'Shonagon', 'answered', ',', \"'\", 'it', '(', 'the', 'book', ')', 'would', 'be', 'good', 'to', 'use', 'as', 'a', 'pillow', '.', \"'\"]\n",
            "PRED 464: <unk> の <unk> に よ れ ば 、 当時 の <unk> で あ っ た 藤原 <unk> が 妹 の 藤原 <unk> ・ 一条 天皇 に <unk> し た 際 に 、 「 <unk> は <unk> で あ る 」 と <unk> し た と い う 。\n",
            "PRED SCORE: -41.9839\n",
            "\n",
            "[2021-08-14 10:38:11,676 INFO] \n",
            "SENT 465: ['She', 'was', 'granted', 'the', 'paper', '(', 'such', 'episode', 'being', 'based', 'on', 'Sankanbon', '(', 'version', 'of', 'manuscript', ')', ',', 'and', 'both', 'incomplete', 'and', 'complete', 'versions', 'of', 'Noinbon', '(', 'version', 'of', 'manuscript', ')', 'have', 'similar', 'episodes', 'describing', 'the', 'response', 'that', '\"', 'it', '(', 'the', 'book', ')', 'would', 'be', 'good', 'to', 'use', 'as', 'a', 'pillow', ')', ',', '\"', 'but', 'the', 'Sakaibon', 'and', 'Maedabon', '(', 'versions', 'of', 'the', 'manuscript', ')', 'don', \"'t\", 'contain', 'this', 'episode', ')', '.']\n",
            "PRED 465: <unk> に よ っ て <unk> （ <unk> 本 ） を 与え られ た が 、 <unk> 本 の <unk> と <unk> 本 の 完全 な <unk> は 、 『 <unk> 』 （ <unk> 本 ） と 同様 に <unk> し た と い う 話 で あ る 。\n",
            "PRED SCORE: -55.0108\n",
            "\n",
            "[2021-08-14 10:38:11,676 INFO] \n",
            "SENT 466: ['It', 'is', 'widely', 'thought', 'that', 'the', 'title', \"'\", 'The', 'Pillow', 'Book', \"'\", 'is', 'also', 'based', 'on', 'the', 'episode', '.']\n",
            "PRED 466: 「 枕 <unk> 」 と い う 呼称 も この エピソード に 由来 する と 考え られ て い る 。\n",
            "PRED SCORE: -14.6620\n",
            "\n",
            "[2021-08-14 10:38:11,677 INFO] \n",
            "SENT 467: ['\"', 'A', 'study', 'of', 'the', 'Pillow', 'Book', '\"', 'written', 'by', 'Kazuhiko', 'HAYASHI', 'mentions', 'his', 'own', 'view', 'and', 'some', 'other', 'past', 'scholars', \"'\", 'names', 'such', 'as', 'Keichu', ',', 'Shinobu', 'ORIKUCHI', ',', 'and', 'Kikan', 'IKEDA', '.']\n",
            "PRED 467: <unk> <unk> の 著書 『 新撰 <unk> 録 』 に は 、 <unk> <unk> 、 <unk> <unk> 、 池田 <unk> など の 名 が あ る 。\n",
            "PRED SCORE: -17.5459\n",
            "\n",
            "[2021-08-14 10:38:11,677 INFO] \n",
            "SENT 468: ['The', 'following', 'are', 'typical', 'views', 'about', 'the', 'meaning', 'of', '\"', 'pillow', '\"', ':']\n",
            "PRED 468: 「 <unk> 」 の 意味 に つ い て は 以下 の よう な 説 が あ る 。\n",
            "PRED SCORE: -11.6030\n",
            "\n",
            "[2021-08-14 10:38:11,677 INFO] \n",
            "SENT 469: ['―', 'Bedding', ':', 'a', 'pun', 'that', 'suggests', 'a', 'pillow', 'on', 'the', 'mattress', '(', 'with', 'Shiki', 'reworded', 'as', 'Shikibuton', '(', 'mattress', ')', ')', '.']\n",
            "PRED 469: <unk> <unk> … <unk> に 関 する <unk> を 指 す <unk> 。\n",
            "PRED SCORE: -12.5471\n",
            "\n",
            "[2021-08-14 10:38:11,677 INFO] \n",
            "SENT 470: ['―', 'Dictionary', 'for', 'the', 'writer', ':', 'There', 'are', 'many', 'chapters', 'in', 'which', 'Utamakura', '(', 'a', 'place', 'famed', 'in', 'poetry', ')', ',', 'rules', ',', 'and', 'terms', 'are', 'listed', '.']\n",
            "PRED 470: 作者 の <unk> に は 、 <unk> ・ <unk> ・ 用語 など が 記 さ れ て い る 。\n",
            "PRED SCORE: -16.8221\n",
            "\n",
            "[2021-08-14 10:38:11,677 INFO] \n",
            "SENT 471: ['―', 'Memorandum', ':', 'She', 'kept', 'the', 'paper', 'by', 'her', 'pillow', 'for', 'private', 'jottings', '.']\n",
            "PRED 471: <unk> <unk> … 私 <unk> の ため に 紙 を <unk> し た 。\n",
            "PRED SCORE: -11.4808\n",
            "\n",
            "[2021-08-14 10:38:11,678 INFO] \n",
            "SENT 472: ['―', 'Treasured', 'book']\n",
            "PRED 472: <unk> 本\n",
            "PRED SCORE: -2.7923\n",
            "\n",
            "[2021-08-14 10:38:11,678 INFO] \n",
            "SENT 473: ['―', 'Irrelevant', 'to', 'anything']\n",
            "PRED 473: <unk>\n",
            "PRED SCORE: -3.9404\n",
            "\n",
            "[2021-08-14 10:38:11,678 INFO] \n",
            "SENT 474: ['However', ',', 'scholars', 'have', 'yet', 'to', 'reach', 'a', 'consensus', '.']\n",
            "PRED 474: しかし ながら 、 研究 者 の 間 で は まだ <unk> し て い な い 。\n",
            "PRED SCORE: -12.2205\n",
            "\n",
            "[2021-08-14 10:38:11,678 INFO] \n",
            "SENT 475: ['Also', ',', 'in', 'the', 'book', 'of', '\"', 'Eiga', 'monogatari', '(', 'A', 'Tale', 'of', 'Flowering', 'Fortunes', ')', ',', '\"', 'the', 'term', \"'\", 'makura', 'no', 'soshi', \"'\", 'as', 'a', 'common', 'noun', 'was', 'used', 'to', 'describe', 'the', 'beautiful', 'kasane', '(', 'layering', ')', 'colors', '.']\n",
            "PRED 475: また 、 『 <unk> 物語 』 に お い て も 、 「 <unk> の <unk> 」 と い う 語 は 、 美し い <unk> （ <unk> ） を 指 し て い る 。\n",
            "PRED SCORE: -24.5816\n",
            "\n",
            "[2021-08-14 10:38:11,679 INFO] \n",
            "SENT 476: ['According', 'to', 'the', 'afterword', ',', 'the', 'first', 'draft', 'was', 'written', 'around', '996', ',', 'and', 'Sachujo', '(', 'guard', 'of', 'the', 'Imperial', 'Palace', ')', 'MINAMOTO', 'no', 'Tsunefusa', 'took', 'the', 'draft', 'from', 'the', 'author', \"'s\", 'residence', 'and', 'brought', 'it', 'before', 'the', 'eyes', 'of', 'the', 'world', '.']\n",
            "PRED 476: <unk> に よ れ ば 、 最初 の 案 は <unk> 2 年 （ <unk> 年 ） 頃 に 書 か れ て お り 、 <unk> <unk> は <unk> の <unk> から 草案 を 取 り 、 世界 の 目 に <unk> っ た 。\n",
            "PRED SCORE: -36.1359\n",
            "\n",
            "[2021-08-14 10:38:11,679 INFO] \n",
            "SENT 477: ['After', 'that', ',', 'she', 'wrote', 'continuously', ',', 'and', 'some', 'records', 'say', 'the', 'book', 'was', 'written', 'around', '1012', '.']\n",
            "PRED 477: その 後 も 書 か れ 、 <unk> 年 頃 に 書 か れ た と する 記録 も あ る 。\n",
            "PRED SCORE: -13.6109\n",
            "\n",
            "[2021-08-14 10:38:11,679 INFO] \n",
            "SENT 478: ['Some', 'lines', 'of', '\"', 'The', 'Pillow', 'Book', ',', '\"', 'as', 'quoted', 'from', 'the', 'old', 'commentary', '\"', 'Shimei-sho', 'Commentary', 'of', \"'\", 'The', 'Tale', 'of', 'Genji', ',', \"'\", '\"', 'don', \"'t\", 'exist', 'in', 'the', 'surviving', 'manuscript', ',', 'which', 'suggests', 'that', 'the', 'writing', 'process', 'was', 'complicated', '.']\n",
            "PRED 478: 『 源氏 物語 』 の 注釈 書 『 源氏 物語 』 の 注釈 書 から 引用 さ れ て い る 『 <unk> 抄 』 の 中 に は 、 <unk> 本 に は 収録 さ れ て い な い もの も あ り 、 複雑 で あ る こと が 分か る 。\n",
            "PRED SCORE: -41.7103\n",
            "\n",
            "[2021-08-14 10:38:11,680 INFO] \n",
            "SENT 479: ['There', 'are', 'great', 'differences', 'between', 'the', 'existing', 'manuscripts', '.']\n",
            "PRED 479: 現存 する 写本 と の 違い は 大き い 。\n",
            "PRED SCORE: -4.6520\n",
            "\n",
            "[2021-08-14 10:38:11,680 INFO] \n",
            "SENT 480: ['It', 'consists', 'of', 'three', 'volumes', 'and', 'takes', 'the', 'form', 'of', 'a', 'collection', 'of', 'various', 'writings', '.']\n",
            "PRED 480: 全 3 巻 から な り 、 様々 な <unk> の 形式 を と る 。\n",
            "PRED SCORE: -10.9707\n",
            "\n",
            "[2021-08-14 10:38:12,590 INFO] \n",
            "SENT 481: ['It', 'is', 'a', 'manuscript', 'containing', 'an', 'okugaki', '(', 'postscript', ')', 'written', 'in', '1228', 'by', 'a', 'person', 'called', 'Bogyuguo', ',', 'who', 'seems', 'to', 'have', 'been', 'FUJIWARA', 'no', 'Sadaie', '.']\n",
            "PRED 481: 藤原 <unk> と 見 られ る 人物 に よ っ て 、 <unk> 2 年 （ <unk> 年 ） に 書 か れ た 写本 で あ る 。\n",
            "PRED SCORE: -16.4112\n",
            "\n",
            "[2021-08-14 10:38:12,590 INFO] \n",
            "SENT 482: ['It', 'is', \"'\", 'clear', 'writing', \"'\", 'and', 'is', 'easy', 'to', 'understand', ',', 'being', 'considered', 'the', 'most', 'similar', 'to', 'the', 'original', 'form', '.']\n",
            "PRED 482: 「 <unk> 」 で あ り 、 本来 の 形態 に 近 い もの と し て 理解 し やす い 。\n",
            "PRED SCORE: -15.8750\n",
            "\n",
            "[2021-08-14 10:38:12,591 INFO] \n",
            "SENT 483: ['It', 'was', 'divided', 'into', 'two', 'groups', 'by', 'Kikan', 'IKEDA', '.']\n",
            "PRED 483: 池田 <unk> の 2 組 に 分かれ た 。\n",
            "PRED SCORE: -5.5183\n",
            "\n",
            "[2021-08-14 10:38:12,591 INFO] \n",
            "SENT 484: ['Korui', '(', 'first', 'class', ')', '-', 'The', 'opening', '70', 'chapters', ',', 'which', 'start', 'with', 'the', 'line', ',', \"'\", 'The', 'best', 'time', 'in', 'spring', 'is', 'dawn', ',', \"'\", 'are', 'omitted', ',', 'and', 'instead', 'the', 'manuscript', 'begins', 'with', 'the', 'line', ',', \"'\", 'Comfortable', 'thing', '.', \"'\"]\n",
            "PRED 484: <unk> - 「 春 の <unk> は <unk> 」 、 <unk> は 「 <unk> 」 、 <unk> は 「 <unk> 」 。\n",
            "PRED SCORE: -20.8035\n",
            "\n",
            "[2021-08-14 10:38:12,591 INFO] \n",
            "SENT 485: ['230', 'chapters']\n",
            "PRED 485: <unk> 章\n",
            "PRED SCORE: -2.3583\n",
            "\n",
            "[2021-08-14 10:38:12,591 INFO] \n",
            "SENT 486: ['Book', 'collection', 'of', 'Yomei', 'paperback', ',', 'book', 'collection', 'of', 'Toshoryo', ',', 'Shoryo', 'Department', ',', 'Imperial', 'Household', 'Agency', ',', 'and', 'book', 'collection', 'of', 'the', 'Tatamatsunomiya', 'faamily']\n",
            "PRED 486: <unk> <unk> 本 、 <unk> <unk> 、 宮内 庁 <unk> 、 <unk> <unk> 本\n",
            "PRED SCORE: -15.1846\n",
            "\n",
            "[2021-08-14 10:38:12,592 INFO] \n",
            "SENT 487: ['Otsurui', '(', 'second', 'class', ')', '-', '300', 'chapters']\n",
            "PRED 487: <unk> - 300 段\n",
            "PRED SCORE: -3.4809\n",
            "\n",
            "[2021-08-14 10:38:12,592 INFO] \n",
            "SENT 488: ['Old', 'book', 'collection', 'of', 'Hamao', 'YATOMI', ',', 'book', 'collection', 'of', 'Kariya', 'City', 'Library', ',', 'old', 'book', 'collection', 'of', 'the', 'Date', 'family', ',', 'old', 'book', 'collection', 'of', 'the', 'KAJUJI', 'Family', ',', 'old', 'book', 'collection', 'of', 'Akika', 'NAKAMURA', ',', 'book', 'collection', 'of', 'Koshido', 'Bunko']\n",
            "PRED 488: <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -19.7527\n",
            "\n",
            "[2021-08-14 10:38:12,592 INFO] \n",
            "SENT 489: ['The', 'priest', 'Noin', 'was', 'related', 'by', 'marriage', 'to', 'Sei', 'Shonagon', '(', 'one', 'of', 'his', 'sisters', 'was', 'a', 'wife', 'of', 'TACHIBANA', 'no', 'Norinaga', ',', 'a', 'son', 'of', 'Sei', 'Shonagon', ')', ',', 'and', 'seemed', 'to', 'have', 'something', 'to', 'do', 'with', 'handing', 'down', 'the', 'manuscript', '.']\n",
            "PRED 489: <unk> は <unk> （ <unk> の 子 ・ 橘 <unk> の 妻 ） と の <unk> 関係 に あ り 、 写本 を <unk> し た もの と 思 わ れ る 。\n",
            "PRED SCORE: -23.4717\n",
            "\n",
            "[2021-08-14 10:38:12,593 INFO] \n",
            "SENT 490: ['The', 'date', 'of', 'the', 'work', 'has', 'been', 'traced', 'back', 'to', 'the', 'end', 'of', 'the', 'Kamakura', 'period', '.']\n",
            "PRED 490: 年代 は 鎌倉 時代 末期 まで 遡 る 。\n",
            "PRED SCORE: -6.4149\n",
            "\n",
            "[2021-08-14 10:38:12,593 INFO] \n",
            "SENT 491: ['After', 'arguing', 'which', 'book', 'is', 'more', 'authentic', ',', 'it', 'is', 'now', 'widely', 'accepted', 'that', 'the', 'original', 'book', 'of', 'Noinbon', 'is', 'inferior', 'to', 'Sankanbon', '.']\n",
            "PRED 491: 本格 的 な 本 で あ る <unk> 本 は 、 <unk> 本 が <unk> 本 に 劣 る と い う の が 通説 で あ る 。\n",
            "PRED SCORE: -24.9442\n",
            "\n",
            "[2021-08-14 10:38:12,593 INFO] \n",
            "SENT 492: ['Two', 'hundred', 'and', 'thirty', 'chapters', '(', 'excluding', 'the', 'first', '70', 'chapters', ')']\n",
            "PRED 492: 200 段 （ 第 1 章 ）\n",
            "PRED SCORE: -7.9343\n",
            "\n",
            "[2021-08-14 10:38:12,593 INFO] \n",
            "SENT 493: ['300', 'chapters']\n",
            "PRED 493: 300 段\n",
            "PRED SCORE: -1.6010\n",
            "\n",
            "[2021-08-14 10:38:12,594 INFO] \n",
            "SENT 494: ['Ruisan', 'form', '(', 'a', 'classified', 'collection', 'in', 'book', 'form', ')']\n",
            "PRED 494: <unk> 形\n",
            "PRED SCORE: -2.2130\n",
            "\n",
            "[2021-08-14 10:38:12,594 INFO] \n",
            "SENT 495: ['Manuscript', 'copied', 'in', 'the', 'Muromachi', 'period']\n",
            "PRED 495: 室町 時代 の 写本\n",
            "PRED SCORE: -2.8517\n",
            "\n",
            "[2021-08-14 10:38:12,594 INFO] \n",
            "SENT 496: ['The', 'postscript', 'says', 'KIYOHARA', 'no', 'Shigekata', '/', 'Edakata', 'copied', 'the', 'book', ',', 'whose', 'owner', 'was', 'Doha', ',', 'a', 'secluded', 'monk', 'who', 'lived', 'in', 'Sakai', ',', 'and', 'therefore', 'the', 'manuscript', 'is', 'called', 'Sakaibon', '.']\n",
            "PRED 496: <unk> に よ れ ば 、 <unk> <unk> ・ <unk> <unk> が 堺 に 住 ん で い た 僧 の <unk> を 書写 し た ため 、 写本 を <unk> と い う 。\n",
            "PRED SCORE: -28.7100\n",
            "\n",
            "[2021-08-14 10:38:12,594 INFO] \n",
            "SENT 497: ['Two', 'volumes']\n",
            "PRED 497: 全 2 巻\n",
            "PRED SCORE: -2.0918\n",
            "\n",
            "[2021-08-14 10:38:12,595 INFO] \n",
            "SENT 498: ['The', 'book', 'is', 'missing', 'chapters', 'on', 'diary', 'and', 'reminiscence', '.']\n",
            "PRED 498: <unk> ・ <unk> に つ い て は 、 <unk> が 欠け て い る 。\n",
            "PRED SCORE: -13.9073\n",
            "\n",
            "[2021-08-14 10:38:12,595 INFO] \n",
            "SENT 499: ['Gokogoninbon', '(', 'type', 'of', 'manuscript', ')', ':', '190', 'chapters']\n",
            "PRED 499: <unk> <unk> 巻\n",
            "PRED SCORE: -5.5577\n",
            "\n",
            "[2021-08-14 10:38:12,595 INFO] \n",
            "SENT 500: ['The', 'postscript', 'says', 'Emperor', 'Go-Kogon', 'made', 'a', 'copy', 'of', 'the', 'book', '.']\n",
            "PRED 500: <unk> に よ れ ば 、 <unk> 天皇 が 写本 を 作成 し た と あ る 。\n",
            "PRED SCORE: -11.7491\n",
            "\n",
            "[2021-08-14 10:38:12,595 INFO] \n",
            "SENT 501: ['Shinkanbon', '(', 'a', 'manuscript', 'in', 'the', 'Emperor', \"'s\", 'own', 'hand', ')']\n",
            "PRED 501: <unk> 本\n",
            "PRED SCORE: -1.9109\n",
            "\n",
            "[2021-08-14 10:38:12,596 INFO] \n",
            "SENT 502: ['Ninety-five', 'chapters']\n",
            "PRED 502: <unk> 章\n",
            "PRED SCORE: -2.3583\n",
            "\n",
            "[2021-08-14 10:38:12,596 INFO] \n",
            "SENT 503: ['The', 'above', 'two', 'types', 'of', 'manuscripts', 'were', 'integrated', 'into', 'a', 'book', '.']\n",
            "PRED 503: 以上 2 種 の 写本 が <unk> に 編入 さ れ た 。\n",
            "PRED SCORE: -10.2042\n",
            "\n",
            "[2021-08-14 10:38:12,596 INFO] \n",
            "SENT 504: ['Sakaibon', 'in', 'general', 'refers', 'to', 'this', '.']\n",
            "PRED 504: 一般 的 に は これ を 指 す 。\n",
            "PRED SCORE: -4.2277\n",
            "\n",
            "[2021-08-14 10:38:12,596 INFO] \n",
            "SENT 505: ['Volume', '1', 'consists', 'of', '107', 'chapters', '.']\n",
            "PRED 505: 第 1 巻 は <unk> 段 。\n",
            "PRED SCORE: -5.8965\n",
            "\n",
            "[2021-08-14 10:38:12,597 INFO] \n",
            "SENT 506: ['Volume', '2', 'consists', 'of', '89', 'chapters', '.']\n",
            "PRED 506: 第 2 巻 は 第 89 章 。\n",
            "PRED SCORE: -5.3746\n",
            "\n",
            "[2021-08-14 10:38:12,597 INFO] \n",
            "SENT 507: ['Volume', '3', 'consists', 'of', '102', 'chapters', '.']\n",
            "PRED 507: 巻 三 は <unk> 段 。\n",
            "PRED SCORE: -6.0505\n",
            "\n",
            "[2021-08-14 10:38:12,597 INFO] \n",
            "SENT 508: ['Volume', '4', 'consists', 'of', '32', 'chapters', '.']\n",
            "PRED 508: 第 4 章 は 32 段 。\n",
            "PRED SCORE: -5.0404\n",
            "\n",
            "[2021-08-14 10:38:12,597 INFO] \n",
            "SENT 509: ['Volume', '5', 'might', 'have', 'been', 'lost', '.']\n",
            "PRED 509: 巻 五 は 失 わ れ て い る 。\n",
            "PRED SCORE: -7.0876\n",
            "\n",
            "[2021-08-14 10:38:12,598 INFO] \n",
            "SENT 510: ['It', 'takes', 'Ruisan', 'form', '.']\n",
            "PRED 510: <unk> 形 。\n",
            "PRED SCORE: -3.3323\n",
            "\n",
            "[2021-08-14 10:38:13,481 INFO] \n",
            "SENT 511: ['There', 'exists', 'only', 'one', 'manuscript', 'that', 'has', 'been', 'handed', 'down', 'in', 'the', 'Maeda', 'family', 'of', 'Kaga', 'Province', '(', 'the', 'book', 'collection', 'of', 'MAEDA-Ikutokukai', ')', '.']\n",
            "PRED 511: 加賀 国 <unk> 家 に 伝来 し た 写本 は 1 巻 現存 する 。\n",
            "PRED SCORE: -12.0900\n",
            "\n",
            "[2021-08-14 10:38:13,481 INFO] \n",
            "SENT 512: ['It', 'is', 'preserved', 'in', 'a', 'box', 'of', 'gold-lacquered', 'craft', ',', 'and', 'on', 'its', 'surface', 'are', 'the', 'characters', '\"', '清少納言枕草子', '(', 'Sei', 'Shonagon', ',', 'The', 'Pillow', 'Book', ')', '\"', 'in', 'gold', 'incrustation', '.']\n",
            "PRED 512: <unk> <unk> の <unk> に 保存 さ れ て お り 、 <unk> に は 金 <unk> の <unk> が あ る 。\n",
            "PRED SCORE: -14.3097\n",
            "\n",
            "[2021-08-14 10:38:13,481 INFO] \n",
            "SENT 513: ['It', 'is', 'an', 'important', 'cultural', 'property', '.']\n",
            "PRED 513: 重要 文化 財 。\n",
            "PRED SCORE: -0.6215\n",
            "\n",
            "[2021-08-14 10:38:13,482 INFO] \n",
            "SENT 514: ['It', 'was', 'copied', 'during', 'the', 'early', 'Kamakura', 'period', 'and', 'is', 'considered', 'to', 'be', 'the', 'oldest', 'of', 'all', 'the', 'manuscripts', 'of', '\"', 'The', 'Pillow', 'Book', '.', '\"']\n",
            "PRED 514: 鎌倉 時代 初期 に 書写 さ れ た もの で 、 『 枕 <unk> 』 の 写本 の 最古 の 写本 と さ れ る 。\n",
            "PRED SCORE: -13.9003\n",
            "\n",
            "[2021-08-14 10:38:13,482 INFO] \n",
            "SENT 515: ['Among', 'them', ',', 'the', 'Sakaibon', 'group', 'Gokogoninbon', 'was', 'separately', 'collected', 'in', 'two', 'volumes', 'of', '\"', 'Gunshoruiju', '(', 'Japanese', 'history', 'book', ')', ',', '\"', 'and', 'three', 'kinds', 'of', 'Sakaibon', 'were', 'collected', 'in', '\"', 'Shinko', 'Gunshoruiju', '(', 'library', ')', '.', '\"']\n",
            "PRED 515: この うち 、 <unk> <unk> は 『 日本 史 』 2 巻 に 分け られ 、 『 <unk> <unk> 』 に 3 種 の <unk> が 収録 さ れ た 。\n",
            "PRED SCORE: -21.2467\n",
            "\n",
            "[2021-08-14 10:38:13,482 INFO] \n",
            "SENT 516: ['Additionally', ',', 'Noinbon', 'was', 'used', 'as', 'a', 'master', 'copy', 'in', 'making', 'the', 'old', 'plate', 'of', 'type', 'in', 'the', 'early', 'Edo', 'period', ';', 'therefore', ',', 'it', 'remained', 'a', 'dominant', 'manuscript', 'along', 'with', '\"', 'The', 'Pillow', 'Book', 'Bochu', '(', 'marginal', 'notes', ')', '\"', 'and', '\"', 'Shunsho-sho', 'Commentary', 'of', 'The', 'Pillow', 'Book', '\"', '(', 'annotated', 'by', 'Kigin', 'KITAMURA', ')', 'until', 'modern', 'times', '.']\n",
            "PRED 516: また 、 江戸 時代 初期 の <unk> の <unk> に も <unk> と し て 用い られ て お り 、 『 枕 <unk> 』 『 枕 <unk> 』 など と 並 ん で 、 近世 まで 続 い た 。\n",
            "PRED SCORE: -30.9097\n",
            "\n",
            "[2021-08-14 10:38:13,482 INFO] \n",
            "SENT 517: ['However', ',', 'in', '1946', ',', 'when', 'Jutaro', 'TANAKA', '(', '1917-1987', ')', 'reevaluated', 'the', 'second', 'class', 'of', 'Sankanbon', ',', 'it', 'came', 'to', 'be', 'considered', 'more', 'important', 'and', 'was', 'published', 'more', ',', 'being', 'used', 'as', 'a', 'textbook', 'and', 'read', 'at', 'school', 'after', 'the', 'war', '.']\n",
            "PRED 517: しかし 、 <unk> 年 に <unk> <unk> ( <unk> ) が 第 2 級 の <unk> を <unk> し た 際 に は 、 戦後 の 教科 書 と し て 用い られ る よう に な っ た 。\n",
            "PRED SCORE: -28.0475\n",
            "\n",
            "[2021-08-14 10:38:13,483 INFO] \n",
            "SENT 518: ['Other', 'existent', 'manuscripts', 'are', 'seven', 'chapters', 'of', '\"', 'The', 'Pillow', 'Book', 'Ekotoba', '(', 'story', 'in', 'pictures', ')', '\"', 'made', 'in', 'the', 'late', 'Kamakura', 'period', ',', 'consisting', 'of', 'emaki', '(', 'a', 'picture', 'scroll', ')', 'with', 'hakubyoga', '(', 'ink', 'line', 'painting', ')', ',', 'and', 'Sankanbon', 'manuscript', 'seems', 'to', 'have', 'been', 'used', 'for', 'the', 'notes', '.']\n",
            "PRED 518: 他 に も 現存 する 写本 と し て は 、 鎌倉 時代 後期 に 作 ら れ た 『 <unk> <unk> 』 7 段 、 <unk> に よ る <unk> （ <unk> ） 、 <unk> 本 など が あ る 。\n",
            "PRED SCORE: -30.8317\n",
            "\n",
            "[2021-08-14 10:38:13,483 INFO] \n",
            "SENT 519: ['The', 'second-class', 'Sankanbon', 'contains', 'more', 'than', '300', 'independent', 'chapters', 'in', 'total', '.']\n",
            "PRED 519: <unk> <unk> は 全 300 段 を 超え る 。\n",
            "PRED SCORE: -10.6247\n",
            "\n",
            "[2021-08-14 10:38:13,483 INFO] \n",
            "SENT 520: ['It', 'consists', 'of', 'various', 'types', 'of', 'writing', ':', \"'\", 'chapters', 'of', 'Ruiju', \"'\", 'of', \"'\", 'Monowazukushi', '(', 'enumerating', 'the', 'things', 'in', 'the', 'same', 'category', ')', ',', \"'\", 'as', 'represented', 'by', 'the', 'lists', 'of', 'things', 'like', \"'\", 'Insects', ',', \"'\", \"'\", 'Flowering', 'trees', ',', \"'\", \"'\", 'Dispiriting', 'things', ',', \"'\", \"'\", 'Endearingly', 'lovely', 'things', ',', \"'\", 'and', \"'\", 'Chapters', 'of', 'Zuiso', '(', 'essay', ')', ',', \"'\", 'which', 'is', 'an', 'observation', 'of', 'daily', 'life', 'and', 'nature', 'in', 'the', 'seasons', ',', 'and', \"'\", 'chapters', 'of', 'reminiscence', '(', 'chapters', 'of', 'a', 'diary', ')', \"'\", 'in', 'which', 'the', 'author', 'wrote', 'about', 'the', 'life', 'around', 'Empress', 'Teishi', ',', 'whom', 'she', 'served', 'in', 'the', 'Imperial', 'Court', '.']\n",
            "PRED 520: 「 類聚 抄 」 の 「 類聚 抄 」 、 「 <unk> 」 、 「 <unk> 物 」 、 「 <unk> 物 」 、 「 <unk> 物 」 、 「 <unk> 物 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 、 「 <unk> <unk> 」 など 、 さまざま な <unk> が 書 か れ て い る 。\n",
            "PRED SCORE: -65.3473\n",
            "\n",
            "[2021-08-14 10:38:13,483 INFO] \n",
            "SENT 521: ['However', ',', 'some', 'chapters', 'are', 'too', 'obscure', 'to', 'be', 'classified', '(', 'for', 'example', 'the', 'first', 'chapter', ',', 'entitled', ',', \"'\", 'The', 'best', 'time', 'in', 'spring', 'is', 'dawn', ',', \"'\", 'is', 'generally', 'classified', 'into', 'the', 'chapters', 'of', 'Zuiso', ',', 'but', 'some', 'people', 'disagree', ')', '.']\n",
            "PRED 521: ただし 、 一部 の <unk> は 分類 さ れ な い （ 第 一 章 「 春 の <unk> 」 は <unk> の 章 に 分類 さ れ る が 、 一部 の <unk> は <unk> に 分類 さ れ る ） 。\n",
            "PRED SCORE: -31.5618\n",
            "\n",
            "[2021-08-14 10:38:13,484 INFO] \n",
            "SENT 522: ['It', 'was', 'written', 'in', 'the', 'plain', 'vernacular', 'using', 'Hiragana', '(', 'the', 'Japanese', 'cursive', 'syllabary', ')', ',', 'and', 'most', 'of', 'the', 'chapters', 'were', 'written', 'in', 'a', 'witty', 'style', ',', 'but', 'sometimes', 'sentimental', 'lamentation', 'appears', 'reflecting', 'the', 'fall', 'of', 'the', 'Michitaka', 'FUJIWARA', \"'s\", 'family', 'and', 'unhappiness', 'gone', 'through', 'by', 'her', 'majesty', 'Empress', 'Teishi', '.']\n",
            "PRED 522: <unk> を 使 っ た <unk> な <unk> で 書 か れ た もの が ほとんど で あ る が 、 藤原 <unk> の 滅亡 と <unk> 皇太后 の <unk> を 通 じ て <unk> <unk> が 現れ る こと も あ る 。\n",
            "PRED SCORE: -32.7066\n",
            "\n",
            "[2021-08-14 10:38:13,484 INFO] \n",
            "SENT 523: ['The', 'author', \"'s\", 'sophisticated', 'taste', 'was', 'in', 'harmony', 'with', 'a', 'keen', 'observation', 'on', 'things', ',', 'generating', 'the', 'intellectual', 'aesthetic', 'world', 'of', \"'\", 'wokashi', '(', 'amusing', 'or', 'delightful', ')', \"'\", 'in', 'contrast', 'with', 'the', 'emotional', \"'\", 'mono', 'no', 'aware', '(', 'pathos', ')', \"'\", 'of', '\"', 'The', 'Tale', 'of', 'Genji', '.', '\"']\n",
            "PRED 523: 『 源氏 物語 』 の 「 <unk> の <unk> 」 に 対 し て 、 「 <unk> 」 （ <unk> ・ <unk> ） と い う <unk> 的 な <unk> 意識 を 持 っ て い た 。\n",
            "PRED SCORE: -30.7886\n",
            "\n",
            "[2021-08-14 10:38:13,484 INFO] \n",
            "SENT 524: ['Positive', 'evaluation']\n",
            "PRED 524: 評価\n",
            "PRED SCORE: -1.2380\n",
            "\n",
            "[2021-08-14 10:38:13,484 INFO] \n",
            "SENT 525: ['In', 'The', 'Pillow', 'Book', ',', 'the', 'author', 'cherished', 'humanity', 'as', 'well', 'as', 'nature', ';', 'therefore', ',', 'she', 'accepted', 'and', 'formed', 'them', 'in', 'each', 'phase', 'as', 'various', 'beauties', '(', 'Sakuwo', 'MEKATA', ')', '.']\n",
            "PRED 525: <unk> に お い て も 、 <unk> と し て の 性格 を 持 つ 人物 と し て の 性格 を 持 っ て お り 、 様々 な <unk> （ <unk> ） と し て <unk> し て い た 。\n",
            "PRED SCORE: -34.0752\n",
            "\n",
            "[2021-08-14 10:38:13,485 INFO] \n",
            "SENT 526: ['Even', 'in', 'each', 'chapter', ',', 'various', 'types', 'of', 'rich', 'writing', 'such', 'as', 'lists', ',', 'essays', 'or', 'reminiscences', 'are', 'freely', 'interwoven', ',', 'like', 'a', 'flying', 'horse', 'soaring', 'into', 'the', 'sky', 'with', 'a', 'strand', 'of', 'associations', 'called', 'up', 'one', 'after', 'another', '.', '(', 'Boku', 'HAGITANI', ')']\n",
            "PRED 526: <unk> に お い て も 、 <unk> ・ <unk> ・ <unk> など の <unk> は 、 <unk> の よう に 空 に 飛来 する <unk> の よう に 、 次々 と 空 に 飛来 し て い る 。\n",
            "PRED SCORE: -39.3578\n",
            "\n",
            "[2021-08-14 10:38:13,485 INFO] \n",
            "SENT 527: ['Although', 'it', 'followed', 'the', 'conventional', \"'\", 'spring', '-', 'flower', '-morning', \"'\", 'type', 'of', 'link', 'that', 'was', 'often', 'seen', 'in', 'Kokinshu', 'in', 'those', 'days', ',', 'its', 'use', 'of', 'the', \"'\", 'season-time', \"'\", 'type', 'of', 'expression', '(', 'such', 'as', \"'\", 'the', 'best', 'time', 'in', 'spring', 'is', 'dawn', \"'\", ')', ',', 'which', 'omitted', 'the', 'middle', 'poetic', 'element', ',', 'was', 'innovative', ',', 'challenging', 'as', 'it', 'did', 'the', 'rigid', 'esthetic', 'values', 'held', 'by', 'readers', 'who', 'were', 'familiar', 'with', 'poetic', 'traditions', '.', '(', 'Munetoshi', 'FUJIMOTO', ')']\n",
            "PRED 527: 当時 の <unk> で よく 見 られ る 「 春 の 花 」 を <unk> と し て い た が 、 <unk> の 要素 を 省略 し た 「 <unk> 」 （ 「 春 の <unk> 」 など ） と い う 表現 （ 「 春 の <unk> 」 など ） を 用い る の は <unk> な もの で あ り 、 <unk> な もの で あ る 。\n",
            "PRED SCORE: -58.7558\n",
            "\n",
            "[2021-08-14 10:38:13,485 INFO] \n",
            "SENT 528: ['She', 'expressed', 'her', 'love', 'and', 'respect', 'for', 'Empress', 'Teishi', '.']\n",
            "PRED 528: <unk> 皇后 の <unk> と <unk> を 表 す 。\n",
            "PRED SCORE: -7.7289\n",
            "\n",
            "[2021-08-14 10:38:13,485 INFO] \n",
            "SENT 529: ['The', 'author', 'wrote', 'it', 'to', 'console', 'Empress', 'Teishi', ',', 'who', 'felt', 'depressed', 'over', 'the', 'fall', 'of', 'the', 'Michitaka', 'family', '.']\n",
            "PRED 529: <unk> 家 の 滅亡 を 憂慮 し た <unk> 皇太后 を <unk> し た 。\n",
            "PRED SCORE: -11.4315\n",
            "\n",
            "[2021-08-14 10:38:13,485 INFO] \n",
            "SENT 530: ['Therefore', ',', 'it', 'is', 'natural', 'that', 'she', 'didn', \"'t\", 'mention', 'the', 'fall', 'of', 'the', 'Michitaka', 'family', '(', 'as', 'above', ')', '.']\n",
            "PRED 530: その ため 、 <unk> 家 の 没落 を <unk> し な かっ た の で あ る 。\n",
            "PRED SCORE: -11.8918\n",
            "\n",
            "[2021-08-14 10:38:13,486 INFO] \n",
            "SENT 531: ['There', 'are', 'some', 'chapters', 'that', 'seem', 'like', 'mere', 'self-praise', ',', 'but', 'in', 'them', 'the', 'author', 'claimed', 'that', 'the', 'Empress', 'and', 'the', 'people', 'around', 'her', 'received', 'the', 'Emperor', \"'s\", 'favor', 'and', 'led', 'a', 'life', 'filled', 'with', 'aesthetic', 'sentiment', 'and', 'exquisite', 'taste', ',', 'living', 'in', 'a', 'world', 'that', 'was', 'cut', 'off', 'from', 'the', 'politics', 'of', 'the', 'time', 'and', 'disappointment', '.', '(', 'Osamu', 'UENO', ')', '.']\n",
            "PRED 531: また 、 <unk> の よう な もの も あ る が 、 天皇 の 寵愛 を 受け た 周囲 の 人々 が <unk> や <unk> を <unk> し 、 当時 の 政治 から <unk> さ れ た 世界 で 生活 し て い た こと を 物語 っ て い る 。\n",
            "PRED SCORE: -41.4199\n",
            "\n",
            "[2021-08-14 10:38:13,486 INFO] \n",
            "SENT 532: ['Negative', 'evaluation']\n",
            "PRED 532: 評価\n",
            "PRED SCORE: -1.2380\n",
            "\n",
            "[2021-08-14 10:38:13,486 INFO] \n",
            "SENT 533: ['It', 'is', 'a', 'representation', 'of', 'her', 'shallowness', 'trying', 'to', 'forget', 'her', 'original', 'social', 'rank', 'and', 'assimilate', 'herself', 'to', 'the', 'upper', 'class', '.', '(', 'Ken', 'AKIYAMA', ')']\n",
            "PRED 533: 本来 の 身分 を 忘れ る こと を 忘れ る ため の <unk> で あ り 、 上層 に <unk> し た （ <unk> ） 。\n",
            "PRED SCORE: -24.0959\n",
            "\n",
            "[2021-08-14 10:38:13,486 INFO] \n",
            "SENT 534: ['(', 'It', 'is', 'based', 'on', 'the', 'fact', 'that', 'she', 'didn', \"'t\", 'use', 'polite', 'expressions', 'when', 'she', 'wrote', ',', 'not', 'only', 'about', 'her', 'family', 'but', 'also', 'about', 'those', 'who', 'belonged', 'to', 'the', 'upper', 'classes', '.', ')']\n",
            "PRED 534: （ <unk> を 書 い た 場合 に は <unk> な 表現 で は な く 、 <unk> に 属 する 者 に つ い て も 同様 で あ る ） 。\n",
            "PRED SCORE: -25.7609\n",
            "\n",
            "[2021-08-14 10:38:13,487 INFO] \n",
            "SENT 535: ['It', 'is', 'only', \"'\", 'a', 'record', 'of', 'civilization', 'in', 'the', 'inner', 'palace', ',', \"'\", 'and', 'wasn', \"'t\", 'written', 'by', \"'\", 'a', 'private', 'individual', \"'\", '(', 'Joji', 'ISHIDA', ')', '.']\n",
            "PRED 535: 「 <unk> に おけ る 文明 の 記録 」 で あ り 、 「 <unk> 」 で は な い 。\n",
            "PRED SCORE: -13.8661\n",
            "\n",
            "[2021-08-14 10:38:13,487 INFO] \n",
            "SENT 536: ['Yoshinobu', '(', 'Yoshihisa', ')', 'TOKUGAWA', 'was', 'the', '15th', 'Seii', 'Taishogun', 'of', 'the', 'Edo', 'Shogunate', '(', 'held', 'the', 'position', 'from', 'December', '5', ',', '1866', 'to', 'December', '9', ',', '1867', ',', 'both', 'in', 'the', 'old', 'lunar', 'calendar', ')', '.']\n",
            "PRED 536: <unk> （ <unk> ） は 、 江戸 幕府 の 第 15 代 <unk> 大 将軍 （ <unk> 年 12 月 5 日 - <unk> 年 12 月 9 日 ） 。\n",
            "PRED SCORE: -11.4296\n",
            "\n",
            "[2021-08-14 10:38:13,487 INFO] \n",
            "SENT 537: ['He', 'was', 'the', 'only', 'Shogun', 'who', 'did', 'not', 'work', 'in', 'Edo-jo', 'Castle', '.']\n",
            "PRED 537: <unk> 城 に <unk> し な かっ た 唯一 の 将軍 で あ る 。\n",
            "PRED SCORE: -9.7059\n",
            "\n",
            "[2021-08-14 10:38:13,487 INFO] \n",
            "SENT 538: ['His', 'rank', 'awarded', 'by', 'the', 'Imperial', 'Court', 'was', 'Naidaijin', '(', 'Inner', 'Minister', ')', 'Ju-ichii', 'Kun-itto', 'Koshaku', '.']\n",
            "PRED 538: <unk> は <unk> 大臣 <unk> <unk> 。\n",
            "PRED SCORE: -4.7531\n",
            "\n",
            "[2021-08-14 10:38:13,488 INFO] \n",
            "SENT 539: ['He', 'was', 'a', 'member', 'of', 'the', 'House', 'of', 'Peers', 'of', 'Japan', '.']\n",
            "PRED 539: 日本 <unk> 院 議員 。\n",
            "PRED SCORE: -3.4417\n",
            "\n",
            "[2021-08-14 10:38:13,488 INFO] \n",
            "SENT 540: ['He', 'served', 'as', 'the', 'guardian', '(', 'Shogun', 'Kokenshoku', ')', 'of', 'the', '14th', 'Shogun', 'Iemochi', 'TOKUGAWA', ';', 'after', 'Iemochi', \"'s\", 'death', 'he', 'assumed', 'his', 'position', 'as', 'the', '15th', 'Shogun', 'of', 'the', 'Edo', 'Shogunate', '.']\n",
            "PRED 540: 14 代 将軍 徳川 <unk> の 後見 人 と な り 、 <unk> の 死後 に 江戸 幕府 15 代 将軍 に 就任 し た 。\n",
            "PRED SCORE: -10.5881\n",
            "\n",
            "[2021-08-14 10:38:14,340 INFO] \n",
            "SENT 541: ['After', 'he', 'returned', 'his', 'right', 'to', 'administer', 'government', 'to', 'Emperor', 'Meiji', '(', 'Taisei', 'Hokan', ')', ',', 'he', 'worked', 'aiming', 'to', 'unite', 'the', 'nobles', 'and', 'samurai', '(', 'Kobu', 'Gattai', ')', ';', 'however', ',', 'during', 'the', 'Battle', 'of', 'Toba-Fushimi', 'that', 'took', 'place', 'after', 'the', 'Restoration', 'of', 'Imperial', 'Rule', '(', 'Osei', 'Fukko', ')', ',', 'he', 'left', 'the', 'Shogunate', 'army', 'behind', 'at', 'Osaka-jo', 'Castle', 'and', 'returned', 'to', 'Edo-jo', 'Castle', ';', 'thereafter', ',', 'he', 'received', 'a', 'subjugation', 'order', 'from', 'the', 'Imperial', 'Court', 'and', 'entered', 'into', 'disciplinary', 'confinement', 'which', 'led', 'to', 'the', 'Bloodless', 'Surrender', 'of', 'Edo-jo', 'Castle', '.']\n",
            "PRED 541: 明治 天皇 （ <unk> <unk> ） に <unk> し た 後 は 、 公家 や 武士 （ <unk> <unk> ） の <unk> を 目指 し て い た が 、 <unk> 奉還 後 の <unk> の 戦い に お い て 幕府 軍 を <unk> し て 大坂 城 に <unk> し て <unk> 城 に <unk> し 、 <unk> 城 に <unk> し た 。\n",
            "PRED SCORE: -52.1304\n",
            "\n",
            "[2021-08-14 10:38:14,340 INFO] \n",
            "SENT 542: ['After', 'being', 'freed', 'from', 'the', 'disciplinary', 'confinement', ',', 'he', 'immersed', 'himself', 'in', 'his', 'hobbies', ';', 'he', 'was', 'awarded', 'the', 'title', 'of', 'Koshaku', 'and', 'lived', 'into', 'the', 'Taisho', 'Period', '.']\n",
            "PRED 542: <unk> を <unk> さ れ た 後 は <unk> に <unk> し 、 大正 時代 に <unk> を 与え られ た 。\n",
            "PRED SCORE: -18.2698\n",
            "\n",
            "[2021-08-14 10:38:14,340 INFO] \n",
            "SENT 543: ['The', 'name', '\"', 'Yoshinobu', '\"', 'is', 'also', 'popularly', 'read', 'as', '\"', 'Keiki', '\"', '(', 'Yusoku-yomi', ',', 'the', 'way', 'of', 'pronouncing', 'in', 'the', 'Chinese-derived', 'reading', ',', 'so', 'as', 'not', 'to', 'directly', 'pronounce', 'the', 'real', 'name', 'of', 'the', 'respectable', 'person', 'in', 'the', 'Japanese', 'reading', ')', '.']\n",
            "PRED 543: <unk> と も 。\n",
            "PRED SCORE: -5.0058\n",
            "\n",
            "[2021-08-14 10:38:14,341 INFO] \n",
            "SENT 544: ['There', 'is', 'a', 'record', 'among', 'official', 'documents', 'of', 'the', 'Edo', 'Shogunate', 'that', 'during', 'his', 'tenure', 'as', 'the', 'Shogun', 'his', 'name', 'was', 'also', 'read', 'as', '\"', 'Yoshihisa', '\"', '.']\n",
            "PRED 544: なお 、 江戸 幕府 の 公式 文書 の 中 に は 、 将軍 の 名 を 「 <unk> 」 と も 読 ん で い る 。\n",
            "PRED SCORE: -18.5533\n",
            "\n",
            "[2021-08-14 10:38:14,341 INFO] \n",
            "SENT 545: ['There', 'are', 'also', 'records', 'of', 'his', 'name', 'written', 'as', '\"', 'Yoshihisa', '\"', 'with', 'his', 'own', 'signature', 'using', 'Roman', 'letters', ',', 'and', '[', 'his', 'name', 'printed', 'as', '\"', 'Yoshihisa', '\"', ']', 'in', 'newspapers', 'in', 'English', '.']\n",
            "PRED 545: また 、 <unk> を 使 っ た <unk> で あ る 「 <unk> 」 と い う <unk> も あ り 、 英語 で は 「 <unk> 」 と 表記 し て い る 。\n",
            "PRED SCORE: -31.0741\n",
            "\n",
            "[2021-08-14 10:38:14,341 INFO] \n",
            "SENT 546: ['He', 'is', 'most', 'often', 'called', '\"', 'Yoshinobu', '\"', 'in', 'his', 'homeland', 'of', 'Mito', ',', 'but', 'he', 'is', 'often', 'called', '\"', 'Keiki', '\"', 'in', 'Shizuoka', ',', 'where', 'he', 'spent', 'the', 'rest', 'of', 'his', 'life', '.']\n",
            "PRED 546: <unk> の <unk> で 「 <unk> 」 と 呼 ば れ る こと が 多 い が 、 静岡 で は 「 <unk> 」 と 呼 ば れ る こと が 多 い 。\n",
            "PRED SCORE: -16.2433\n",
            "\n",
            "[2021-08-14 10:38:14,341 INFO] \n",
            "SENT 547: ['According', 'to', 'those', 'who', 'knew', 'him', 'in', 'his', 'lifetime', ',', 'Yoshinobu', 'himself', 'liked', 'to', 'be', 'called', '\"', 'Keiki-sama', '\"', ',', 'and', 'he', 'called', 'himself', '\"', 'Keiki', '\"', 'in', 'a', 'telegraph', 'sent', 'to', 'his', 'younger', 'brother', ',', 'Akitake', 'TOKUGAWA', '.']\n",
            "PRED 547: 生前 の こと を 知 っ た 者 に よ れ ば 、 <unk> 自身 は 「 <unk> 」 と 呼 ば れ 、 弟 の 徳川 <unk> に 対 し て 「 <unk> 」 を 名乗 っ た と い う 。\n",
            "PRED SCORE: -27.5964\n",
            "\n",
            "[2021-08-14 10:38:14,342 INFO] \n",
            "SENT 548: ['Yoshihisa', 'TOKUGAWA', ',', 'who', 'was', 'Yoshinobu', \"'s\", 'heir', ',', 'was', 'also', 'called', '\"', 'Keikyu-sama', '\"', 'from', 'those', 'around', 'him', '.']\n",
            "PRED 548: <unk> の <unk> で あ る 徳川 <unk> は 、 周囲 から 「 <unk> 」 と 呼 ば れ た 。\n",
            "PRED SCORE: -12.8449\n",
            "\n",
            "[2021-08-14 10:38:14,342 INFO] \n",
            "SENT 549: ['The', 'use', 'of', 'the', 'two', 'names', '\"', 'Keiki-sama', '\"', 'and', '\"', 'Keiki-san', '\"', 'has', 'been', 'confirmed', ',', 'and', 'even', 'though', 'it', 'seems', 'to', 'have', 'become', 'uncommon', 'in', 'the', 'modern', 'days', ',', 'the', 'use', 'of', '\"', 'Keiki-san', '\"', 'is', 'not', 'limited', 'to', 'Shizuoka', 'but', 'is', 'confirmed', 'in', 'various', 'regions', ';', 'in', 'both', 'cases', 'the', 'name', 'is', 'often', 'used', 'with', 'much', 'affection', '.']\n",
            "PRED 549: 「 <unk> 」 と 「 <unk> 」 の 2 つ の 呼称 が 確認 さ れ て い る が 、 現代 で は <unk> 化 し て い る よう で あ る が 、 「 <unk> 」 は 静岡 に 限 ら れ て い る わけ で は な く 、 各地 で <unk> さ れ る こと が 多 い 。\n",
            "PRED SCORE: -39.9256\n",
            "\n",
            "[2021-08-14 10:38:14,342 INFO] \n",
            "SENT 550: ['Though', 'Ryotaro', 'SHIBA', 'commented', 'that', '\"', 'the', 'name', \"'\", 'Keiki', \"'\", 'was', 'used', 'quite', 'often', 'among', 'those', 'associated', 'with', 'the', 'former', 'Shogunate', '\"', ',', 'the', 'use', 'of', 'the', 'name', '\"', 'Keiki', '\"', 'was', 'also', 'confirmed', 'among', 'those', 'related', 'to', 'Higo-han', 'Clan', 'who', 'worked', 'toward', 'the', 'fall', 'of', 'the', 'Shogunate', ';', 'there', 'is', 'a', 'possibility', 'that', 'he', 'was', 'widely', 'yet', 'secretly', 'respected', 'and', 'admired', '.']\n",
            "PRED 550: <unk> <unk> に よ れ ば 、 「 <unk> 」 と い う 呼称 は 、 旧 幕府 と の 関係 が 非常 に 多 く 見 られ る こと が 多 かっ た が 、 幕府 の 滅亡 に <unk> し た <unk> <unk> と の 関連 性 も あ り 、 広 く <unk> さ れ て い た 可能 性 が あ る 。\n",
            "PRED SCORE: -54.5319\n",
            "\n",
            "[2021-08-14 10:38:14,342 INFO] \n",
            "SENT 551: ['He', 'was', 'born', 'at', 'the', 'Mito-han', 'Clan', 'residence', 'of', 'Koishikawa', 'in', 'Edo', ',', 'as', 'the', 'seventh', 'son', 'of', 'the', 'ninth', 'chief', '[', 'of', 'Mito-han', 'Clan', ']', ',', 'Nariaki', 'TOKUGAWA', 'on', 'September', '29', ',', '1837', '.']\n",
            "PRED 551: <unk> 年 9 月 29 日 、 江戸 の <unk> <unk> <unk> の 第 9 王子 ・ 徳川 <unk> の 七男 と し て 生まれ る 。\n",
            "PRED SCORE: -18.5408\n",
            "\n",
            "[2021-08-14 10:38:14,343 INFO] \n",
            "SENT 552: ['His', 'mother', 'was', '[', 'his', 'father', \"'s\", ']', 'legitimate', 'wife', ',', 'Princess', 'Yoshiko', '(', 'he', 'was', 'the', 'first', 'Shogun', 'since', 'the', 'third', 'Shogun', 'Iemitsu', 'TOKUGAWA', 'whose', 'biological', 'mother', 'was', 'the', 'father', \"'s\", 'legitimate', 'wife', '.']\n",
            "PRED 552: 母 は 父 の 正室 で あ る <unk> <unk> （ 3 代 将軍 徳川 家光 の 正室 で あ る 3 代 将軍 徳川 家光 以来 の 第 1 代 将軍 で あ る 。\n",
            "PRED SCORE: -23.0347\n",
            "\n",
            "[2021-08-14 10:38:14,343 INFO] \n",
            "SENT 553: ['However', ',', 'although', 'Iemitsu', \"'s\", 'biological', 'mother', 'is', 'officially', 'known', 'as', 'the', 'father', 'Hidetada', \"'s\", 'legitimate', 'wife', ',', 'Ogo', 'no', 'Kata', ',', 'but', 'one', 'theory', 'suggests', 'that', 'his', 'biological', 'mother', 'was', 'Kasuga', 'no', 'Tsubone', ')', '.']\n",
            "PRED 553: しかし 、 家光 の 生母 は 正式 に は 父 ・ 秀忠 の 正室 ・ <unk> <unk> で あ る が 、 母 は 春日 局 と する 説 も あ る 。\n",
            "PRED SCORE: -19.6561\n",
            "\n",
            "[2021-08-14 10:38:14,343 INFO] \n",
            "SENT 554: ['His', 'childhood', 'name', 'was', 'Shichiromaro', '.']\n",
            "PRED 554: 幼名 は <unk> 。\n",
            "PRED SCORE: -2.3851\n",
            "\n",
            "[2021-08-14 10:38:14,343 INFO] \n",
            "SENT 555: ['Based', 'on', 'Nariaki', \"'s\", 'educational', 'policy', ',', '\"', 'a', 'boy', 'should', 'be', 'educated', 'in', 'his', 'home', 'domain', '\"', 'Yoshinobu', 'moved', 'to', 'Mito', 'at', 'the', 'age', 'of', 'seven', 'months', 'and', 'spent', 'most', 'of', 'his', 'time', 'there', 'until', 'he', 'succeeded', 'to', 'the', 'Hitotsubashi', 'Tokugawa', 'Family', ',', 'during', 'which', 'time', 'he', 'was', 'educated', 'and', 'taught', 'martial', 'arts', 'by', 'Seishisai', 'AIZAWA', '.']\n",
            "PRED 555: <unk> の <unk> 方針 に よ り 、 <unk> は 7 <unk> で <unk> に 教育 を 受け る こと と な り 、 <unk> 徳川 家 を 継 ぐ まで の 間 、 <unk> を 教育 し て <unk> を 教え た 。\n",
            "PRED SCORE: -41.5718\n",
            "\n",
            "[2021-08-14 10:38:14,344 INFO] \n",
            "SENT 556: ['Yoshinobu', \"'s\", 'intelligence', 'was', 'noted', 'early', ';', 'at', 'first', ',', 'instead', 'of', 'sending', 'him', 'to', 'another', 'family', 'for', 'adoption', ',', 'Nariaki', 'planned', 'to', 'keep', 'him', 'by', 'his', 'eldest', 'son', 'and', 'heir', ',', 'Yoshiatsu', 'TOKUGAWA', \"'s\", 'side', '.']\n",
            "PRED 556: <unk> の <unk> は 、 当初 は <unk> に 対 し て <unk> を <unk> さ ず 、 嫡男 で あ る 徳川 <unk> 側 に <unk> し た 。\n",
            "PRED SCORE: -28.5703\n",
            "\n",
            "[2021-08-14 10:38:14,344 INFO] \n",
            "SENT 557: ['On', 'August', '1', ',', '1847', ',', 'the', 'Shogunate', 'gave', 'a', 'secret', 'order', 'to', 'designate', 'Shichiromaro', 'of', 'Mito-han', 'Clan', 'as', 'the', 'heir', 'to', 'the', 'Hitotsubashi', 'Family', ',', 'one', 'of', 'the', 'three', 'branches', 'of', 'the', 'Tokugawa-han', 'Clan', '(', 'Gosankyo', ')', '.']\n",
            "PRED 557: <unk> 2 年 （ <unk> 年 ） 8 月 1 日 、 幕府 は <unk> 藩 三 <unk> の 一 つ で あ る <unk> 家 に 対 し 、 <unk> <unk> の <unk> を <unk> し た 。\n",
            "PRED SCORE: -24.1859\n",
            "\n",
            "[2021-08-14 10:38:14,344 INFO] \n",
            "SENT 558: ['Accepting', 'this', 'order', ',', 'Shichiromaro', 'succeeded', 'to', 'the', 'Hitotsubashi', 'Family', 'on', 'September', '1', ';', 'in', 'December', ',', 'he', 'received', 'Henki', '(', 'one', 'character', 'of', 'Shogun', \"'s\", 'name', ':', '慶', ')', 'from', 'the', '12th', 'Shogun', 'Ieyoshi', '(', '家慶', ')', 'TOKUGAWA', 'and', 'changed', 'his', 'name', 'to', 'Yoshinobu', '(', '慶喜', ')', '.']\n",
            "PRED 558: これ に 対 し て <unk> は 9 月 1 日 に <unk> 家 を 相続 し 、 12 代 将軍 徳川 <unk> から <unk> を 受け て <unk> と 改名 し た 。\n",
            "PRED SCORE: -16.5567\n",
            "\n",
            "[2021-08-14 10:38:14,344 INFO] \n",
            "SENT 559: ['Considering', 'Yoshinobu', 'as', 'a', 'strong', 'candidate', 'as', 'the', 'heir', 'to', 'the', 'Shogun', ',', 'Ieyoshi', 'visited', 'the', 'Hitotsubashi', 'Residence', 'often', ',', 'but', 'he', 'abandoned', 'this', 'idea', 'after', 'accepting', 'Roju', 'Masahiro', 'ABE', \"'s\", 'admonishing', 'advice', '.']\n",
            "PRED 559: <unk> は 将軍 へ の <unk> と し て の 強 い <unk> を 見 る と 、 しばしば <unk> <unk> に <unk> し た が 、 <unk> <unk> の 進言 に よ り これ を <unk> し た 。\n",
            "PRED SCORE: -26.9889\n",
            "\n",
            "[2021-08-14 10:38:14,345 INFO] \n",
            "SENT 560: ['During', 'the', 'disorder', 'caused', 'by', 'the', 'Arrival', 'of', 'the', 'Black', 'Ships', ',', 'Shogun', 'Ieyoshi', 'died', 'in', '1853', ';', 'his', 'heir', ',', 'the', '13th', 'Shogun', 'Iesada', 'TOKUGAWA', ',', 'had', 'poor', 'health', 'with', 'no', 'prospect', 'of', 'having', 'his', 'own', 'son', ',', 'and', 'therefore', 'the', 'issue', 'of', '\"', 'who', 'would', 'become', 'the', 'Shogun', \"'s\", 'heir', '\"', 'arose', '(', 'Issue', 'of', 'Shogun', \"'s\", 'Heir', ')', '.']\n",
            "PRED 560: <unk> 藩 の <unk> に よ る <unk> の 際 に は 将軍 <unk> が <unk> し 、 嫡男 の 徳川 <unk> が 実子 を 持 た ず に <unk> し た ため 、 「 将軍 <unk> 問題 」 が 起こ っ た 。\n",
            "PRED SCORE: -33.4602\n",
            "\n",
            "[2021-08-14 10:38:14,345 INFO] \n",
            "SENT 561: ['There', 'was', 'an', 'opposition', 'between', 'the', 'Hitotsubashi-party', 'that', 'included', 'Nariaki', ',', 'Masahiro', 'ABE', 'and', 'the', 'Chief', 'of', 'Satsuma-han', 'Clan', ',', 'Nariakira', 'SHIMAZU', ',', 'who', 'recommended', 'Yoshinobu', ',', 'and', 'the', 'Nanki-party', 'primarily', 'consisting', 'of', 'the', 'Chief', 'of', 'Hikone-han', 'Clan', ',', 'Naosuke', 'II', ',', 'and', 'the', 'Ooku', 'members', 'headed', 'by', 'Iesada', \"'s\", 'birth-mother', ',', 'Honjuin', ',', 'who', 'recommended', 'the', 'Chief', 'of', 'Kii-han', 'Clan', ',', 'Yoshitomi', 'TOKUGAWA', '.']\n",
            "PRED 561: <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ら の 反対 意見 が あ り 、 <unk> の <unk> で あ る <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> ら が <unk> し た 。\n",
            "PRED SCORE: -41.9603\n",
            "\n",
            "[2021-08-14 10:38:14,345 INFO] \n",
            "SENT 562: ['The', 'Hitotsubashi-party', 'executed', 'political', 'maneuvers', 'such', 'as', 'sending', 'into', 'Ooku', 'Nariakira', 'SHIMAZU', \"'s\", 'adopted', 'daughter', ',', 'Tenshoin', ',', 'as', 'Shogun', \"'s\", 'wife', '(', 'Midaidokoro', ')', ',', 'but', 'after', 'the', 'death', 'of', 'Masahiro', 'ABE', 'and', 'Nariakira', 'SHIMAZU', ',', 'its', 'power', 'weakened', ';', 'Naosuke', 'II', 'who', 'became', 'Tairo', 'in', '1858', 'settled', 'on', '\"', 'Shogun', \"'s\", 'heir', 'as', 'Yoshitomi', 'TOKUGAWA', '\"', 'through', 'arbitration', '.']\n",
            "PRED 562: <unk> は <unk> <unk> の 養女 で あ る <unk> <unk> の 養女 で あ る <unk> <unk> （ <unk> <unk> ） を 将軍 の 正室 と し て <unk> し た が 、 <unk> <unk> ・ <unk> <unk> の 死後 、 <unk> 年 に <unk> と な っ た <unk> <unk> が 将軍 <unk> を 通 じ て <unk> に <unk> し た 。\n",
            "PRED SCORE: -43.2876\n",
            "\n",
            "[2021-08-14 10:38:14,345 INFO] \n",
            "SENT 563: ['In', 'the', 'same', 'year', ',', 'Naosuke', 'II', 'signed', 'the', 'Treaty', 'of', 'Amity', 'and', 'Commerce', 'between', 'the', 'United', 'States', 'and', 'Japan', 'without', 'the', 'Emperor', \"'s\", 'permission', '.']\n",
            "PRED 563: 同年 、 <unk> <unk> は 天皇 の 許可 な く <unk> <unk> と <unk> <unk> 条約 を 締結 し た 。\n",
            "PRED SCORE: -13.9438\n",
            "\n",
            "[2021-08-14 10:38:14,346 INFO] \n",
            "SENT 564: ['Yoshinobu', ',', 'along', 'with', 'Nariaki', 'and', 'the', 'Chief', 'of', 'Fukui-han', 'Clan', ',', 'Yoshinaga', 'MATSUDAIRA', ',', 'made', 'an', 'unexpected', 'visit', 'to', 'the', '[', 'Edo-jo', ']', 'castle', 'and', 'closely', 'interrogated', 'Naosuke', ',', 'but', 'in', 'tern', ',', 'he', 'was', 'questioned', 'on', 'his', 'offense', 'of', 'making', 'an', 'unexpected', 'visit', 'to', 'the', 'castle', ';', 'he', 'was', 'ordered', 'to', 'retire', 'and', 'was', 'given', 'a', 'disciplinary', 'confinement', 'in', 'the', 'following', 'year', '(', '1859', ')', '(', 'Ansei', 'Purge', ')', '.']\n",
            "PRED 564: その 後 、 <unk> と <unk> <unk> の 筆頭 で あ る <unk> <unk> と とも に <unk> <unk> の <unk> に <unk> し た が 、 <unk> 2 年 （ <unk> 年 ） に は <unk> <unk> の <unk> に よ り <unk> さ れ 、 翌年 に は 隠居 を 命 じ られ た 。\n",
            "PRED SCORE: -48.0397\n",
            "\n",
            "[2021-08-14 10:38:14,346 INFO] \n",
            "SENT 565: ['Yoshinobu', 'himself', 'seemed', 'to', 'be', 'uninterested', 'in', 'becoming', 'the', 'heir', 'to', 'the', 'Shogun', 'and', 'he', 'sent', 'a', 'letter', 'to', 'Nariaki', 'whose', 'content', 'indicated', '\"', 'I', 'appreciate', 'your', 'efforts', 'but', 'I', \"'d\", 'rather', 'not', 'become', 'the', 'Shogun', 'than', 'to', 'make', 'mistakes', 'after', 'becoming', 'the', 'Shogun', '.', '\"']\n",
            "PRED 565: <unk> 自身 も 将軍 の <unk> と な っ て い た よう で あ り 、 <unk> に 対 し て は 「 <unk> の <unk> に よ っ て 将軍 に な ら な い 」 と い う <unk> を 出 し た 。\n",
            "PRED SCORE: -43.0154\n",
            "\n",
            "[2021-08-14 10:38:14,346 INFO] \n",
            "SENT 566: ['He', 'was', 'relieved', 'from', 'his', 'disciplinary', 'confinement', 'in', '1860', '.']\n",
            "PRED 566: <unk> 年 に <unk> 処分 を 解 か れ る 。\n",
            "PRED SCORE: -7.3253\n",
            "\n",
            "[2021-08-14 10:38:14,346 INFO] \n",
            "SENT 567: ['In', '1862', ',', 'guarded', 'by', 'the', 'Satsuma-han', 'Clan', 'army', 'under', 'the', 'command', 'of', 'Hisamitsu', 'SHIMAZU', ',', 'the', 'Emperor', \"'s\", 'messenger', ',', 'Shigetomi', 'OHARA', ',', 'entered', 'Edo', 'and', 'delivered', 'Emperor', 'Komei', \"'s\", 'order', 'to', '\"', 'promote', 'Yoshinobu', 'TOKUGAWA', 'to', 'the', 'Shogun', \"'s\", 'guardian', '(', 'Shogun', 'Kokenshoku', ')', 'and', 'Shungaku', '(', 'Yoshinaga', ')', 'MATSUDAIRA', 'to', 'Tairo', '.', '\"']\n",
            "PRED 567: <unk> 2 年 （ <unk> 年 ） 、 天皇 の 使者 で あ る <unk> <unk> の <unk> に よ っ て <unk> 軍 の <unk> が 江戸 に 入 り 、 <unk> 天皇 の 命 に よ り 、 <unk> 天皇 は <unk> の 後見 人 で あ る 徳川 <unk> （ 将軍 <unk> ） と 松平 <unk> （ 松平 <unk> ） へ の <unk> を <unk> し た 。\n",
            "PRED SCORE: -52.8283\n",
            "\n",
            "[2021-08-14 10:38:14,360 INFO] \n",
            "SENT 568: ['On', 'July', '6', ',', 'the', 'Shogunate', 'ordered', 'Yoshinobu', 'to', 'be', 'the', 'Shogun', \"'s\", 'guardian', '(', 'Shogun', 'Kokenshoku', ')', 'and', 'Shungaku', 'to', 'be', 'the', 'Shogunal', 'Prime', 'Minister', '(', 'Seiji', 'Sosaishoku', ')', '.']\n",
            "PRED 568: 7 月 6 日 、 幕府 は <unk> を 将軍 の 後見 人 （ 将軍 <unk> ） と し 、 <unk> は <unk> <unk> （ <unk> <unk> ） と し た 。\n",
            "PRED SCORE: -18.4175\n",
            "\n",
            "[2021-08-14 10:38:14,360 INFO] \n",
            "SENT 569: ['Yoshinobu', 'and', 'Shungaku', 'directed', 'a', 'reform', 'of', 'the', 'Shogunate', 'known', 'as', 'the', 'Bunkyu', 'Reform', 'that', 'included', 'installation', 'of', 'The', 'Office', 'of', 'Kyoto', 'Protector', '(', 'Kyoto', 'Shugoshoku', ')', 'and', 'relaxation', 'of', 'Sankin', 'Kotai', 'requirement', '.']\n",
            "PRED 569: <unk> と <unk> は 、 京都 守護 職 の 設置 や <unk> <unk> <unk> の <unk> など 、 幕府 の 改革 を <unk> し た 。\n",
            "PRED SCORE: -21.9894\n",
            "\n",
            "[2021-08-14 10:38:14,361 INFO] \n",
            "SENT 570: ['In', '1863', ',', 'he', 'went', 'to', 'Kyoto', 'as', 'Iemochi', 'TOKUGAWA', \"'s\", 'harbinger', ',', 'and', 'he', 'endeavored', 'to', 'negotiate', 'with', 'the', 'members', 'of', 'the', 'Imperial', 'Court', 'who', 'urged', 'the', 'execution', 'of', 'Joi', '(', 'expulsion', 'of', 'foreigners', 'from', 'Japan', ')', '.']\n",
            "PRED 570: <unk> 2 年 （ <unk> 年 ） 徳川 <unk> の <unk> と し て 上洛 し 、 <unk> <unk> を <unk> し た 朝廷 と の 交渉 に 尽力 し た 。\n",
            "PRED SCORE: -17.3784\n",
            "\n",
            "[2021-08-14 10:38:15,093 INFO] \n",
            "SENT 571: ['Upon', 'Emperor', 'Komei', \"'s\", 'visit', 'to', 'Iwashimizu', 'Hachiman-gu', 'Shrine', 'to', 'pray', 'for', 'the', 'execution', 'of', 'Joi', ',', 'if', 'Iemochi', 'received', 'Setto', '(', 'Emperor', \"'s\", 'sword', 'that', 'symbolically', 'authorizes', 'the', 'Shogun', 'to', 'take', 'charge', 'of', 'the', 'upcoming', 'battle', 'on', 'behalf', 'of', 'the', 'Emperor', ')', 'from', 'the', 'Emperor', ',', 'he', 'would', 'have', 'no', 'choice', 'but', 'to', 'execute', 'Joi', ';', 'Yoshinobu', 'quickly', 'made', 'Iemochi', 'cancel', 'the', 'audience', '[', 'with', 'the', 'Emperor', ']', 'by', 'saying', 'that', 'Iemochi', 'had', 'a', 'cold', 'and', 'a', 'fever', '(', 'pretended', 'illness', ')', '.']\n",
            "PRED 571: <unk> 天皇 が <unk> 神宮 に 参拝 し て <unk> の <unk> を 祈願 し た 際 、 天皇 から <unk> を 受け た 場合 に は <unk> は <unk> せ ず 、 <unk> は <unk> を <unk> し て <unk> を <unk> し た 。\n",
            "PRED SCORE: -40.5517\n",
            "\n",
            "[2021-08-14 10:38:15,094 INFO] \n",
            "SENT 572: ['When', 'the', 'Sonno', 'Joi', 'party', '(', 'the', 'anti-foreigner', 'Royalists', ')', 'centered', 'around', 'the', 'Choshu-han', 'Clan', 'lost', 'their', 'case', 'upon', 'the', 'political', 'change', 'on', 'August', '18', ',', 'Yoshinobu', 'went', 'to', 'Kyoto', 'again', 'in', 'order', 'to', 'participate', 'in', 'a', 'meeting', 'jointly', 'held', 'by', 'the', 'party', 'trying', 'to', 'unite', 'the', 'nobles', 'and', 'samurai', '(', 'Kobu', 'Gattai', ')', 'and', 'the', 'party', 'assisting', 'the', 'Shogunate', '(', 'Sabaku', ')', '.']\n",
            "PRED 572: 8 月 18 日 の 政変 に よ っ て <unk> 藩 を 中心 と し た <unk> <unk> （ <unk> <unk> ） が <unk> し た 際 に は 、 <unk> ら が <unk> し た <unk> と 武士 （ <unk> ） を <unk> し て <unk> に 参加 する ため に 再び 京 へ 赴 い た 。\n",
            "PRED SCORE: -44.3240\n",
            "\n",
            "[2021-08-14 10:38:15,094 INFO] \n",
            "SENT 573: ['However', ',', 'when', 'no', 'agreement', 'was', 'reached', ',', 'he', 'used', 'a', 'bold', 'method', 'of', 'negotiation', ';', 'he', 'intentionally', 'got', 'drunk', 'at', 'a', 'banquet', 'with', 'Prince', 'Kuni', 'Asahiko', 'and', 'reviled', 'at', 'Munenari', 'DATE', ',', 'Shungaku', 'MATSUDAIRA', 'and', 'Hisamitsu', 'SHIMAZU', ',', 'and', 'furthermore', ',', 'violently', 'said', 'to', 'Nakagawa', 'no', 'Miya', ',', '\"', 'how', 'much', 'is', 'SHIMAZU', 'paying', 'you', '!', '\"', 'so', 'as', 'to', 'breakdown', 'their', 'organization', '.']\n",
            "PRED 573: しかし 、 合意 が 進 ま な い とき は 、 <unk> 親王 や <unk> <unk> 、 <unk> <unk> 、 <unk> <unk> 、 <unk> <unk> など の <unk> で <unk> を 飲 ん で い た の で 、 <unk> は <unk> の 組織 を <unk> する ため に <unk> を <unk> し た 。\n",
            "PRED SCORE: -51.8139\n",
            "\n",
            "[2021-08-14 10:38:15,094 INFO] \n",
            "SENT 574: ['Thereafter', ',', 'he', 'remained', 'in', 'Kyoto', 'and', 'he', 'was', 'appointed', 'to', 'Kinri', 'Goshuei', 'Sotoku', '(', 'Head', 'of', 'the', 'Imperial', 'Palace', '/', 'Emperor', \"'s\", 'Protector', ')', ';', 'together', 'with', 'the', 'Protector', '(', 'Shugoshoku', ')', 'Katamori', 'MATSUDAIRA', '(', 'Aizu-han', 'Clan', ')', 'and', 'Kyoto', 'Shoshidai', 'Sadaaki', 'MATSUDAIRA', '(', 'Chief', 'of', 'Kuwana-han', 'Clan', ')', 'regulated', 'the', 'nobles', 'and', 'those', 'loyal', 'to', 'the', 'Emperor', '(', 'Ichi-Kai-So', '(', 'Hitotsubashi-Aizu-Kuwana', ')', 'structure', ')', '.']\n",
            "PRED 574: その 後 も 京 に 留ま り 、 <unk> <unk> <unk> に 任 じ られ 、 <unk> <unk> （ <unk> <unk> ） や 京都 所司 代 松平 <unk> （ <unk> <unk> ） ら と とも に 貴族 や 天皇 に <unk> し た （ <unk> <unk> ） 。\n",
            "PRED SCORE: -31.3077\n",
            "\n",
            "[2021-08-14 10:38:15,094 INFO] \n",
            "SENT 575: ['During', 'the', 'Tenguto', 'War', 'he', 'showed', 'his', 'cruelty', 'by', 'slashing', 'his', 'supporters', 'such', 'as', 'Kounsai', 'TAKEDA', 'and', 'the', 'vassals', 'of', 'his', 'home', 'domain', 'of', 'Mito', '.']\n",
            "PRED 575: <unk> の 乱 で は 武田 <unk> や <unk> 藩 家臣 ら を <unk> し て <unk> を 示 し た 。\n",
            "PRED SCORE: -14.2008\n",
            "\n",
            "[2021-08-14 10:38:15,095 INFO] \n",
            "SENT 576: ['At', 'the', 'Kinmon', 'Rebellion', 'in', '1864', 'he', 'led', 'the', 'Shogunate', 'army', 'and', 'he', 'himself', 'attacked', 'the', 'Choshu', 'army', 'that', 'had', 'occupied', 'the', 'Takatsukasa', 'Residence', '.']\n",
            "PRED 576: <unk> 年 の <unk> の 乱 で は 幕府 軍 を 率い て <unk> し 、 <unk> 軍 を 攻め た 。\n",
            "PRED SCORE: -13.5476\n",
            "\n",
            "[2021-08-14 10:38:15,095 INFO] \n",
            "SENT 577: ['After', 'the', 'First', 'Subjugation', 'of', 'Choshu', 'that', 'followed', ',', 'he', 'made', 'every', 'effort', 'to', 'secure', 'the', 'Emperor', \"'s\", 'permission', 'on', 'the', 'Treaty', 'of', 'Amity', 'and', 'Commerce', 'between', 'the', 'Unites', 'States', 'and', 'Japan', 'that', 'had', 'been', 'left', 'unauthorized', 'by', 'the', 'Emperor', ';', 'he', 'succeeded', 'in', 'securing', 'the', 'Emperor', \"'s\", 'authorization', 'albeit', 'with', 'provisos', '.']\n",
            "PRED 577: これ に 従 っ た <unk> の 第 一 次 <unk> <unk> 以降 、 天皇 の <unk> に よ っ て <unk> さ れ た <unk> 国 と 日本 国 の 間 で 天皇 の 許可 を <unk> し 、 <unk> と の 交渉 に 成功 し た 。\n",
            "PRED SCORE: -39.1863\n",
            "\n",
            "[2021-08-14 10:38:15,095 INFO] \n",
            "SENT 578: ['At', 'the', 'Second', 'Subjugation', 'of', 'Choshu', 'in', '1866', ',', 'Yoshinobu', 'suppressed', 'interferences', 'from', 'Satsuma-han', 'Clan', 'and', 'received', 'a', 'direct', 'order', 'from', 'the', 'Emperor', 'to', 'subjugate', 'Choshu', '.']\n",
            "PRED 578: <unk> 2 年 （ <unk> 年 ） の 第 2 次 <unk> <unk> で は <unk> <unk> の <unk> を <unk> し 、 天皇 から <unk> <unk> へ の <unk> を 受け た 。\n",
            "PRED SCORE: -19.9148\n",
            "\n",
            "[2021-08-14 10:38:15,095 INFO] \n",
            "SENT 579: ['However', ',', 'because', 'of', 'the', 'Satsuma-Choshu', 'Alliance', '(', 'Saccho', 'Alliance', ')', ',', 'Satsuma-han', 'Clan', 'refused', 'to', 'send', 'its', 'army', 'and', 'consequently', 'the', 'Shogunate', 'army', 'had', 'to', 'retreat', '.']\n",
            "PRED 579: しかし 、 <unk> <unk> に よ り <unk> <unk> は <unk> を 拒否 し 、 幕府 軍 は <unk> し た 。\n",
            "PRED SCORE: -14.1117\n",
            "\n",
            "[2021-08-14 10:38:15,096 INFO] \n",
            "SENT 580: ['During', 'the', 'Second', 'Subjugation', 'of', 'Choshu', ',', 'Shogun', 'Iemochi', 'passed', 'away', 'at', 'Osaka-jo', 'Castle', 'on', 'July', '20', '.']\n",
            "PRED 580: <unk> 2 年 （ <unk> 年 ） の 第 2 次 <unk> の 際 、 7 月 20 日 に 将軍 <unk> が 大坂 城 で <unk> し た 。\n",
            "PRED SCORE: -15.6598\n",
            "\n",
            "[2021-08-14 10:38:15,096 INFO] \n",
            "SENT 581: ['Yoshinobu', 'appealed', 'to', 'the', 'Imperial', 'Court', 'to', 'make', 'an', 'official', 'announcement', 'of', 'truce', 'by', 'the', 'Emperor', 'and', 'he', 'succeeded', 'in', 'concluding', 'an', 'armistice', 'treaty', '.']\n",
            "PRED 581: <unk> は 朝廷 に <unk> し て <unk> の <unk> を <unk> し 、 <unk> 条約 を 締結 し た 。\n",
            "PRED SCORE: -17.7203\n",
            "\n",
            "[2021-08-14 10:38:15,096 INFO] \n",
            "SENT 582: ['He', 'was', 'recommended', 'to', 'be', 'Iemochi', \"'s\", 'successor', 'but', 'Yoshinobu', 'firmly', 'declined', '.']\n",
            "PRED 582: <unk> の 後継 者 に 推挙 さ れ る が 、 <unk> は <unk> し た 。\n",
            "PRED SCORE: -9.9562\n",
            "\n",
            "[2021-08-14 10:38:15,096 INFO] \n",
            "SENT 583: ['He', 'succeeded', 'to', 'the', 'Tokugawa', 'Shogun', 'Family', 'on', 'Aug', '.', '20', 'but', 'he', 'continued', 'to', 'refuse', 'to', 'assume', 'his', 'position', 'as', 'the', 'Shogun', '.']\n",
            "PRED 583: <unk> 20 名 で 徳川 将軍 家 を 相続 し た が 、 <unk> を 将軍 と し て <unk> し た 。\n",
            "PRED SCORE: -16.7207\n",
            "\n",
            "[2021-08-14 10:38:15,097 INFO] \n",
            "SENT 584: ['Since', 'then', 'the', 'roju', '(', 'Shogun', \"'s\", 'political', 'advisor', ')', 'and', 'others', 'sincerely', 'requested', 'him', 'to', 'become', 'the', 'Shogun', ',', 'but', 'he', 'still', 'did', 'not', 'accept', 'the', 'request', ';', 'he', 'finally', 'assumed', 'his', 'position', 'as', 'the', 'Shogun', 'on', 'December', '5', ',', 'after', 'accepting', '(', 'Emperor', 'Komei', \"'s\", ')', 'direct', 'order', 'to', 'become', 'the', 'Shogun', '.']\n",
            "PRED 584: その 後 、 <unk> ら は 将軍 に 就任 を 要請 し た が 、 <unk> は これ を 認め ず 、 12 月 5 日 、 <unk> （ <unk> 天皇 ） の <unk> を 受け て 将軍 に 就任 し た 。\n",
            "PRED SCORE: -28.5306\n",
            "\n",
            "[2021-08-14 10:38:15,097 INFO] \n",
            "SENT 585: ['By', 'becoming', 'the', 'Shogun', 'as', 'a', 'favor', 'to', 'others', 'he', 'aimed', 'to', 'manipulate', 'politics', 'to', 'his', 'advantage', '.']\n",
            "PRED 585: 将軍 へ の <unk> と し て の <unk> に よ り 、 <unk> 政治 を <unk> し よ う と し た 。\n",
            "PRED SCORE: -18.4446\n",
            "\n",
            "[2021-08-14 10:38:15,097 INFO] \n",
            "SENT 586: ['Through', 'the', 'French', 'Minister', 'Leon', 'Roches', ',', 'he', 'received', '2.4', 'million', 'dollars', 'from', 'France', 'and', 'founded', 'Yokosuka', 'Ironworks', ',', 'a', 'shipyard', ',', 'and', 'a', 'ship', 'repair', 'dock', ',', 'and', 'he', 'also', 'led', 'a', 'revolution', 'in', 'the', 'military', 'system', 'by', 'inviting', 'a', 'group', 'of', 'military', 'advisors', 'headed', 'by', 'Jules', 'Brunet', '.']\n",
            "PRED 586: <unk> <unk> 大臣 の <unk> を 経 て 、 <unk> から 約 <unk> 万 <unk> の <unk> を 受け 、 <unk> ・ <unk> ・ <unk> <unk> を 設立 し 、 <unk> <unk> の <unk> を 招 い た 。\n",
            "PRED SCORE: -36.8019\n",
            "\n",
            "[2021-08-14 10:38:15,097 INFO] \n",
            "SENT 587: ['He', 'also', 'sent', 'his', 'biological', 'younger', 'brother', ',', 'Akitake', 'TOKUGAWA', ',', 'to', 'the', 'Paris', 'Exposition', 'and', 'encouraged', 'the', 'younger', 'members', 'of', 'the', 'Shogunate', 'vassals', 'to', 'study', 'in', 'Europe', '.']\n",
            "PRED 587: また 、 <unk> の 弟 の 徳川 <unk> を <unk> 藩 に 派遣 し て <unk> の <unk> を <unk> し た 。\n",
            "PRED SCORE: -17.1474\n",
            "\n",
            "[2021-08-14 10:38:15,098 INFO] \n",
            "SENT 588: ['On', 'the', 'matter', 'of', 'opening', 'of', 'port', 'of', 'Hyogo', ',', 'he', 'tenaciously', 'persuaded', 'the', 'Imperial', 'Court', 'and', 'obtained', 'the', 'Emperor', \"'s\", 'permission', '.']\n",
            "PRED 588: 兵庫 <unk> の <unk> で 朝廷 に <unk> し 、 天皇 の 許可 を 得 た 。\n",
            "PRED SCORE: -11.1757\n",
            "\n",
            "[2021-08-14 10:38:15,098 INFO] \n",
            "SENT 589: ['Yoshinobu', 'anticipated', 'a', 'secret', 'order', 'to', 'Saccho', '(', 'Satsuma', 'and', 'Choshu', '-han', 'Clans', ')', 'from', 'the', 'Emperor', 'to', 'destroy', 'the', 'Shogunate', ',', 'and', 'on', 'Oct', '.', '14', ',', '1867', ',', 'he', '(', 'as', 'a', 'preemptive', 'measure', ')', 'suggested', 'to', 'the', 'Imperial', 'Court', 'that', 'he', 'would', 'return', 'his', 'political', 'power', 'to', 'the', 'Emperor', ';', 'his', 'request', 'was', 'accepted', 'by', 'the', 'Emperor', 'on', 'the', '15th', ',', 'the', 'following', 'day', '(', 'Taisei', 'Hokan', ')', '.']\n",
            "PRED 589: <unk> は 天皇 から <unk> （ 薩摩 藩 ・ <unk> 藩 ） へ の <unk> を <unk> し 、 14 日 に は <unk> を 天皇 に <unk> する こと を 朝廷 に <unk> し 、 翌 15 日 に は 天皇 の <unk> を 要求 し た 。\n",
            "PRED SCORE: -37.9596\n",
            "\n",
            "[2021-08-14 10:38:15,098 INFO] \n",
            "SENT 590: ['It', 'is', 'said', 'that', 'he', 'judged', 'the', 'Imperial', 'Court', 'at', 'the', 'time', 'to', 'have', 'no', 'capability', 'to', 'administer', 'government', ',', 'and', 'he', 'therefore', 'sought', 'continuation', 'of', 'Tokugawa', 'Family', \"'s\", 'political', 'power', 'by', 'leading', 'the', 'Session', 'of', 'Clan', 'Chiefs', '.']\n",
            "PRED 590: 当時 、 朝廷 に 対 し て <unk> の <unk> は な く 、 <unk> <unk> の <unk> を 率い て 徳川 家 の 政治 力 を <unk> し た と さ れ る 。\n",
            "PRED SCORE: -28.8020\n",
            "\n",
            "[2021-08-14 10:38:15,098 INFO] \n",
            "SENT 591: ['However', ',', 'because', 'of', 'the', 'anti-Shogunate', 'activists', 'Toshimichi', 'OKUBO', 'and', 'Tomomi', 'IWAKURA', \"'s\", 'scheme', ',', 'there', 'was', 'a', 'command', 'to', 'revive', 'the', 'political', 'power', 'of', 'the', 'Imperial', 'Court', 'in', 'December', ',', 'and', 'Yoshinobu', 'was', 'ordered', '\"', 'Jikan', 'Nochi', '\"', '(', 'to', 'resign', 'from', 'his', 'position', 'as', 'Naidaijin', 'and', 'surrender', 'the', 'Tokugawa', 'territory', ')', '.']\n",
            "PRED 591: しかし 、 討幕 <unk> や <unk> <unk> の <unk> に よ り 、 12 月 に は 朝廷 の 政治 力 を 復活 さ せ る <unk> が あ り 、 <unk> は 『 <unk> <unk> 』 を 命 じ られ た 。\n",
            "PRED SCORE: -23.1658\n",
            "\n",
            "[2021-08-14 10:38:15,099 INFO] \n",
            "SENT 592: ['In', 'order', 'to', 'avoid', 'confrontations', 'Yoshinobu', 'retreated', 'to', 'Osaka-jo', 'Castle', ',', 'assembled', 'the', 'ambassadors', 'from', 'various', 'foreign', 'countries', 'and', 'asserted', 'the', 'legitimacy', 'of', 'Tokugawa', ';', 'furthermore', ',', 'he', 'appealed', 'to', 'the', 'Imperial', 'Court', 'and', 'had', 'the', 'Jikan', 'Nochi', 'modified', 'to', 'more', 'moderate', 'terms', '.']\n",
            "PRED 592: <unk> <unk> を 大坂 城 に <unk> し よ う と し た <unk> は 諸 <unk> から の <unk> を 主張 し 、 朝廷 に 対 し て <unk> を <unk> し 、 さらに <unk> 的 な <unk> を <unk> し た 。\n",
            "PRED SCORE: -38.7956\n",
            "\n",
            "[2021-08-14 10:38:15,099 INFO] \n",
            "SENT 593: ['However', ',', 'in', 'response', 'to', 'the', 'provocation', 'caused', 'by', 'Satsuma-han', 'Clan', 'in', 'the', 'city', 'of', 'Edo', 'in', '1868', 'he', 'mobilized', 'his', 'army', 'and', 'blockaded', 'Kyoto', 'using', 'the', 'armies', 'of', 'Aizu', 'and', 'Kuwana-han', 'Clans', '.']\n",
            "PRED 593: しかし 、 <unk> 4 年 （ <unk> 年 ） に 江戸 市 の <unk> <unk> に <unk> さ れ た <unk> <unk> の <unk> に 対 し て 、 <unk> ・ <unk> の <unk> を 利用 し て 挙兵 し て <unk> し た 。\n",
            "PRED SCORE: -30.7009\n",
            "\n",
            "[2021-08-14 10:38:15,099 INFO] \n",
            "SENT 594: ['Nevertheless', ',', 'at', 'the', 'Battle', 'of', 'Toba', 'Fushimi', 'that', 'broke', 'out', 'on', 'January', '3', ',', 'even', 'though', 'the', 'military', 'force', 'was', 'holding', 'up', 'adequately', ',', 'he', 'judged', 'that', 'the', 'former', 'Shogunate', 'army', 'was', 'at', 'a', 'disadvantage', ';', 'he', 'abandoned', 'his', 'army', 'and', 'retreated', 'to', 'Edo-jo', 'Castle', 'aboard', 'warship', 'Kaiyo', 'Maru', '.']\n",
            "PRED 594: <unk> は 1 月 3 日 に <unk> し た 鳥羽 伏見 の 戦い に お い て 、 旧 幕府 軍 は <unk> を <unk> し て い た が 、 <unk> に <unk> し て い た と 判断 し 、 <unk> を <unk> し て <unk> 城 に <unk> し た 。\n",
            "PRED SCORE: -39.7073\n",
            "\n",
            "[2021-08-14 10:38:15,099 INFO] \n",
            "SENT 595: ['Soon', 'an', 'order', 'was', 'issued', 'to', 'subjugate', 'Yoshinobu', 'as', 'the', 'enemy', 'of', 'the', 'Imperial', 'Court', ',', 'and', 'the', 'Imperial', 'Army', 'led', 'by', 'General', 'Prince', 'Arisugawa', 'Taruhito', 'set', 'off', 'to', 'the', 'east', '.']\n",
            "PRED 595: やがて 、 朝廷 の <unk> と し て <unk> <unk> に 対 する <unk> が 出 さ れ 、 <unk> <unk> 率い る <unk> 親王 率い る <unk> 軍 が <unk> し た 。\n",
            "PRED SCORE: -21.4916\n",
            "\n",
            "[2021-08-14 10:38:15,100 INFO] \n",
            "SENT 596: ['Yoshinobu', 'suppressed', 'the', 'resistance', 'party', 'led', 'by', 'Tadamasa', 'OGURI', 'and', 'asserted', 'to', 'comply', 'with', 'the', 'order', '.']\n",
            "PRED 596: <unk> は <unk> <unk> 率い る <unk> の <unk> を <unk> し 、 これ に <unk> し た 。\n",
            "PRED SCORE: -12.8574\n",
            "\n",
            "[2021-08-14 10:38:15,100 INFO] \n",
            "SENT 597: ['In', 'February', ',', 'he', 'entrusted', 'Kaishu', 'KATSU', 'to', 'take', 'control', 'of', 'the', 'situation', 'and', 'entered', 'into', 'a', 'disciplinary', 'confinement', 'at', 'Daiji-in', 'located', 'in', 'Kan', \"'ei-ji\", 'Temple', 'in', 'Ueno', '.']\n",
            "PRED 597: 2 月 に は <unk> <unk> を <unk> し 、 上野 の <unk> 寺 に あ っ た <unk> <unk> の <unk> に 入 っ た 。\n",
            "PRED SCORE: -17.0706\n",
            "\n",
            "[2021-08-14 10:38:15,100 INFO] \n",
            "SENT 598: ['Furthermore', ',', 'he', 'passed', 'on', 'the', 'estate', 'of', 'Tokugawa-Soke', '(', 'the', 'main', 'branch', 'of', 'Tokugawa', 'Family', ')', 'to', 'his', 'adopted', 'son', 'Kamenosuke', 'TAYASU', '(', 'future', 'Iesato', 'TOKUGAWA', ')', '.']\n",
            "PRED 598: さらに <unk> <unk> （ 徳川 <unk> ） の 養子 と な っ た <unk> <unk> （ 後 の 徳川 <unk> ） に <unk> し た 。\n",
            "PRED SCORE: -16.1001\n",
            "\n",
            "[2021-08-14 10:38:15,100 INFO] \n",
            "SENT 599: ['The', 'negotiation', 'between', 'Katsu', 'and', 'the', 'Staff', 'Officer', 'of', 'the', 'Imperial', 'Army', ',', 'Takamori', 'SAIGO', ',', 'reached', 'an', 'agreement', 'and', 'Bloodless', 'Surrender', 'of', 'Edo-jo', 'Castle', 'took', 'place', ';', 'Yoshinobu', 'was', 'moved', 'to', 'Mito', 'and', 'he', 'continued', 'his', 'disciplinary', 'confinement', 'in', 'a', 'room', 'within', 'Kodokan', 'of', '[', 'Mito', ']', 'Han', '(', 'Domain', ')', 'School', '.']\n",
            "PRED 599: <unk> <unk> の <unk> <unk> と <unk> <unk> の 間 に あ っ た <unk> <unk> は 、 <unk> 城 の <unk> <unk> と <unk> <unk> に <unk> し 、 <unk> は <unk> <unk> 学校 の <unk> <unk> で <unk> を 続け た 。\n",
            "PRED SCORE: -37.8031\n",
            "\n",
            "[2021-08-14 10:38:15,101 INFO] \n",
            "SENT 600: ['In', 'July', ',', '[', 'the', 'entire', ']', 'Tokugawa', 'family', 'was', 'relocated', 'to', 'Sunpu', '.']\n",
            "PRED 600: 7 月 、 <unk> 徳川 家 は 駿府 に <unk> し た 。\n",
            "PRED SCORE: -8.5482\n",
            "\n",
            "[2021-08-14 10:38:15,475 INFO] \n",
            "SENT 601: ['Ichinoshin', 'HARA', '(', 'warrior', 'of', 'Mito-han', 'Clan', ',', 'vassal', 'of', 'Hitotsubashi', 'Family', ')']\n",
            "PRED 601: <unk> <unk>\n",
            "PRED SCORE: -1.9493\n",
            "\n",
            "[2021-08-14 10:38:15,476 INFO] \n",
            "SENT 602: ['Enshiro', 'HIRAOKA', '(', 'vassal', 'of', 'Hitotsubashi', 'Family', ')']\n",
            "PRED 602: <unk> <unk>\n",
            "PRED SCORE: -2.0309\n",
            "\n",
            "[2021-08-14 10:38:15,476 INFO] \n",
            "SENT 603: ['Amane', 'NISHI', '(', 'political', 'advisor', 'to', 'Shogun', 'Yoshinobu', 'TOKUGAWA', ')']\n",
            "PRED 603: <unk> <unk>\n",
            "PRED SCORE: -1.4967\n",
            "\n",
            "[2021-08-14 10:38:15,476 INFO] \n",
            "SENT 604: ['Tomoyoshi', 'TOKI']\n",
            "PRED 604: <unk>\n",
            "PRED SCORE: -2.1836\n",
            "\n",
            "[2021-08-14 10:38:15,476 INFO] \n",
            "SENT 605: ['Chojuro', 'NAKANE', '(', 'vassal', 'of', 'Hitotsubashi', 'Family', ')']\n",
            "PRED 605: <unk> <unk>\n",
            "PRED SCORE: -2.0309\n",
            "\n",
            "[2021-08-14 10:38:15,477 INFO] \n",
            "SENT 606: ['Magotaro', 'UMEZAWA']\n",
            "PRED 606: <unk>\n",
            "PRED SCORE: -2.1836\n",
            "\n",
            "[2021-08-14 10:38:15,477 INFO] \n",
            "SENT 607: ['Keijuro', 'KAWAMURA']\n",
            "PRED 607: <unk>\n",
            "PRED SCORE: -2.1836\n",
            "\n",
            "[2021-08-14 10:38:15,477 INFO] \n",
            "SENT 608: ['Chikatsugu', 'MATSUDAIRA']\n",
            "PRED 608: 松平 <unk>\n",
            "PRED SCORE: -0.7123\n",
            "\n",
            "[2021-08-14 10:38:15,477 INFO] \n",
            "SENT 609: ['In', 'September', 'of', '1869', 'Yoshinobu', \"'s\", 'disciplinary', 'confinement', 'was', 'lifted', 'as', 'a', 'result', 'of', 'the', 'end', 'of', 'Boshin', 'War', '.']\n",
            "PRED 609: <unk> 年 9 月 、 <unk> の 乱 の <unk> に よ り <unk> <unk> の <unk> が <unk> さ れ た 。\n",
            "PRED SCORE: -12.3080\n",
            "\n",
            "[2021-08-14 10:38:15,478 INFO] \n",
            "SENT 610: ['Thereafter', 'he', 'did', 'not', 'participate', 'in', 'politics', 'and', 'spent', 'his', 'days', 'immersed', 'in', 'his', 'interests', 'such', 'as', 'photography', ',', 'hunting', ',', 'net', 'fishing', ',', 'playing', 'go', 'and', 'noh', 'songs', '.']\n",
            "PRED 610: その 後 、 政治 に は 参加 せ ず 、 <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> など の <unk> を <unk> し た 。\n",
            "PRED SCORE: -16.8828\n",
            "\n",
            "[2021-08-14 10:38:15,478 INFO] \n",
            "SENT 611: ['He', 'moved', 'to', 'Sugamo', ',', 'Tokyo', 'in', '1897', '.']\n",
            "PRED 611: <unk> 年 、 東京 巣鴨 に <unk> 。\n",
            "PRED SCORE: -4.6611\n",
            "\n",
            "[2021-08-14 10:38:15,478 INFO] \n",
            "SENT 612: ['In', 'the', 'following', 'year', 'he', 'visited', 'the', 'Imperial', 'Palace', 'and', 'had', 'and', 'audience', 'with', 'Emperor', 'Meiji', '.']\n",
            "PRED 612: 翌年 に は 皇居 を 訪れ 、 明治 天皇 に 謁見 し た 。\n",
            "PRED SCORE: -7.4634\n",
            "\n",
            "[2021-08-14 10:38:15,478 INFO] \n",
            "SENT 613: ['In', '1902', 'he', 'was', 'bestowed', 'a', 'title', 'of', 'Koshaku', 'and', 'he', 'established', 'the', 'Yoshinobu', 'TOKUGAWA', 'Family', 'aside', 'from', 'the', 'main', 'branch', 'of', 'Tokugawa', 'Family', '.']\n",
            "PRED 613: 明治 35 年 （ 1902 年 ） に は <unk> に <unk> さ れ 、 <unk> 徳川 家 を <unk> と し た 。\n",
            "PRED SCORE: -15.5346\n",
            "\n",
            "[2021-08-14 10:38:15,479 INFO] \n",
            "SENT 614: ['He', 'passed', 'on', 'the', 'family', 'estate', 'to', 'Yoshihisa', 'TOKUGAWA', 'and', 'he', 'retired', 'in', '1910', '.']\n",
            "PRED 614: 徳川 <unk> に 家督 を 譲 り 、 1910 年 に 隠居 し た 。\n",
            "PRED SCORE: -6.6025\n",
            "\n",
            "[2021-08-14 10:38:15,479 INFO] \n",
            "SENT 615: ['He', 'died', 'of', 'pneumonia', 'in', '1913', '.']\n",
            "PRED 615: <unk> 2 年 （ <unk> 年 ） に <unk> で 死 す 。\n",
            "PRED SCORE: -7.2807\n",
            "\n",
            "[2021-08-14 10:38:15,479 INFO] \n",
            "SENT 616: ['He', 'was', '76', 'years', 'old', 'and', 'had', 'the', 'longest', 'life', 'among', 'the', 'successive', 'Shoguns', '.']\n",
            "PRED 616: <unk> 歳 で あ り 、 歴代 の <unk> の 中 で <unk> を 保 っ た 。\n",
            "PRED SCORE: -14.5251\n",
            "\n",
            "[2021-08-14 10:38:15,479 INFO] \n",
            "SENT 617: ['*', 'Until', '1872', 'the', 'dates', 'noted', 'use', 'the', 'lunar', 'calendar', '.']\n",
            "PRED 617: ※ 日付 は 明治 5 年 まで 。\n",
            "PRED SCORE: -4.6270\n",
            "\n",
            "[2021-08-14 10:38:15,479 INFO] \n",
            "SENT 618: ['1,847']\n",
            "PRED 618: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:15,480 INFO] \n",
            "SENT 619: ['He', 'became', 'the', 'head', 'of', 'the', 'Hitotsubashi', 'Family', 'on', 'September', '1', '.']\n",
            "PRED 619: 9 月 1 日 、 <unk> 家 当主 と な る 。\n",
            "PRED SCORE: -4.4683\n",
            "\n",
            "[2021-08-14 10:38:15,480 INFO] \n",
            "SENT 620: ['He', 'changed', 'his', 'name', 'to', 'Yoshinobu', 'on', 'December', '1', '.']\n",
            "PRED 620: 12 月 1 日 、 <unk> と 改名 。\n",
            "PRED SCORE: -5.0290\n",
            "\n",
            "[2021-08-14 10:38:15,480 INFO] \n",
            "SENT 621: ['On', 'the', 'same', 'day', ',', 'he', 'was', 'given', 'the', 'rank', 'of', 'Ju-sanmi', 'Sakonoe', 'Gon', 'Chujo', 'and', 'assigned', 'to', 'Gyobukyo', '.']\n",
            "PRED 621: 同日 、 <unk> 位 ・ 権 中 納言 に <unk> さ れ た 。\n",
            "PRED SCORE: -7.9292\n",
            "\n",
            "[2021-08-14 10:38:15,480 INFO] \n",
            "SENT 622: ['He', 'married', 'Tadaka', 'ICHIJO', \"'s\", 'adopted', 'daughter', ',', 'Mikako', ',', 'on', 'December', '3', ',', '1855', '.']\n",
            "PRED 622: <unk> 年 12 月 3 日 、 <unk> <unk> の 養女 <unk> <unk> と 結婚 。\n",
            "PRED SCORE: -7.5476\n",
            "\n",
            "[2021-08-14 10:38:15,481 INFO] \n",
            "SENT 623: ['He', 'became', 'a', 'Sangi', '(', 'councilor', ')', '.']\n",
            "PRED 623: <unk> と な る 。\n",
            "PRED SCORE: -1.9761\n",
            "\n",
            "[2021-08-14 10:38:15,481 INFO] \n",
            "SENT 624: ['In', '1857', ',', 'he', 'became', 'a', 'strong', 'candidate', 'for', 'the', 'heir', 'to', 'Iesada', 'TOKUGAWA', '.']\n",
            "PRED 624: <unk> 2 年 （ <unk> 年 ） に は 徳川 <unk> の <unk> と な っ た 。\n",
            "PRED SCORE: -10.7119\n",
            "\n",
            "[2021-08-14 10:38:15,481 INFO] \n",
            "SENT 625: ['Because', 'of', 'Ansei', 'Incident', 'he', 'was', 'ordered', 'to', 'retire', 'and', 'enter', 'into', 'disciplinary', 'confinement', 'in', 'August', ',', '1859', '.']\n",
            "PRED 625: <unk> の 変 に よ っ て 引退 を 命 じ られ 、 <unk> 2 年 （ <unk> 年 ） 7 月 に <unk> に <unk> さ れ た 。\n",
            "PRED SCORE: -17.0978\n",
            "\n",
            "[2021-08-14 10:38:15,481 INFO] \n",
            "SENT 626: ['He', 'was', 'relieved', 'from', 'retirement', 'and', 'disciplinary', 'confinement', 'in', 'September', ',', '1860', '.']\n",
            "PRED 626: <unk> 2 年 （ <unk> 年 ） 9 月 に 引退 ・ <unk> を 解 か れ る 。\n",
            "PRED SCORE: -11.8293\n",
            "\n",
            "[2021-08-14 10:38:15,482 INFO] \n",
            "SENT 627: ['1862']\n",
            "PRED 627: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:15,482 INFO] \n",
            "SENT 628: ['On', 'July', '6', ',', 'his', 'position', 'as', 'the', 'head', 'of', 'the', 'Hitotsubashi', 'Family', 'was', 'restored', '.']\n",
            "PRED 628: 7 月 6 日 、 <unk> 家 当主 と し て の 地位 が 復活 し た 。\n",
            "PRED SCORE: -8.9564\n",
            "\n",
            "[2021-08-14 10:38:15,482 INFO] \n",
            "SENT 629: ['On', 'the', 'same', 'day', ',', 'he', 'became', 'the', 'guardian', 'of', 'the', 'Shogun', '(', 'Shogun', 'Kokenshoku', ')', 'due', 'to', 'the', 'Emperor', \"'s\", 'order', '.']\n",
            "PRED 629: 同日 、 天皇 の 命 に よ り 将軍 の 後見 人 と な っ た 。\n",
            "PRED SCORE: -6.7009\n",
            "\n",
            "[2021-08-14 10:38:15,482 INFO] \n",
            "SENT 630: ['In', 'November', ',', 'he', 'was', 'reassigned', 'to', 'the', 'rank', 'of', 'Gon', 'Chunagon', '.']\n",
            "PRED 630: 11 月 、 権 中 納言 に <unk> 。\n",
            "PRED SCORE: -3.9014\n",
            "\n",
            "[2021-08-14 10:38:15,758 INFO] \n",
            "SENT 631: ['In', 'December', ',', '1863', ',', 'he', 'assumed', 'the', 'position', 'of', 'Chogi', 'San', \"'yo\", '.']\n",
            "PRED 631: <unk> 2 年 （ <unk> 年 ） 11 月 、 <unk> <unk> に 就任 。\n",
            "PRED SCORE: -9.7673\n",
            "\n",
            "[2021-08-14 10:38:15,759 INFO] \n",
            "SENT 632: ['1864']\n",
            "PRED 632: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:15,759 INFO] \n",
            "SENT 633: ['On', 'March', '9', ',', 'he', 'resigned', 'from', 'the', 'position', 'of', 'Chogi', 'San', \"'yo\", '.']\n",
            "PRED 633: 3 月 9 日 、 <unk> <unk> を <unk> 。\n",
            "PRED SCORE: -5.1446\n",
            "\n",
            "[2021-08-14 10:38:15,759 INFO] \n",
            "SENT 634: ['On', 'March', '25', ',', 'he', 'resigned', 'from', 'his', 'position', 'as', 'the', 'guardian', 'of', 'the', 'Shogun', '(', 'Shogun', 'Kokenshoku', ')', '.']\n",
            "PRED 634: 3 月 25 日 、 将軍 の 後見 人 と し て <unk> 。\n",
            "PRED SCORE: -5.4649\n",
            "\n",
            "[2021-08-14 10:38:15,760 INFO] \n",
            "SENT 635: ['On', 'the', 'same', 'day', ',', 'he', 'took', 'the', 'position', 'as', 'Kinri', 'Goshuei', 'Sotoku', '(', 'Head', 'of', 'the', 'Imperial', 'Palace', '/', 'Emperor', \"'s\", 'Protector', ')', 'and', 'Sekkai', 'Bogyo', 'Shiki', '(', 'Commander', 'of', 'Osaka', 'Bay', 'Defense', ')', '.']\n",
            "PRED 635: 同日 、 <unk> <unk> ・ <unk> <unk> と な る 。\n",
            "PRED SCORE: -7.5394\n",
            "\n",
            "[2021-08-14 10:38:15,760 INFO] \n",
            "SENT 636: ['At', 'the', 'Kinmon', 'Incident', 'he', 'led', 'the', 'resistance', 'army', '.']\n",
            "PRED 636: <unk> 事件 で は <unk> を 率い る 。\n",
            "PRED SCORE: -6.1736\n",
            "\n",
            "[2021-08-14 10:38:15,760 INFO] \n",
            "SENT 637: ['1866']\n",
            "PRED 637: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:15,760 INFO] \n",
            "SENT 638: ['He', 'resigned', 'from', 'the', 'Kinri', 'Goshuei', 'Sotoku', '(', 'Head', 'of', 'the', 'Imperial', 'Palace', '/', 'Emperor', \"'s\", 'Protector', ')', 'towards', 'the', 'end', 'of', 'July', '.']\n",
            "PRED 638: 7 月 末 に は <unk> <unk> を <unk> し た 。\n",
            "PRED SCORE: -7.1126\n",
            "\n",
            "[2021-08-14 10:38:15,761 INFO] \n",
            "SENT 639: ['On', 'August', '20', ',', 'he', 'became', 'the', 'head', 'of', 'the', 'main', 'branch', 'of', 'the', 'Tokugawa', 'Family', '.']\n",
            "PRED 639: 8 月 20 日 、 徳川 家 の <unk> と な る 。\n",
            "PRED SCORE: -5.7077\n",
            "\n",
            "[2021-08-14 10:38:15,761 INFO] \n",
            "SENT 640: ['On', 'December', '15', ',', 'he', 'was', 'assigned', 'the', 'rank', 'of', 'Sho-nii', 'Gon', 'Dainagon', 'and', 'Ukonoe', 'Daisho', '.']\n",
            "PRED 640: 12 月 15 日 、 権 大 納言 ・ <unk> 大将 に <unk> 。\n",
            "PRED SCORE: -7.6212\n",
            "\n",
            "[2021-08-14 10:38:15,761 INFO] \n",
            "SENT 641: ['He', 'became', 'the', 'Seii', 'Taishogun', 'on', 'the', 'same', 'day', '.']\n",
            "PRED 641: 同日 <unk> と な る 。\n",
            "PRED SCORE: -4.2740\n",
            "\n",
            "[2021-08-14 10:38:15,761 INFO] \n",
            "SENT 642: ['1867']\n",
            "PRED 642: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:15,762 INFO] \n",
            "SENT 643: ['In', 'September', ',', '1867', ',', 'his', 'rank', 'was', 'changed', 'to', 'Naidaijin', '.']\n",
            "PRED 643: <unk> 2 年 （ <unk> 年 ） 8 月 、 <unk> 位 に <unk> 。\n",
            "PRED SCORE: -9.5612\n",
            "\n",
            "[2021-08-14 10:38:15,762 INFO] \n",
            "SENT 644: ['He', 'retained', 'the', 'rank', 'of', 'Ukonoe', 'Daisho', '.']\n",
            "PRED 644: <unk> 大将 を <unk> 。\n",
            "PRED SCORE: -4.9335\n",
            "\n",
            "[2021-08-14 10:38:15,762 INFO] \n",
            "SENT 645: ['Taisei', 'Hokan', 'took', 'place', 'on', 'October', '14', '.']\n",
            "PRED 645: <unk> <unk> は 10 月 14 日 に 行 わ れ た 。\n",
            "PRED SCORE: -5.6431\n",
            "\n",
            "[2021-08-14 10:38:15,762 INFO] \n",
            "SENT 646: ['On', 'December', '19', ',', 'he', 'resigned', 'from', 'the', 'position', 'of', 'Seii', 'Taishogun', '.']\n",
            "PRED 646: 12 月 19 日 、 <unk> <unk> を <unk> 。\n",
            "PRED SCORE: -5.1324\n",
            "\n",
            "[2021-08-14 10:38:15,763 INFO] \n",
            "SENT 647: ['On', 'April', '11', ',', '1868', ',', 'he', 'was', 'stripped', 'of', 'his', 'political', 'rank', 'and', 'duties', '.']\n",
            "PRED 647: <unk> 4 月 11 日 、 政治 <unk> ・ <unk> を 剥奪 さ れ る 。\n",
            "PRED SCORE: -9.1432\n",
            "\n",
            "[2021-08-14 10:38:15,763 INFO] \n",
            "SENT 648: ['On', 'September', '28', ',', '1869', ',', 'his', 'disciplinary', 'confinement', 'was', 'lifted', '.']\n",
            "PRED 648: <unk> 年 9 月 28 日 、 <unk> <unk> 。\n",
            "PRED SCORE: -6.4338\n",
            "\n",
            "[2021-08-14 10:38:15,763 INFO] \n",
            "SENT 649: ['On', 'January', '6', ',', '1872', ',', 'his', 'courtly', 'rank', 'was', 'restored', 'to', 'Ju-shii', '.']\n",
            "PRED 649: 1872 年 （ 明治 5 年 ） 1 月 6 日 、 <unk> 位 を <unk> に 復 し た 。\n",
            "PRED SCORE: -9.7563\n",
            "\n",
            "[2021-08-14 10:38:15,763 INFO] \n",
            "SENT 650: ['On', 'May', '18', ',', '1880', ',', 'his', 'rank', 'was', 'promoted', 'to', 'Sho-nii', '.']\n",
            "PRED 650: <unk> 年 5 月 18 日 、 <unk> 位 に <unk> 。\n",
            "PRED SCORE: -5.8309\n",
            "\n",
            "[2021-08-14 10:38:15,763 INFO] \n",
            "SENT 651: ['On', 'June', '20', ',', '1888', ',', 'his', 'rank', 'was', 'promoted', 'to', 'Ju-ichii', '.']\n",
            "PRED 651: <unk> 年 6 月 20 日 、 <unk> 位 に <unk> 。\n",
            "PRED SCORE: -5.6695\n",
            "\n",
            "[2021-08-14 10:38:15,764 INFO] \n",
            "SENT 652: ['On', 'November', '19', ',', '1897', ',', 'he', 'moved', 'his', 'residence', 'to', 'Tokyo', '.']\n",
            "PRED 652: <unk> 年 11 月 19 日 、 東京 へ <unk> 。\n",
            "PRED SCORE: -6.2388\n",
            "\n",
            "[2021-08-14 10:38:15,764 INFO] \n",
            "SENT 653: ['On', 'March', '2', ',', '1898', ',', 'he', 'had', 'an', 'audience', 'with', 'Emperor', 'Meiji', '(', 'first', 'audience', 'since', 'Taisei', 'Hokan', ')', '.']\n",
            "PRED 653: 1898 年 （ 明治 31 年 ） 3 月 2 日 、 明治 天皇 に 謁見 （ <unk> <unk> 以来 ） 。\n",
            "PRED SCORE: -10.6523\n",
            "\n",
            "[2021-08-14 10:38:15,764 INFO] \n",
            "SENT 654: ['On', 'June', '3', ',', '1902', ',', 'he', 'received', 'the', 'rank', 'of', 'Koshaku', '.']\n",
            "PRED 654: 明治 35 年 （ 1902 年 ） 6 月 3 日 、 <unk> に <unk> 。\n",
            "PRED SCORE: -8.3753\n",
            "\n",
            "[2021-08-14 10:38:15,764 INFO] \n",
            "SENT 655: ['He', 'was', 'allowed', 'to', 'officially', 'establish', 'Yoshinobu', 'TOKUGAWA', '(', 'Koshaku', ')', 'Family', 'aside', 'from', 'the', 'main', 'branch', 'of', 'the', 'Tokugawa', 'Family', '.']\n",
            "PRED 655: 徳川 家 の <unk> から 徳川 <unk> （ <unk> ） を <unk> し た 。\n",
            "PRED SCORE: -12.4979\n",
            "\n",
            "[2021-08-14 10:38:15,765 INFO] \n",
            "SENT 656: ['He', 'was', 'a', 'member', 'of', 'House', 'of', 'Peers', '(', 'Japan', ')', '(', '~', 'December', ',', '1910', ')']\n",
            "PRED 656: <unk> 院 ( 日本 ) 議員 （ 1910 年 12 月 ～ ）\n",
            "PRED SCORE: -4.1514\n",
            "\n",
            "[2021-08-14 10:38:15,765 INFO] \n",
            "SENT 657: ['1908']\n",
            "PRED 657: 1908 年 （ 明治 41 年 ）\n",
            "PRED SCORE: -2.5781\n",
            "\n",
            "[2021-08-14 10:38:15,765 INFO] \n",
            "SENT 658: ['On', 'April', '30', ',', 'his', 'contributions', 'to', 'Taisei', 'Hokan', 'were', 'recognized', 'and', 'he', 'was', 'awarded', 'Kun-itto', 'Kyokujitsu', 'Daijusho', 'from', 'the', 'Meiji', 'Government', '.']\n",
            "PRED 658: 4 月 30 日 、 <unk> <unk> へ の <unk> が 認め られ 、 明治 政府 から <unk> <unk> が <unk> さ れ た 。\n",
            "PRED SCORE: -12.2797\n",
            "\n",
            "[2021-08-14 10:38:15,770 INFO] \n",
            "SENT 659: ['He', 'retired', 'on', 'December', '8', '.']\n",
            "PRED 659: 12 月 8 日 <unk> 。\n",
            "PRED SCORE: -2.7199\n",
            "\n",
            "[2021-08-14 10:38:15,770 INFO] \n",
            "SENT 660: ['He', 'died', '(', 'at', '4', ':', '10', 'A.M.', ')', 'on', 'November', ',', '22', ',', '1913', '.']\n",
            "PRED 660: <unk> 2 年 （ <unk> 年 ） 11 月 22 日 に 死去 （ 10 歳 ） 。\n",
            "PRED SCORE: -11.0922\n",
            "\n",
            "[2021-08-14 10:38:16,937 INFO] \n",
            "SENT 661: ['On', 'the', 'same', 'day', ',', 'he', 'was', 'awarded', 'Kyokujitsu', 'Toka', 'Daijusho', '.']\n",
            "PRED 661: 同日 、 <unk> <unk> を <unk> 。\n",
            "PRED SCORE: -6.0098\n",
            "\n",
            "[2021-08-14 10:38:16,937 INFO] \n",
            "SENT 662: ['As', 'far', 'as', 'education', 'and', 'studying', 'of', 'martial', 'arts', 'are', 'concerned', ',', 'he', 'was', 'born', 'and', 'raised', 'under', 'the', 'very', 'best', 'circumstance', ';', 'among', 'many', 'forms', 'of', 'martial', 'arts', 'he', 'was', 'especially', 'interested', 'in', 'and', 'was', 'an', 'expert', 'in', 'shuriken', '(', 'dirk-throwing', ')', '.']\n",
            "PRED 662: <unk> の 教育 ・ 研究 に 関 し て は 非常 に <unk> で あ り 、 特に <unk> に 関心 が あ り 、 <unk> で は <unk> の <unk> で あ っ た 。\n",
            "PRED SCORE: -30.3905\n",
            "\n",
            "[2021-08-14 10:38:16,938 INFO] \n",
            "SENT 663: ['Even', 'after', 'Taisei', 'Hokan', ',', 'he', 'practiced', 'throwing', 'the', 'shuriken', 'every', 'day', 'until', 'he', 'was', 'sweating', ',', 'and', 'he', 'is', 'counted', 'as', 'one', 'of', 'the', 'most', 'famous', 'persons', 'among', 'the', 'shuriken', 'experts', '.']\n",
            "PRED 663: <unk> <unk> 後 も 毎日 <unk> を <unk> し 、 <unk> の 中 で 最も 有名 な 人物 の 一人 に 数え られ る 。\n",
            "PRED SCORE: -18.6297\n",
            "\n",
            "[2021-08-14 10:38:16,938 INFO] \n",
            "SENT 664: ['He', 'tossed', 'about', 'a', 'lot', 'in', 'bed', 'in', 'his', 'sleep', ',', 'and', 'his', 'father', ',', 'Nariaki', 'TOKUGAWA', ',', 'thought', 'that', 'this', 'would', 'be', 'a', 'problem', 'when', 'he', 'became', 'the', 'heir', 'to', 'the', 'Tokugawa', 'Family', ';', 'in', 'order', 'to', 'correct', 'this', ',', 'razor', 'blades', 'were', 'planted', 'into', 'his', 'pillow', '(', 'this', 'was', 'done', 'just', 'to', 'scare', 'him', ',', 'and', 'in', 'reality', 'the', 'razor', 'blades', 'were', 'removed', 'after', 'he', 'had', 'fallen', 'asleep', 'so', 'as', 'to', 'prevent', 'any', 'injuries', ')', '.']\n",
            "PRED 664: <unk> に は <unk> が 多 く 、 父 徳川 <unk> は 徳川 家 の <unk> と な っ た 際 に 問題 と な っ た と 考え て い る が 、 この 剣 は <unk> に <unk> さ れ て しま っ た （ 実際 に は <unk> が <unk> さ れ た だけ で あ り 、 実際 に は <unk> が <unk> し た ） 。\n",
            "PRED SCORE: -58.5215\n",
            "\n",
            "[2021-08-14 10:38:16,938 INFO] \n",
            "SENT 665: ['On', 'the', 'other', 'hand', ',', 'there', 'is', 'an', 'anecdote', 'that', 'in', 'his', 'adulthood', 'he', 'slept', 'with', 'his', 'wife', 'and', 'a', 'concubine', 'so', 'that', 'the', 'three', 'of', 'them', 'formed', 'the', 'letter', '\"', 'Y', '\"', 'as', 'a', 'measure', 'against', 'assassination', 'attempts', '.']\n",
            "PRED 665: これ に 対 し て 、 <unk> は 妻 と <unk> を 結 ん で お り 、 三 人 の <unk> は <unk> の <unk> と し て 「 <unk> 」 を 結成 し た と い う 逸話 が あ る 。\n",
            "PRED SCORE: -33.0304\n",
            "\n",
            "[2021-08-14 10:38:16,938 INFO] \n",
            "SENT 666: ['There', 'is', 'supposed', 'to', 'be', 'a', 'photograph', 'of', 'Yoshinobu', 'from', 'his', 'early', 'childhood', ',', 'but', 'because', 'cameras', 'were', 'probably', 'not', 'yet', 'introduced', 'to', 'Japan', 'at', 'that', 'time', ',', 'it', 'is', 'doubtful', 'that', 'the', 'photograph', 'is', 'that', 'of', 'Yoshinobu', '.']\n",
            "PRED 666: 初期 から <unk> の 写真 が あ っ た と 推定 さ れ て い る が 、 当時 日本 に 伝わ っ て い な かっ た ため 、 写真 の 写真 が <unk> の 写真 で あ る 。\n",
            "PRED SCORE: -30.3985\n",
            "\n",
            "[2021-08-14 10:38:16,939 INFO] \n",
            "SENT 667: ['Yoshinobu', 'visited', 'Iemochi', 'when', 'he', 'fell', 'ill', ',', 'and', 'at', 'this', 'occasion', 'it', 'is', 'said', 'that', 'they', 'had', 'a', 'normal', 'conversation', '.']\n",
            "PRED 667: <unk> は <unk> の 際 に <unk> を 訪れ 、 この とき は 通常 の <unk> が あ っ た と さ れ る 。\n",
            "PRED SCORE: -16.1705\n",
            "\n",
            "[2021-08-14 10:38:16,939 INFO] \n",
            "SENT 668: ['His', 'extraordinary', 'talent', 'was', 'well', 'known', ',', 'and', 'his', 'father', 'Nariaki', 'TOKUGAWA', \"'s\", 'confidant', ',', 'Tatewaki', 'AJIMA', ',', 'commented', 'on', 'him', 'as', '\"', 'someone', 'who', 'will', 'purify', 'the', 'Tokugawa', 'Family', 'line', '\"', ';', 'he', 'singly', 'shouldered', 'the', 'expectation', 'of', 'restoring', 'the', 'Shogunate', \"'s\", 'authority', ',', 'and', 'when', 'his', 'highly', 'touted', 'tenure', 'as', 'the', 'Shogun', 'began', ',', 'his', 'brilliance', 'was', 'praised', 'as', '\"', 'the', 'return', 'of', 'Ieyasu', 'TOKUGAWA', '\"', '.']\n",
            "PRED 668: <unk> の 才能 は よく 知 ら れ て お り 、 父 徳川 <unk> の <unk> <unk> は 「 徳川 家 を <unk> する 者 」 と 評 さ れ 、 将軍 <unk> の 際 に は 「 徳川 家康 の <unk> 」 と <unk> さ れ た 。\n",
            "PRED SCORE: -34.9226\n",
            "\n",
            "[2021-08-14 10:38:16,939 INFO] \n",
            "SENT 669: ['Yoshinobu', \"'s\", 'intelligence', 'was', 'well', 'known', 'even', 'among', 'the', 'Anti-Shogunate', 'Party', ',', 'and', 'Takayoshi', 'KIDO', 'of', 'Choshu-han', 'Clan', 'in', 'particular', 'was', 'on', 'guard', 'saying', ',', '\"', 'Yoshinobu', 'HITOTSUBASHI', \"'s\", 'daring', 'and', 'intelligent', 'strategy', 'cannot', 'be', 'underestimated', '.']\n",
            "PRED 669: <unk> の <unk> は <unk> <unk> の 中 で も 有名 で あ り 、 特に <unk> <unk> の <unk> は 「 <unk> の <unk> と <unk> の <unk> は <unk> な い 」 と <unk> さ れ た 。\n",
            "PRED SCORE: -28.0501\n",
            "\n",
            "[2021-08-14 10:38:16,939 INFO] \n",
            "SENT 670: ['It', 'is', 'like', 'seeing', 'the', 'return', 'of', 'Ieyasu', '.', '\"']\n",
            "PRED 670: 「 家康 の <unk> を 見 た よう だ 。 」\n",
            "PRED SCORE: -9.2969\n",
            "\n",
            "[2021-08-14 10:38:16,940 INFO] \n",
            "SENT 671: ['Regarding', 'the', 'decision', 'on', 'Taisei', 'Hokan', ',', 'Ryoma', 'SAKAMOTO', 'said', ',', '\"', 'My', 'respected', 'Shogun', ',', 'I', 'wonder', 'what', 'you', 'are', 'feeling', 'in', 'your', 'heart', 'today', '.']\n",
            "PRED 671: <unk> <unk> の <unk> に つ い て は 、 「 <unk> は 将軍 を 尊敬 し て い た 」 と <unk> し て い る 。\n",
            "PRED SCORE: -23.7726\n",
            "\n",
            "[2021-08-14 10:38:16,940 INFO] \n",
            "SENT 672: ['I', 'praise', 'how', 'you', 'made', 'the', '[', 'difficult', ']', 'decision', ',', 'I', 'praise', 'how', 'you', 'made', 'the', '[', 'difficult', ']', 'decision', '.']\n",
            "PRED 672: <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -13.8745\n",
            "\n",
            "[2021-08-14 10:38:16,940 INFO] \n",
            "SENT 673: ['I', 'make', 'a', 'vow', 'to', 'dedicate', 'my', 'life', 'to', 'the', 'Lord', '.', '\"', 'Ryoma', 'highly', 'praised', 'Yoshinobu', 'and', 'he', 'even', 'considered', 'giving', 'Yoshinobu', 'a', 'position', 'as', 'Assistant', 'Kanpaku', 'in', 'the', 'New', 'Government', '.']\n",
            "PRED 673: 「 <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> 」\n",
            "PRED SCORE: -14.6547\n",
            "\n",
            "[2021-08-14 10:38:16,940 INFO] \n",
            "SENT 674: ['However', ',', 'Yoshinobu', 'did', 'not', 'learn', 'about', 'the', 'existence', 'of', 'Ryoma', 'until', 'the', 'Meiji', 'era', '(', 'after', 'Ryoma', \"'s\", 'death', ')', '.']\n",
            "PRED 674: しかし 、 明治 時代 まで <unk> の 存在 を 知 ら な かっ た 。\n",
            "PRED SCORE: -10.6697\n",
            "\n",
            "[2021-08-14 10:38:16,941 INFO] \n",
            "SENT 675: ['Yoshinobu', 'was', 'not', 'the', 'only', 'person', 'who', 'did', 'not', 'know', 'about', 'Ryoma', ';', 'Ryoma', \"'s\", 'fame', 'in', 'his', 'life', 'time', 'was', 'very', 'much', 'smaller', 'than', 'that', 'after', 'the', 'Meiji', 'Restoration', '.']\n",
            "PRED 675: <unk> は <unk> を 知 ら な い 唯一 の 人物 で あ り 、 明治 維新 以降 は <unk> の <unk> は 非常 に 小さ かっ た 。\n",
            "PRED SCORE: -17.8103\n",
            "\n",
            "[2021-08-14 10:38:16,941 INFO] \n",
            "SENT 676: ['When', 'he', 'lost', 'the', 'Battle', 'of', 'Toba-Fushimi', 'and', 'retreated', 'to', 'Edo', ',', 'his', 'enemies', 'highly', 'criticized', 'him', 'for', '\"', 'running', 'away', 'in', 'the', 'face', 'of', 'the', 'enemy', '\"', '.']\n",
            "PRED 676: <unk> ・ <unk> の 戦い に 敗れ た <unk> は 、 <unk> の <unk> に 対 し て 「 <unk> の <unk> 」 と <unk> し た 。\n",
            "PRED SCORE: -20.4587\n",
            "\n",
            "[2021-08-14 10:38:16,941 INFO] \n",
            "SENT 677: ['There', 'were', 'people', 'who', 'made', 'fun', 'of', 'Yoshinobu', 'for', 'being', 'a', 'spineless', 'coward', ',', 'pointing', 'out', 'that', 'even', 'though', 'he', 'left', 'behind', 'Ieyasu', \"'s\", 'umajirushi', '(', 'sign', 'belonging', 'to', 'the', 'clan', 'general', '/', 'chief', 'and', 'used', 'in', 'a', 'battle', ')', 'of', 'golden', 'fan', ',', 'he', 'always', 'had', 'his', 'beloved', 'concubine', 'with', 'him', '.']\n",
            "PRED 677: <unk> と し て の <unk> は 、 家康 の <unk> を 残 し て い る に も 関わ ら ず 、 常 に <unk> な <unk> を 持 っ て い た と し て い る 。\n",
            "PRED SCORE: -33.5151\n",
            "\n",
            "[2021-08-14 10:38:16,942 INFO] \n",
            "SENT 678: ['However', ',', 'there', 'is', 'a', 'view', 'that', 'Yoshinobu', 'had', 'no', 'choice', '[', 'but', 'to', 'retreat', ']', 'because', 'at', 'that', 'time', 'it', 'was', 'necessary', 'to', 'suppress', 'military', 'revolts', 'in', 'Edo', 'as', 'well', 'as', 'in', 'Musashi', 'Province', ',', 'and', 'because', 'Yoshinobu', 'became', 'the', 'Imperial', 'Court', \"'s\", 'enemy', ',', 'various', 'clans', 'were', 'alienating', 'themselves', 'one', 'after', 'another', 'from', 'the', 'Shogunate', ';', 'thus', ',', 'even', 'if', 'he', 'was', 'able', 'to', 'protect', 'Osaka-jo', 'Castle', ',', 'a', 'long-term', 'battle', 'had', 'to', 'be', 'avoided', 'in', 'order', 'to', 'prevent', 'interventions', 'from', 'foreign', 'countries', '.']\n",
            "PRED 678: しかし ながら 、 当時 の 武蔵 国 ・ 武蔵 国 の 軍事 <unk> に 必要 な <unk> が あ っ た ため に <unk> は <unk> し な かっ た と する 見 方 も あ り 、 <unk> が 幕府 の <unk> と な っ た ため 、 大坂 城 を 守 る こと が でき た と し て も 長期 戦 は <unk> し た と する 見解 が あ る 。\n",
            "PRED SCORE: -60.7645\n",
            "\n",
            "[2021-08-14 10:38:16,942 INFO] \n",
            "SENT 679: ['Because', 'he', 'entered', 'Kan', \"'ei-ji\", 'Temple', 'for', 'disciplinary', 'confinement', 'as', 'soon', 'as', 'the', 'New', 'Government', 'designated', 'him', 'as', 'the', 'Imperial', 'Court', \"'s\", 'enemy', ',', 'he', 'was', 'considered', 'as', 'a', 'reasonable', 'man', 'who', 'respected', 'the', 'Emperor', 'and', 'the', 'Imperial', 'Court', '(', 'perhaps', 'this', 'was', 'due', 'to', 'the', 'teaching', 'of', 'Mito-han', '[', 'Clan', ']', 'that', 'highly', 'respected', 'the', 'Emperor', 'and', 'also', 'to', 'the', 'fact', 'that', 'his', 'mother', 'was', 'from', 'the', 'Imperial', 'Family', ')', ';', 'however', ',', 'on', 'the', 'other', 'hand', ',', 'he', 'was', 'also', 'called', 'weak-kneed', 'because', 'as', 'the', 'lord', 'of', 'his', 'people', ',', 'he', 'was', 'not', 'able', 'to', 'stand', 'resolutely', 'in', 'the', 'face', 'of', 'the', 'enemy', '.']\n",
            "PRED 679: 新 政府 が 朝廷 の <unk> と し て <unk> し た 直後 に <unk> 寺 に 入 っ た ため 、 天皇 や 朝廷 を 尊重 し た <unk> な 人物 と さ れ た （ <unk> <unk> の 教え に よ る もの で あ り 、 また 母 が 天皇 家 の 出身 で あ る こと に よ る ） が 、 <unk> で あ る こと から <unk> と も 呼 ば れ る よう に な っ た 。\n",
            "PRED SCORE: -64.4332\n",
            "\n",
            "[2021-08-14 10:38:16,942 INFO] \n",
            "SENT 680: ['Because', 'of', 'his', 'compliance', 'with', 'the', 'disciplinary', 'confinement', 'and', 'the', 'Bloodless', 'Transfer', 'of', 'Edo-jo', 'Castle', ',', 'the', 'administrative', 'power', 'was', 'transferred', 'as', 'a', 'result', 'of', 'almost', 'a', 'bloodless', 'revolution', ';', 'he', 'contributed', 'greatly', 'to', 'the', 'Restoration', 'and', 'ensuring', 'of', 'independency', 'of', 'modern', 'Japan', '.']\n",
            "PRED 680: <unk> <unk> と <unk> <unk> の <unk> に よ り 、 行政 権力 は ほぼ <unk> の <unk> に よ っ て <unk> さ れ 、 近代 日本 の <unk> ・ <unk> に 大きな 貢献 を し た 。\n",
            "PRED SCORE: -29.2400\n",
            "\n",
            "[2021-08-14 10:38:16,942 INFO] \n",
            "SENT 681: ['Businessman', 'Eiichi', 'SHIBUSAWA', 'was', 'a', 'vassal', 'appointed', 'during', '[', 'Yoshinobu', \"'s\", ']', 'tenure', 'as', 'the', 'head', 'of', 'the', 'Hitotsubashi', 'Tokugawa', 'Family', ',', 'and', 'they', 'kept', 'their', 'contact', 'even', 'after', 'the', 'Meiji', 'Restoration', '.']\n",
            "PRED 681: <unk> <unk> （ <unk> <unk> ） と は 、 明治 維新 後 も <unk> 藩 <unk> <unk> <unk> が <unk> 徳川 家 当主 と し て <unk> し た <unk> 。\n",
            "PRED SCORE: -22.1977\n",
            "\n",
            "[2021-08-14 10:38:16,943 INFO] \n",
            "SENT 682: ['In', 'Yoshinobu', \"'s\", 'last', 'years', ',', 'SHIBUSAWA', 'aimed', 'to', 'edit', 'Yoshinobu', \"'s\", 'biography', ';', 'he', 'persuaded', 'unwilling', 'Yoshinobu', 'and', 'started', '\"', 'Sekimukai', '\"', 'meetings', 'to', 'hear', 'stories', 'directly', 'from', 'Yoshinobu', '.']\n",
            "PRED 682: <unk> の 晩年 に な る と 、 <unk> は <unk> の 伝記 を 作成 する こと を 目的 と し て お り 、 <unk> <unk> を <unk> し 、 <unk> から の <unk> を 開始 し た 。\n",
            "PRED SCORE: -29.2058\n",
            "\n",
            "[2021-08-14 10:38:16,943 INFO] \n",
            "SENT 683: ['A', 'collection', 'of', 'these', 'stories', 'is', 'called', '\"', 'Sekimukai', 'Hikki', '\"', '.']\n",
            "PRED 683: これ ら の 説話 を <unk> <unk> と い う 。\n",
            "PRED SCORE: -7.0671\n",
            "\n",
            "[2021-08-14 10:38:16,943 INFO] \n",
            "SENT 684: ['In', 'one', 'of', 'the', 'chapters', 'which', 'was', 'recorded', 'in', 'the', 'form', 'of', 'a', 'discussion', ',', 'one', 'can', 'see', 'what', 'Yoshinobu', \"'s\", 'voice', ',', 'so', 'to', 'speak', ',', 'was', 'like', '.']\n",
            "PRED 684: <unk> の 形式 で 記 さ れ た <unk> の 一 つ に は 、 <unk> の 声 を 見 る こと が でき る 。\n",
            "PRED SCORE: -18.9095\n",
            "\n",
            "[2021-08-14 10:38:16,943 INFO] \n",
            "SENT 685: ['He', 'used', 'his', 'age', 'as', 'an', 'excuse', 'to', 'evade', 'unpalatable', 'questions', 'and', 'he', 'let', 'out', 'his', 'true', 'feelings', 'by', 'saying', ',', '\"', 'I', 'didn', \"'t\", 'really', 'like', 'Hisamitsu', 'SHIMAZU', '\"', 'and', '\"', 'Naomasa', 'NABESHIMA', 'was', 'a', 'cunning', 'fellow', '\"', ';', 'from', 'these', 'comments', ',', 'one', 'can', 'see', 'his', 'personality', 'and', 'what', 'he', 'was', 'feeling', 'at', 'that', 'time', '.']\n",
            "PRED 685: <unk> <unk> の <unk> と し て 、 「 <unk> <unk> の よう な もの で は な い 」 、 「 <unk> <unk> は <unk> で あ る 」 と <unk> し て い た が 、 これ ら の <unk> から 見 れ ば 、 当時 の <unk> 感 を <unk> し て い た 。\n",
            "PRED SCORE: -52.2840\n",
            "\n",
            "[2021-08-14 10:38:16,944 INFO] \n",
            "SENT 686: ['After', 'Yoshinobu', \"'s\", 'death', '\"', 'Tokugawa', 'Yoshinobu-ko', 'Den', '\"', 'was', 'completed', 'based', 'on', 'these', 'materials', '.']\n",
            "PRED 686: <unk> の 死後 、 これ ら の 資料 に よ り 『 徳川 <unk> 伝 』 が 完成 し た 。\n",
            "PRED SCORE: -11.3728\n",
            "\n",
            "[2021-08-14 10:38:16,944 INFO] \n",
            "SENT 687: ['In', 'order', 'to', 'show', 'his', 'gratitude', 'to', 'Emperor', 'Meiji', 'who', 'pardoned', 'Yoshinobu', 'from', 'being', 'the', 'enemy', 'of', 'the', 'Imperial', 'Court', 'and', 'gave', 'him', 'the', 'title', 'of', 'Koshaku', ',', 'the', 'highest', 'rank', 'of', 'the', 'peers', ',', 'Yoshinobu', 'directed', 'in', 'his', 'will', 'that', 'his', 'funeral', 'be', 'conducted', 'in', 'the', 'Shinto', 'style', 'rather', 'than', 'the', 'Buddhist', 'style', '.']\n",
            "PRED 687: 明治 天皇 に 対 し て <unk> を 許 さ れ た 明治 天皇 に 対 し 、 <unk> の 最高 位 で あ る <unk> <unk> に 対 し 、 神仏 風 より も 葬儀 が 行 わ れ る こと を 示 す 。\n",
            "PRED SCORE: -34.8487\n",
            "\n",
            "[2021-08-14 10:38:16,944 INFO] \n",
            "SENT 688: ['Therefore', ',', 'Yoshinobu', \"'s\", 'grave', 'is', 'neither', 'in', 'the', 'Tokugawa', 'Family', 'graveyard', 'of', 'his', 'family', 'temple', 'Zojo-ji', 'Temple', 'or', 'the', 'Tokugawa', 'Family', 'graveyard', 'at', 'Kan', \"'ei-ji\", 'Temple', ';', 'instead', ',', 'a', 'tumulus', 'similar', 'to', 'that', 'of', 'the', 'Imperial', 'Family', 'was', 'built', 'in', 'Yanaka', 'Cemetery', '.']\n",
            "PRED 688: その ため 、 増上 寺 の 徳川 家 や <unk> 寺 の 徳川 家 の 徳川 家 に は <unk> の 墓 は な く 、 <unk> <unk> に も 同様 の <unk> が 建て られ た 。\n",
            "PRED SCORE: -26.9401\n",
            "\n",
            "[2021-08-14 10:38:16,944 INFO] \n",
            "SENT 689: ['He', 'did', 'so', 'because', 'he', 'was', 'moved', 'by', 'the', 'fact', 'that', 'Emperor', 'Komei', \"'s\", 'tomb', 'was', 'very', 'simple', '(', '\"', 'Tokugawa', 'Yoshinobu-ko', 'Den', '\"', ')', '.']\n",
            "PRED 689: <unk> 天皇 の 墓 は 非常 に 単純 な <unk> （ 『 徳川 <unk> 伝 』 ） で あ る こと に よ り <unk> さ れ た 。\n",
            "PRED SCORE: -18.1687\n",
            "\n",
            "[2021-08-14 10:38:16,944 INFO] \n",
            "SENT 690: ['After', 'his', 'pardon', ',', 'Yoshinobu', 'enjoyed', 'a', 'relaxed', 'life', 'without', 'any', 'regards', 'to', 'his', 'former', 'vassals', 'who', 'devoted', 'their', 'lives', 'to', 'him', ';', 'on', 'this', ',', 'Roju', 'Katsukiyo', 'ITAKURA', 'later', 'commented', ',', '\"', 'I', 'regret', 'working', 'together', 'with', 'Yoshinobu', '\"', '.']\n",
            "PRED 690: <unk> は 赦免 さ れ た 後 、 <unk> に <unk> し た 家臣 に 対 し て <unk> な 生活 を 送 っ た が 、 後 に <unk> <unk> は 『 <unk> 』 と とも に <unk> し た 。\n",
            "PRED SCORE: -35.5388\n",
            "\n",
            "[2021-08-14 10:38:17,647 INFO] \n",
            "SENT 691: ['Even', 'though', 'he', 'has', 'an', 'image', 'of', 'being', 'a', 'spineless', 'coward', ',', 'because', 'he', '\"', 'ran', 'away', 'in', 'the', 'face', 'of', 'his', 'enemy', '\"', 'during', 'the', 'Battle', 'of', 'Toba-Fushimi', ',', 'there', 'has', 'recently', 'been', 'a', 'focus', 'on', 'his', 'attempt', 'at', 'constructing', 'a', 'new', ',', 'modern', 'political', 'system', 'after', 'Taisei', 'Hokan', ',', 'and', 'there', 'is', 'a', 'movement', 'to', 're-evaluate', 'his', 'contributions', 'including', 'airing', 'of', '\"', 'TOKUGAWA', 'Yoshinobu', '\"', '(', 'an', 'NHK', 'Taiga', 'Drama', ')', '.']\n",
            "PRED 691: <unk> の 戦い に お い て 「 <unk> の 顔 に <unk> し た 」 と い う イメージ が あ る が 、 近年 で は <unk> <unk> に よ る 新 政治 体制 の <unk> を 図 っ て お り 、 『 NHK <unk> ドラマ 』 など の <unk> を <unk> する 動き も 見 られ る 。\n",
            "PRED SCORE: -47.3081\n",
            "\n",
            "[2021-08-14 10:38:17,647 INFO] \n",
            "SENT 692: ['As', 'with', 'his', 'father', ',', 'Nariaki', ',', 'he', 'liked', 'pork', 'from', 'Satsuma-han', 'Clan', 'and', 'he', 'was', 'called', 'Butaichi-sama', '(', 'meaning', 'Hitotsubashi-sama', 'who', 'likes', 'pork', ')', '.']\n",
            "PRED 692: <unk> は 父 <unk> と 同様 に <unk> を 好 み 、 <unk> と 呼 ば れ た 。\n",
            "PRED SCORE: -12.7311\n",
            "\n",
            "[2021-08-14 10:38:17,647 INFO] \n",
            "SENT 693: ['He', 'was', 'interested', 'in', 'items', 'of', 'western', 'culture', ',', 'and', 'in', 'his', 'later', 'years', 'he', 'liked', 'to', 'eat', 'bread', 'and', 'drink', 'milk', 'and', 'he', 'enjoyed', 'his', 'interests', 'in', 'photography', ',', 'fishing', ',', 'riding', 'the', 'bicycle', ',', 'microscopy', 'and', 'craft', '(', 'embroidery', ')', '.', 'During', 'his', 'tenure', 'as', 'the', 'Shogun', ',', 'he', 'learned', 'French', 'from', 'Amane', 'NISHI', 'but', 'he', 'gave', 'up', 'on', 'this', '.']\n",
            "PRED 693: <unk> 文化 に 関心 が あ り 、 晩年 は <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> など の <unk> を 好 ん で い た が 、 これ を <unk> し た 。\n",
            "PRED SCORE: -26.9471\n",
            "\n",
            "[2021-08-14 10:38:17,648 INFO] \n",
            "SENT 694: ['He', 'was', 'well', 'know', 'as', 'a', 'photographer', ',', 'but', 'his', 'techniques', 'in', 'photography', 'seemed', 'to', 'have', 'been', 'mediocre', '.']\n",
            "PRED 694: <unk> と し て も よく 知 ら れ て い た が 、 <unk> の 技術 は <unk> で あ っ た よう で あ る 。\n",
            "PRED SCORE: -15.0668\n",
            "\n",
            "[2021-08-14 10:38:17,648 INFO] \n",
            "SENT 695: ['He', 'often', 'submitted', 'his', 'photographs', 'to', 'photography', 'magazines', ',', 'but', 'his', 'photographs', 'were', 'hardly', 'ever', 'printed', 'in', 'the', 'magazines', '.']\n",
            "PRED 695: <unk> 雑誌 に <unk> を 提出 する こと が 多 かっ た が 、 雑誌 で は ほとんど <unk> さ れ な かっ た 。\n",
            "PRED SCORE: -15.9749\n",
            "\n",
            "[2021-08-14 10:38:17,648 INFO] \n",
            "SENT 696: ['His', 'great', 'grandchild', ',', 'Yoshitomo', 'TOKUGAWA', ',', 'is', 'a', 'freelance', 'photographer', ';', 'he', 'discovered', 'photographs', 'stored', 'in', 'the', 'Yoshinobu', 'TOKUGAWA', 'Family', 'including', 'the', 'ones', 'taken', 'by', 'Yoshinobu', 'and', 'he', 'published', 'the', 'photo', 'album', 'after', 'organizing', 'and', 'editing', 'them', '.']\n",
            "PRED 696: 曾孫 の 徳川 <unk> は <unk> な <unk> で あ り 、 <unk> を はじめ と する 徳川 家 の <unk> を 発見 し 、 <unk> ・ 編集 を 経 て <unk> を <unk> し た 。\n",
            "PRED SCORE: -29.1890\n",
            "\n",
            "[2021-08-14 10:38:17,648 INFO] \n",
            "SENT 697: ['Yoshinobu', \"'s\", 'biological', 'younger', 'brother', ',', 'Akitake', 'TOKUGAWA', ',', 'was', 'his', 'friend', 'who', 'shared', 'his', 'hobbies', 'in', 'his', 'life', '.']\n",
            "PRED 697: <unk> の 弟 で あ る 徳川 <unk> は <unk> の <unk> で あ る 。\n",
            "PRED SCORE: -12.1375\n",
            "\n",
            "[2021-08-14 10:38:17,649 INFO] \n",
            "SENT 698: ['He', 'married', 'Mikako', 'ICHIJO', '(', 'name', 'changed', 'to', 'Mikako', 'after', 'the', 'Meiji', 'Restoration', ')', 'on', 'December', '3', ',', '1855', '.']\n",
            "PRED 698: <unk> 年 12 月 3 日 、 <unk> <unk> （ 明治 維新 後 に <unk> と 改名 ） と 結婚 。\n",
            "PRED SCORE: -11.8874\n",
            "\n",
            "[2021-08-14 10:38:17,649 INFO] \n",
            "SENT 699: ['The', 'first', 'daughter', '(', 'Keikoin', ')', 'between', 'Mika', 'was', 'born', 'on', 'July', '16', ',', '1858', 'but', 'she', 'soon', 'died', 'on', 'July', '20', '.']\n",
            "PRED 699: <unk> 年 7 月 16 日 に <unk> と の 第 1 皇女 （ <unk> ） が 生まれ る が 、 間 も な く 7 月 20 日 に 死去 し た 。\n",
            "PRED SCORE: -16.8351\n",
            "\n",
            "[2021-08-14 10:38:17,649 INFO] \n",
            "SENT 700: ['Afterwards', ',', 'there', 'were', 'no', 'more', 'children', 'between', 'Mika', ';', 'the', '10', 'boys', 'and', '11', 'girls', 'born', 'during', 'the', 'Meiji', 'era', 'were', 'children', 'born', 'between', 'his', 'two', 'concubines', '.']\n",
            "PRED 700: 基本 的 に <unk> と の 間 に は 子供 が い な く な り 、 明治 期 に 生まれ た 10 人 と 11 人 の 男子 が 生まれ た 。\n",
            "PRED SCORE: -23.1665\n",
            "\n",
            "[2021-08-14 10:38:17,649 INFO] \n",
            "SENT 701: ['Some', 'of', 'these', 'children', 'include', 'the', 'seventh', 'son', ',', 'Yoshihisa', ',', 'who', 'became', 'a', 'Koshaku', 'and', 'succeeded', 'to', 'the', 'Yoshinobu', 'TOKUGAWA', 'Family', ',', 'tenth', 'son', ',', 'Kuwashi', ',', 'who', 'married', 'into', 'Kaishu', 'KATSU', \"'s\", 'family', 'and', 'ninth', 'daughter', ',', 'Tsuneko', ',', 'who', 'became', 'Prince', 'Fushimi', 'Hiroyasu', '.']\n",
            "PRED 701: これ ら の 中 に は 、 <unk> と な っ て 徳川 <unk> 家 を 継 い だ 七男 の <unk> 、 10 男 の <unk> 、 <unk> の <unk> に 嫁 い で 伏見 宮 <unk> 親王 と な っ た <unk> が い る 。\n",
            "PRED SCORE: -34.8624\n",
            "\n",
            "[2021-08-14 10:38:17,650 INFO] \n",
            "SENT 702: ['Some', 'of', 'Yoshihisa', \"'s\", 'children', 'include', 'Yoshimitsu', 'TOKUGAWA', 'and', 'Princess', 'Kikuko', 'who', 'married', 'Prince', 'Takamatsu', 'Nobuhito', '.']\n",
            "PRED 702: <unk> の 子 に は 徳川 義満 、 <unk> <unk> と 結婚 し た <unk> <unk> ら が い る 。\n",
            "PRED SCORE: -9.9860\n",
            "\n",
            "[2021-08-14 10:38:17,650 INFO] \n",
            "SENT 703: ['Wife', ':', 'Mikako', 'ICHIJO', '(', 'name', 'changed', 'to', 'Mikako', 'after', 'the', 'Meiji', 'Restoration', ')', '(', 'daughter', 'of', 'Kinhisa', 'IMADEGAWA', ',', 'adopted', 'daughter', 'of', 'Tadaka', 'ICHIJO', ',', 'July', '19', ',', '1835', '-', 'July', '9', ',', '1894']\n",
            "PRED 703: <unk> 年 （ 明治 維新 後 の <unk> 年 ） ： <unk> <unk> （ <unk> <unk> の 娘 、 <unk> <unk> の 養女 、 <unk> 年 7 月 19 日 - <unk> 年 7 月 9 日 ）\n",
            "PRED SCORE: -14.1649\n",
            "\n",
            "[2021-08-14 10:38:17,650 INFO] \n",
            "SENT 704: ['Concubine', ':', 'Nobu', 'SHINMURA', '(', 'daughter', 'of', 'Masataka', 'MATSUDAIRA', ',', 'adopted', 'daughter', 'of', 'Takeo', 'SHINMURA', ',', 'died', 'on', 'February', '8', ',', '1905', ')']\n",
            "PRED 704: <unk> 年 （ <unk> 2 年 ） ： <unk> <unk> （ 松平 <unk> 養女 、 1905 年 2 月 8 日 死去 ）\n",
            "PRED SCORE: -10.3402\n",
            "\n",
            "[2021-08-14 10:38:17,650 INFO] \n",
            "SENT 705: ['First', 'son', ':', 'Keiji', '(', 'June', '29', ',', '1871', '-', 'May', '22', ',', '1872', ')']\n",
            "PRED 705: 長男 <unk> （ 1871 年 6 月 29 日 - 1872 年 5 月 22 日 ）\n",
            "PRED SCORE: -3.7396\n",
            "\n",
            "[2021-08-14 10:38:17,651 INFO] \n",
            "SENT 706: ['First', 'daughter', ':', 'Kyoko', '(', 'June', '2', ',', '1873', '-', 'September', '29', ',', '1893', ',', 'married', 'Satotaka', 'TOKUGAWA', ',', 'on', 'March', '23', ',', '1887', ')']\n",
            "PRED 706: <unk> <unk> （ <unk> 年 6 月 2 日 - <unk> 年 9 月 29 日 、 徳川 <unk> と 結婚 ）\n",
            "PRED SCORE: -7.2550\n",
            "\n",
            "[2021-08-14 10:38:17,651 INFO] \n",
            "SENT 707: ['Third', 'daughter', ':', 'Tetsuko', '(', 'October', '27', ',', '1875', '-', 'December', '10', ',', '1921', ',', 'married', 'Satomichi', 'TOKUGAWA', 'on', 'December', '30', ',', '1890', ')']\n",
            "PRED 707: 三女 <unk> （ 1875 年 10 月 27 日 - <unk> 年 12 月 10 日 、 徳川 <unk> と 結婚 ）\n",
            "PRED SCORE: -7.6717\n",
            "\n",
            "[2021-08-14 10:38:17,651 INFO] \n",
            "SENT 708: ['Fifth', 'son', ':', 'Nakahiro', 'IKEDA', '(', 'August', '28', ',', '1877', '-', 'January', '1', ',', '1948', ',', 'adopted', 'by', 'Terutomo', 'IKEDA', 'on', 'February', '25', ',', '1890', ')']\n",
            "PRED 708: 5 男 池田 <unk> （ 1877 年 8 月 28 日 - 1948 年 1 月 1 日 池田 <unk> 養子 ）\n",
            "PRED SCORE: -6.2370\n",
            "\n",
            "[2021-08-14 10:38:17,651 INFO] \n",
            "SENT 709: ['Sixth', 'son', ':', 'Hitoshi', '(', 'August', '17', ',', '1878', '-', 'November', '28', ',', '1878', ')']\n",
            "PRED 709: <unk> <unk> （ <unk> 年 8 月 17 日 - <unk> 年 11 月 28 日 ）\n",
            "PRED SCORE: -4.5215\n",
            "\n",
            "[2021-08-14 10:38:17,652 INFO] \n",
            "SENT 710: ['Sixth', 'daughter', ':', 'Yoshiko', '(', 'August', '24', ',', '1880', '-', 'September', '29', ',', '1880', ')']\n",
            "PRED 710: <unk> <unk> （ <unk> 年 8 月 24 日 - <unk> 年 9 月 29 日 ）\n",
            "PRED SCORE: -4.4495\n",
            "\n",
            "[2021-08-14 10:38:17,652 INFO] \n",
            "SENT 711: ['Ninth', 'daughter', ':', 'Tsuneko', '(', 'September', '23', ',', '1882', '-', 'August', '18', ',', '1939', ',', 'married', 'to', 'Prince', 'Fushimi', 'Hiroyasu', 'on', 'January', '9', ',', '1897', ')']\n",
            "PRED 711: <unk> <unk> （ <unk> 年 9 月 23 日 - 1939 年 8 月 18 日 、 伏見 宮 <unk> 親王 に 嫁 ぐ ）\n",
            "PRED SCORE: -9.8062\n",
            "\n",
            "[2021-08-14 10:38:17,652 INFO] \n",
            "SENT 712: ['Seventh', 'son', ':', 'Yoshihisa', 'TOKUGAWA', '(', 'September', '2', ',', '1884', '-', 'January', '22', ',', '1922', ')']\n",
            "PRED 712: <unk> … 徳川 <unk> （ 1884 年 9 月 2 日 - <unk> 年 1 月 22 日 ）\n",
            "PRED SCORE: -5.4883\n",
            "\n",
            "[2021-08-14 10:38:17,652 INFO] \n",
            "SENT 713: ['Eleventh', 'daughter', ':', 'Hideko', '(', 'March', '22', ',', '1887', '-', 'July', '5', ',', '1924', ',', 'married', 'Kuniyuki', 'TOKUGAWA', 'on', 'April', '29', ',', '1911', ')']\n",
            "PRED 713: <unk> <unk> （ <unk> 年 3 月 22 日 - 1924 年 7 月 5 日 、 徳川 <unk> と 結婚 ）\n",
            "PRED SCORE: -7.4088\n",
            "\n",
            "[2021-08-14 10:38:17,653 INFO] \n",
            "SENT 714: ['Tenth', 'son', ':', 'Kuwashi', 'KATSU', '(', 'August', '23', ',', '1888', '-', 'July', '10', ',', '1932', ',', 'married', 'into', 'Kaishu', 'KATSU', \"'s\", 'family', 'on', 'January', '20', ',', '1899', ')']\n",
            "PRED 714: <unk> <unk> ： <unk> <unk> （ <unk> 年 8 月 23 日 - <unk> 年 7 月 10 日 、 <unk> <unk> の <unk> に 嫁 ぐ ）\n",
            "PRED SCORE: -14.2425\n",
            "\n",
            "[2021-08-14 10:38:17,653 INFO] \n",
            "SENT 715: ['Concubine', ':', 'Ko', 'NAKANE', '(', 'first', 'daughter', 'of', 'Yoshisaburo', 'NAKANE', ',', 'died', 'on', 'December', '29', ',', '1915', ')']\n",
            "PRED 715: <unk> 年 <unk> <unk> <unk> （ <unk> <unk> の <unk> 、 <unk> 年 12 月 29 日 死去 ）\n",
            "PRED SCORE: -8.9266\n",
            "\n",
            "[2021-08-14 10:38:17,653 INFO] \n",
            "SENT 716: ['Second', 'son', ':', 'Zenji', '(', 'September', '8', ',', '1871', '-', 'March', '10', ',', '1872', ')']\n",
            "PRED 716: 次男 ： 禅師 （ 1871 年 9 月 8 日 - 1872 年 3 月 10 日 ）\n",
            "PRED SCORE: -4.2786\n",
            "\n",
            "[2021-08-14 10:38:17,653 INFO] \n",
            "SENT 717: ['Thrid', 'son', ':', 'Takuma', '(', 'October', '5', ',', '1872', '-', 'July', '5', ',', '1873', ')']\n",
            "PRED 717: <unk> <unk> （ 1872 年 10 月 5 日 - <unk> 年 7 月 5 日 ）\n",
            "PRED SCORE: -4.2725\n",
            "\n",
            "[2021-08-14 10:38:17,654 INFO] \n",
            "SENT 718: ['Fourth', 'son', ':', 'Atsushi', 'TOKUGAWA', '(', 'February', '21', ',', '1874', '-', 'June', '12', ',', '1930', ')']\n",
            "PRED 718: <unk> … 徳川 <unk> （ 1874 年 2 月 21 日 - 1930 年 6 月 12 日 ）\n",
            "PRED SCORE: -6.1005\n",
            "\n",
            "[2021-08-14 10:38:17,654 INFO] \n",
            "SENT 719: ['Second', 'daughter', ':', 'Kinko', '(', 'April', '3', ',', '1875', '-', 'July', '22', ',', '1875', ')']\n",
            "PRED 719: <unk> <unk> （ 1875 年 4 月 3 日 - 1875 年 7 月 22 日 ）\n",
            "PRED SCORE: -3.5829\n",
            "\n",
            "[2021-08-14 10:38:17,654 INFO] \n",
            "SENT 720: ['Fourth', 'daughter', ':', 'Fudeko', '(', 'July', '17', ',', '1876', '-', 'November', '30', ',', '1907', ',', 'married', 'Masaaki', 'HACHISUKA', 'on', 'December', '26', ',', '1895', ')']\n",
            "PRED 720: <unk> <unk> （ 1876 年 7 月 17 日 - <unk> 年 11 月 30 日 、 <unk> <unk> と 結婚 ）\n",
            "PRED SCORE: -7.2560\n",
            "\n",
            "[2021-08-14 10:38:17,980 INFO] \n",
            "SENT 721: ['Fifth', 'daughter', ':', 'Hisako', '(', 'August', '17', ',', '1878', '-', 'October', '8', ',', '1878', ')']\n",
            "PRED 721: 5 男 <unk> （ <unk> 年 8 月 17 日 - <unk> 年 10 月 8 日 ）\n",
            "PRED SCORE: -6.0048\n",
            "\n",
            "[2021-08-14 10:38:17,981 INFO] \n",
            "SENT 722: ['Seventh', 'daughter', ':', 'Namiko', '(', 'September', '17', ',', '1880', '-', 'January', '13', ',', '1954', ',', 'married', 'Hitoshi', 'MATSUDAIRA', 'on', 'December', '7', ',', '1895', ')']\n",
            "PRED 722: <unk> <unk> （ <unk> 年 9 月 17 日 - 1954 年 1 月 13 日 、 松平 <unk> と 結婚 ）\n",
            "PRED SCORE: -7.2951\n",
            "\n",
            "[2021-08-14 10:38:17,981 INFO] \n",
            "SENT 723: ['Eighth', 'daughter', ':', 'Kuniko', '(', 'January', '23', ',', '1882', '-', 'September', '11', ',', '1942', ',', 'married', 'Kiko', 'OKOCHI', 'on', 'May', '7', ',', '1901', ')']\n",
            "PRED 723: <unk> <unk> （ <unk> 年 1 月 23 日 - <unk> 年 9 月 11 日 、 <unk> <unk> と 結婚 ）\n",
            "PRED SCORE: -7.6320\n",
            "\n",
            "[2021-08-14 10:38:17,981 INFO] \n",
            "SENT 724: ['Tenth', 'daughter', ':', 'Itoko', '(', 'September', '18', ',', '1883', '-', 'October', '11', ',', '1953', ',', 'married', 'Takachika', 'SHIJO', 'on', 'May', '19', ',', '1906', ')']\n",
            "PRED 724: <unk> <unk> （ 1883 年 9 月 18 日 - 1953 年 10 月 11 日 、 <unk> <unk> と 結婚 ）\n",
            "PRED SCORE: -8.0379\n",
            "\n",
            "[2021-08-14 10:38:17,981 INFO] \n",
            "SENT 725: ['A', 'boy', '(', 'stillborn', 'on', 'August', '22', ',', '1884', ')']\n",
            "PRED 725: 少年 （ 1884 年 8 月 22 日 ）\n",
            "PRED SCORE: -2.7434\n",
            "\n",
            "[2021-08-14 10:38:17,982 INFO] \n",
            "SENT 726: ['Eighth', 'son', ',', 'Yasushi', '(', 'September', '22', ',', '1885', '-', 'July', '2', ',', '1886', ')']\n",
            "PRED 726: <unk> <unk> （ 1885 年 9 月 22 日 - 1886 年 7 月 2 日 ）\n",
            "PRED SCORE: -3.9270\n",
            "\n",
            "[2021-08-14 10:38:17,982 INFO] \n",
            "SENT 727: ['Ninth', 'son', ',', 'Makoto', 'TOKUGAWA', '(', 'October', '31', ',', '1887', '-', 'November', '11', ',', '1968', ')']\n",
            "PRED 727: <unk> の 子 徳川 <unk> （ <unk> 年 10 月 31 日 - <unk> 年 11 月 11 日 ）\n",
            "PRED SCORE: -5.7624\n",
            "\n",
            "[2021-08-14 10:38:17,982 INFO] \n",
            "SENT 728: ['A', 'girl', '(', 'stillborn', 'on', 'June', '2', ',', '1891', ')']\n",
            "PRED 728: 少女 （ <unk> 年 6 月 2 日 ）\n",
            "PRED SCORE: -2.8968\n",
            "\n",
            "[2021-08-14 10:38:17,982 INFO] \n",
            "SENT 729: ['Concubine', ':', 'Yoshi', '(', 'Tatsugoro', 'SHINMON', \"'s\", 'daughter', ')']\n",
            "PRED 729: <unk> 年 <unk> <unk> （ <unk> <unk> の 娘 ）\n",
            "PRED SCORE: -5.3535\n",
            "\n",
            "[2021-08-14 10:38:17,983 INFO] \n",
            "SENT 730: ['Novels']\n",
            "PRED 730: 小説\n",
            "PRED SCORE: -0.1416\n",
            "\n",
            "[2021-08-14 10:38:17,983 INFO] \n",
            "SENT 731: ['\"', 'The', 'Last', 'Shogun', '-', 'TOKUGAWA', 'Yoshinobu', '\"', '(', 'Ryotaro', 'SHIBA', ')']\n",
            "PRED 731: 『 <unk> 将軍 － 徳川 <unk> 』\n",
            "PRED SCORE: -3.9603\n",
            "\n",
            "[2021-08-14 10:38:17,983 INFO] \n",
            "SENT 732: ['\"', 'TOKUGAWA', 'Yoshinobu', '\"', '(', 'Sohachi', 'YAMAOKA', ')']\n",
            "PRED 732: 『 徳川 <unk> 』\n",
            "PRED SCORE: -2.5638\n",
            "\n",
            "[2021-08-14 10:38:17,983 INFO] \n",
            "SENT 733: ['Movies']\n",
            "PRED 733: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:17,984 INFO] \n",
            "SENT 734: ['\"', 'When', 'the', 'Last', 'Sword', 'Is', 'Drawn', '(', 'Movie', ')', '\"', '2003', ',', 'starring', 'Hideaki', 'ITO']\n",
            "PRED 734: 『 <unk> <unk> <unk> 』 （ <unk> 年 ） <unk> <unk>\n",
            "PRED SCORE: -12.1524\n",
            "\n",
            "[2021-08-14 10:38:17,984 INFO] \n",
            "SENT 735: ['Drama', 'Series']\n",
            "PRED 735: <unk> 系\n",
            "PRED SCORE: -1.4745\n",
            "\n",
            "[2021-08-14 10:38:17,984 INFO] \n",
            "SENT 736: ['\"', 'Ryoma', 'ga', 'Yuku', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '(', '1968', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Tatsunosuke', 'ONOE', '(', 'the', 'original', ')', ')']\n",
            "PRED 736: 『 NHK <unk> ドラマ 』 （ NHK <unk> ドラマ 、 NHK <unk> ドラマ 、 <unk> ）\n",
            "PRED SCORE: -10.8391\n",
            "\n",
            "[2021-08-14 10:38:17,984 INFO] \n",
            "SENT 737: ['\"', 'Ooku', '(', 'TV', 'Drama', ')', 'produced', 'in1968', ',', 'drama', 'content', '\"', '(', '1968', ',', 'Fuji', 'Television', ',', 'Yoshinobu', 'performed', 'by', 'Shigeru', 'AMACHI', '\"']\n",
            "PRED 737: 『 <unk> ( テレビ ドラマ ) 』 『 <unk> ( テレビ ドラマ ) 』\n",
            "PRED SCORE: -10.8923\n",
            "\n",
            "[2021-08-14 10:38:17,985 INFO] \n",
            "SENT 738: ['\"', 'KATSU', 'Kaishu', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '(', '1974', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Masahiko', 'TSUGAWA', ')']\n",
            "PRED 738: 『 <unk> <unk> 』 （ NHK <unk> ドラマ 、 NHK <unk> ドラマ 、 <unk> <unk> ）\n",
            "PRED SCORE: -8.0581\n",
            "\n",
            "[2021-08-14 10:38:17,985 INFO] \n",
            "SENT 739: ['\"', 'Kashin', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '(', '1977', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Takao', 'ITO', ')']\n",
            "PRED 739: 『 <unk> ( NHK <unk> ドラマ ) 』 （ <unk> 年 NHK <unk> ドラマ 、 演 ： <unk> <unk> ）\n",
            "PRED SCORE: -7.2997\n",
            "\n",
            "[2021-08-14 10:38:17,985 INFO] \n",
            "SENT 740: ['\"', 'Ryoma', 'ga', 'Yuku', '1982', 'version', '\"', '(', '1982', ',', 'TV', 'Tokyo', 'New', 'Year', \"'s\", 'Wide', 'Historical', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Tomoki', 'KENMOCHI', ')']\n",
            "PRED 740: 『 <unk> <unk> <unk> 』 （ 1982 年 、 テレビ 東京 <unk> 、 <unk> <unk> ）\n",
            "PRED SCORE: -12.3555\n",
            "\n",
            "[2021-08-14 10:38:17,985 INFO] \n",
            "SENT 741: ['\"', 'Ooku', '(', 'TV', 'Drama', ')', 'produced', 'in', '1983', ',', 'drama', 'content', '\"', '(', '1983', ',', 'Fuji', 'Television', ',', 'Yoshinobu', 'performed', 'by', 'Gaku', 'YAMAMOTO', ')']\n",
            "PRED 741: 1983 年 に 製作 さ れ た 『 <unk> ( テレビ ドラマ ) 』 （ 1983 年 、 フジ <unk> 、 <unk> <unk> ）\n",
            "PRED SCORE: -12.6542\n",
            "\n",
            "[2021-08-14 10:38:17,985 INFO] \n",
            "SENT 742: ['\"', 'Byakkotai', '(', 'a', 'TV', 'drama', 'of', 'Nippon', 'Television', ')', '\"', '(', '1986', ',', 'Nippon', 'Television', 'End-of-the-Year', 'Historical', 'Drama', 'Special', ',', 'Yoshinobu', 'performed', 'by', 'Nobuyuki', 'ISHIDA', ')']\n",
            "PRED 742: 『 <unk> ( テレビ ドラマ ) 』 （ <unk> 年 、 石田 <unk> ）\n",
            "PRED SCORE: -10.0907\n",
            "\n",
            "[2021-08-14 10:38:17,986 INFO] \n",
            "SENT 743: ['\"', 'Hana', 'no', 'Shogai', 'Ii', 'Tairo', 'to', 'Sakuradamon', '(', 'A', 'Flamboyant', 'Life', ',', 'Ii', 'Tairo', 'and', 'Sakurada-mon', 'Gate', ')', '\"', '(', '1988', ',', 'TV', 'Tokyo', '12-hour', 'Super', 'Wide', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Ikuo', 'KOKUBUN', ')']\n",
            "PRED 743: 『 <unk> の <unk> 』 （ <unk> ・ <unk> ）\n",
            "PRED SCORE: -9.6717\n",
            "\n",
            "[2021-08-14 10:38:17,986 INFO] \n",
            "SENT 744: ['\"', 'Goryokaku', '(', 'TV', 'Drama', ')', '\"', '(', '1988', ',', 'Nippon', 'Television', 'End-of-the-Year', 'Historical', 'Drama', 'Special', ',', 'Yoshinobu', 'performed', 'by', 'Nobuyuki', 'ISHIDA', ')']\n",
            "PRED 744: 『 <unk> ( テレビ ドラマ ) 』 （ <unk> テレビ ドラマ 、 石田 <unk> ）\n",
            "PRED SCORE: -10.3289\n",
            "\n",
            "[2021-08-14 10:38:17,986 INFO] \n",
            "SENT 745: ['\"', 'Tobu', 'ga', 'Gotoku', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '(', '1990', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Kunihiko', 'MITAMURA', ')']\n",
            "PRED 745: 『 <unk> <unk> <unk> 』 （ NHK <unk> ドラマ 、 NHK <unk> ドラマ ）\n",
            "PRED SCORE: -8.8058\n",
            "\n",
            "[2021-08-14 10:38:17,986 INFO] \n",
            "SENT 746: ['\"', 'KATSU', 'Kaishu', '(', 'TV', 'Drama', ')', '\"', '(', '1990', ',', 'Nippon', 'Television', 'End-of-the-Year', 'Historical', 'Drama', 'Special', ',', 'Yoshinobu', 'performed', 'by', 'Masahiko', 'TSUGAWA', ')']\n",
            "PRED 746: 『 <unk> ( テレビ ドラマ ) 』 （ <unk> <unk> 、 <unk> <unk> ）\n",
            "PRED SCORE: -12.6014\n",
            "\n",
            "[2021-08-14 10:38:17,987 INFO] \n",
            "SENT 747: ['\"', 'TOKUGAWA', 'Yoshinobu', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '(', '1998', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Masahiro', 'MOTOKI', ')']\n",
            "PRED 747: 『 徳川 <unk> ( NHK <unk> ドラマ ) 』\n",
            "PRED SCORE: -4.8326\n",
            "\n",
            "[2021-08-14 10:38:17,987 INFO] \n",
            "SENT 748: ['\"', 'Ooku', '(', 'TV', 'Drama', ')', 'produced', 'in', '2003', ',', 'drama', 'content', '\"', '(', '2003', ',', 'Fuji', 'Television', ',', 'Yoshinobu', 'performed', 'by', 'Ginnojo', 'YAMAZAKI', ')']\n",
            "PRED 748: 『 <unk> ( テレビ ドラマ ) 』 （ <unk> 年 、 フジ <unk> 、 <unk> ）\n",
            "PRED SCORE: -14.6114\n",
            "\n",
            "[2021-08-14 10:38:17,987 INFO] \n",
            "SENT 749: ['\"', 'Matamo', 'Yametaka', 'Teishudono', '-', 'Bakumatsu', 'no', 'Meibugyo', ',', 'OGURI', 'Kozunosuke', '-', '(', 'Quitting', 'Job', 'Again', ',', 'Mr.', 'Husband', '?', '-', 'The', 'Great', 'Magistrate', 'at', 'the', 'End', 'of', 'the', 'Edo', 'Period', ',', 'OGURI', 'Kozukenosuke', ')', '\"', '(', '2003', ',', 'NHK', 'New', 'Year', \"'s\", 'Historical', 'Drama', ',', 'starring', 'Yoshinori', 'HIRUMA', ')']\n",
            "PRED 749: 『 <unk> <unk> <unk> 』 - <unk> <unk> - （ 江戸 時代 中期 、 <unk> <unk> 、 <unk> <unk> ）\n",
            "PRED SCORE: -18.2886\n",
            "\n",
            "[2021-08-14 10:38:17,987 INFO] \n",
            "SENT 750: ['\"', 'Shinsengumi', '!', '\"', '(', '2004', ',', 'NHK', 'Taiga', 'Drama', ',', 'starring', 'Yoshinobu', 'performed', 'by', 'Tomohiko', 'IMAI', ')']\n",
            "PRED 750: 『 <unk> <unk> 』 （ 2004 年 NHK <unk> ドラマ 、 <unk> <unk> ）\n",
            "PRED SCORE: -6.5403\n",
            "\n",
            "[2021-08-14 10:38:18,756 INFO] \n",
            "SENT 751: ['\"', 'Atsuhime', '(', 'NHK', 'Taiga', 'Drama', ')', '\"', '2008', ',', 'NHK', 'Taiga', 'Drama', ',', 'Yoshinobu', 'performed', 'by', 'Takehiro', 'HIRA', ')']\n",
            "PRED 751: 『 <unk> ( NHK <unk> ドラマ ) 』 2008 年 NHK <unk> ドラマ\n",
            "PRED SCORE: -6.6378\n",
            "\n",
            "[2021-08-14 10:38:18,756 INFO] \n",
            "SENT 752: ['\"', 'Sekimukai', 'Hikki', '\"', '(', 'memoirs', ')']\n",
            "PRED 752: 『 <unk> <unk> 』\n",
            "PRED SCORE: -2.9068\n",
            "\n",
            "[2021-08-14 10:38:18,757 INFO] \n",
            "SENT 753: ['\"', 'TOKUGAWA', 'Yoshinobu-ko', 'Den', '(', 'A', 'Biography', 'of', 'Yoshinobu', 'TOKUGAWA', ')', '\"', 'by', 'Eiichi', 'SHIBUSAWA', ',', '1918']\n",
            "PRED 753: <unk> <unk> 『 徳川 <unk> 伝 』\n",
            "PRED SCORE: -2.9915\n",
            "\n",
            "[2021-08-14 10:38:18,757 INFO] \n",
            "SENT 754: ['\"', 'Shogun', 'ga', 'Totta', 'Meiji', '-', 'TOKUGAWA', 'Yoshinobu-ko', 'Satsuei', 'Shashinshu', '(', 'Meiji', 'as', 'Photographed', 'by', 'a', 'Shogun', '-', 'An', 'Album', 'of', 'Photographs', 'Taken', 'by', 'Yoshinobu', 'TOKUGAWA', '\"', 'Asahi', 'Shinbun-sha', ',', '1986', ',', 'ISBN', '4022555599']\n",
            "PRED 754: 『 将軍 <unk> 明治 <unk> 』 - 徳川 <unk> <unk> <unk> （ 明治 将軍 <unk> <unk> <unk> ） ＜ <unk> ＞ 朝日 新聞 社 、 <unk>\n",
            "PRED SCORE: -31.8997\n",
            "\n",
            "[2021-08-14 10:38:18,757 INFO] \n",
            "SENT 755: ['Notes']\n",
            "PRED 755: <unk>\n",
            "PRED SCORE: -0.7338\n",
            "\n",
            "[2021-08-14 10:38:18,757 INFO] \n",
            "SENT 756: ['The', 'JR', 'Nara', 'Line', 'is', 'a', 'railway', 'line', '(', 'arterial', 'line', ')', 'of', 'the', 'West', 'Japan', 'Railway', 'Company', '(', 'JR', 'West', ')', 'that', 'runs', 'between', 'Kizu', 'Station', '(', 'Kyoto', 'Prefecture', ')', 'in', 'Kizugawa', 'City', ',', 'Kyoto', 'Prefecture', ',', 'and', 'Kyoto', 'Station', 'in', 'the', 'Shimogyo', 'Ward', 'of', 'Kyoto', 'City', ',', 'Kyoto', 'Prefecture', '.']\n",
            "PRED 756: <unk> 奈良 線 （ <unk> <unk> ） は 、 京都 府 木津川 市 の <unk> <unk> ( 京都 府 ) と 京都 府 京都 市 下京 区 の 京都 <unk> の 間 に あ る 西 日本 <unk> <unk> （ <unk> 線 ） の <unk> 。\n",
            "PRED SCORE: -21.2927\n",
            "\n",
            "[2021-08-14 10:38:18,758 INFO] \n",
            "SENT 757: ['The', 'entire', 'rail', 'line', 'is', 'included', 'in', 'the', 'section', 'covering', 'the', 'metropolitan', 'area', 'and', 'its', 'suburbs', '.']\n",
            "PRED 757: <unk> <unk> は 、 都市 部 と <unk> を 扱 う <unk> に 含 ま れ る 。\n",
            "PRED SCORE: -13.7760\n",
            "\n",
            "[2021-08-14 10:38:18,758 INFO] \n",
            "SENT 758: ['Although', 'the', 'Nara', 'Line', 'officially', 'starts', 'at', 'Kizu', 'Station', 'because', 'it', 'is', 'historically', 'a', 'branch', 'line', 'of', 'the', 'Kansai', 'Main', 'Line', ',', 'outbound', 'trains', '(', 'odd-numbered', 'trains', ')', 'run', 'from', 'Kyoto', 'to', 'Kizu', 'and', 'inbound', 'trains', '(', 'even-numbered', 'trains', ')', 'run', 'in', 'the', 'opposite', 'direction', '.']\n",
            "PRED 758: 奈良 <unk> は 関西 <unk> の 流れ を 汲 む <unk> <unk> で あ る が 、 京都 から <unk> <unk> （ <unk> <unk> ） が <unk> し 、 逆 方向 に <unk> <unk> （ <unk> <unk> ） が <unk> する 。\n",
            "PRED SCORE: -31.8271\n",
            "\n",
            "[2021-08-14 10:38:18,758 INFO] \n",
            "SENT 759: ['Unless', 'otherwise', 'specified', ',', 'the', 'descriptions', 'are', 'given', 'according', 'to', 'the', 'outbound', 'direction', 'from', 'Kyoto', 'to', 'Kizu', ',', 'except', 'for', 'in', 'the', 'track', 'data', 'section', '.']\n",
            "PRED 759: <unk> に つ い て は 、 <unk> <unk> の 項 を 除 け ば 、 京 から <unk> へ の <unk> に よ る 。\n",
            "PRED SCORE: -23.3422\n",
            "\n",
            "[2021-08-14 10:38:18,758 INFO] \n",
            "SENT 760: ['The', 'line', \"'s\", 'own', 'color', 'is', 'brown', ',', 'which', 'has', 'been', 'chosen', 'to', 'represent', \"'\", 'a', 'classic', ',', 'sophisticated', 'impression', 'suitable', 'for', 'connections', 'between', 'two', 'historic', 'cities', '.', \"'\"]\n",
            "PRED 760: <unk> は <unk> で あ り 、 「 二 つ の 歴史 的 <unk> に 適 し た <unk> 」 と <unk> さ れ て い る 。\n",
            "PRED SCORE: -24.8912\n",
            "\n",
            "[2021-08-14 10:38:18,759 INFO] \n",
            "SENT 761: ['Administration', '(', 'type', 'of', 'business', ')', ':', 'West', 'Japan', 'Railway', 'Company', '(', 'Railway', 'Business', 'Operator', ')']\n",
            "PRED 761: <unk> ： 西 日本 <unk> <unk>\n",
            "PRED SCORE: -5.0469\n",
            "\n",
            "[2021-08-14 10:38:18,759 INFO] \n",
            "SENT 762: ['Track', 'length', '(', 'operating', 'kilometers', ')', ':', '34.7', 'km']\n",
            "PRED 762: 長 さ （ <unk> <unk> ） <unk> <unk>\n",
            "PRED SCORE: -7.9881\n",
            "\n",
            "[2021-08-14 10:38:18,759 INFO] \n",
            "SENT 763: ['Track', 'gauge', ':', '1067', 'mm']\n",
            "PRED 763: <unk> ： <unk>\n",
            "PRED SCORE: -2.4768\n",
            "\n",
            "[2021-08-14 10:38:18,759 INFO] \n",
            "SENT 764: ['Number', 'of', 'stations', ':', '19', '(', 'including', 'the', 'stations', 'at', 'both', 'ends', 'of', 'the', 'track', 'section', ')']\n",
            "PRED 764: <unk> <unk> ： 19 <unk> （ <unk> <unk> を 含 む ）\n",
            "PRED SCORE: -8.3329\n",
            "\n",
            "[2021-08-14 10:38:18,760 INFO] \n",
            "SENT 765: ['Double-track', 'section', ':', 'Shinden', 'Station', '-', 'Uji', 'Station', ';', 'JR-Fujinomori', 'Station', '-', 'Kyoto', 'Station']\n",
            "PRED 765: <unk> <unk> ： <unk> <unk> - 宇治 <unk> - <unk> <unk> - 京都 <unk>\n",
            "PRED SCORE: -8.2264\n",
            "\n",
            "[2021-08-14 10:38:18,760 INFO] \n",
            "SENT 766: ['Electrified', 'section', ':', 'The', 'entire', 'rail', 'line', 'is', 'electrified', '(', 'DC', '1500V', ')', '.']\n",
            "PRED 766: <unk> <unk> ： <unk> <unk> （ <unk> <unk> ）\n",
            "PRED SCORE: -8.6418\n",
            "\n",
            "[2021-08-14 10:38:18,760 INFO] \n",
            "SENT 767: ['Block', '(', 'railway', ')', ':', 'automatic', 'block', 'system', '(', 'double-track', 'section', ')', ',', 'single-track', 'automatic', 'block', 'system', '(', 'single-track', 'section', ')']\n",
            "PRED 767: <unk> ( <unk> ) ： <unk> 式 、 <unk> 式 、 <unk> 式\n",
            "PRED SCORE: -7.9006\n",
            "\n",
            "[2021-08-14 10:38:18,760 INFO] \n",
            "SENT 768: ['Safety', 'equipment', ':', 'ATS', '(', 'Automatic', 'Train', 'Stop', 'system', ')']\n",
            "PRED 768: <unk> <unk> ： <unk>\n",
            "PRED SCORE: -4.3255\n",
            "\n",
            "[2021-08-14 10:38:18,760 INFO] \n",
            "SENT 769: ['Operation', 'direction', 'center', ':', 'Shin-Osaka', 'integrated', 'direction', 'center']\n",
            "PRED 769: <unk> <unk> - <unk> を 中心 と し た 方向 を <unk> る\n",
            "PRED SCORE: -16.9726\n",
            "\n",
            "[2021-08-14 10:38:18,761 INFO] \n",
            "SENT 770: ['Maximum', 'speed', ':', '110', 'km', '/', 'h', '(', 'double-track', 'section', ')', ',', '95', 'km', '/', 'h', '(', 'single-track', 'section', ')']\n",
            "PRED 770: <unk> <unk> ： <unk> ・ <unk> ・ <unk>\n",
            "PRED SCORE: -7.8595\n",
            "\n",
            "[2021-08-14 10:38:18,761 INFO] \n",
            "SENT 771: ['All', 'stations', 'except', 'Kizu', 'Station', 'are', 'managed', 'by', 'the', 'Kyoto', 'branch', 'of', 'the', 'West', 'Japan', 'Railway', 'Company', ',', 'while', 'the', 'Kizu', 'Station', 'is', 'managed', 'by', 'the', 'Osaka', 'branch', 'of', 'the', 'West', 'Japan', 'Railway', 'Company', '.']\n",
            "PRED 771: 西 日本 <unk> <unk> 京都 <unk> に は <unk> <unk> 以外 の <unk> が <unk> さ れ て い る が 、 <unk> <unk> は 西 日本 <unk> <unk> 大阪 <unk> が 経営 し て い る 。\n",
            "PRED SCORE: -25.8232\n",
            "\n",
            "[2021-08-14 10:38:18,761 INFO] \n",
            "SENT 772: ['The', 'line', 'between', 'Kyoto', 'Station', 'and', 'Kizu', 'Station', 'is', 'called', 'the', 'Nara', 'Line', ',', 'but', 'the', 'entire', 'line', 'lies', 'within', 'Kyoto', 'Prefecture', ',', 'not', 'in', 'Nara', 'Prefecture', '.']\n",
            "PRED 772: 京都 <unk> と <unk> <unk> の 間 に あ る <unk> を 奈良 <unk> と い う が 、 奈良 県 内 に あ る <unk> 全体 を 京都 <unk> と 呼 ぶ 。\n",
            "PRED SCORE: -21.5781\n",
            "\n",
            "[2021-08-14 10:38:18,761 INFO] \n",
            "SENT 773: ['This', 'is', 'because', ',', 'initially', ',', 'the', 'Nara', 'Line', 'was', 'built', 'by', 'Nara', 'Railways', 'between', 'Kyoto', 'Station', 'and', 'Nara', 'Station', ',', 'but', 'Kizu', 'Station', 'and', 'other', 'stations', 'south', 'of', 'Kizu', 'Station', 'were', 'separated', 'from', 'the', 'Nara', 'Line', 'in', 'order', 'to', 'be', 'part', 'of', 'a', 'route', 'between', 'Osaka', 'and', 'Nagoya', 'after', 'Nara', 'Railways', 'was', 'merged', 'into', 'Kansai', 'Railways', '.']\n",
            "PRED 773: これ は 当初 、 奈良 <unk> と 奈良 <unk> の 間 に 奈良 <unk> が 建設 し た もの で あ っ た ため で あ る が 、 <unk> <unk> と その 他 の <unk> <unk> は 、 奈良 <unk> から 分離 し て 関西 <unk> へ <unk> さ れ た 。\n",
            "PRED SCORE: -40.5698\n",
            "\n",
            "[2021-08-14 10:38:18,762 INFO] \n",
            "SENT 774: ['However', ',', 'trains', 'run', 'from', 'Kizu', 'Station', 'to', 'Nara', 'Station', 'in', 'Nara', 'Prefecture', 'through', 'the', 'Kansai', 'Main', 'Line', '(', 'Yamatoji', 'Line', ')', '.']\n",
            "PRED 774: しかし ながら 、 <unk> は 関西 <unk> を 経 て 奈良 県 の <unk> 奈良 <unk> へ <unk> し た 。\n",
            "PRED SCORE: -14.5636\n",
            "\n",
            "[2021-08-14 10:38:18,762 INFO] \n",
            "SENT 775: ['JR', 'West', 'established', 'popular', 'names', '(', 'JR', 'Kyoto', 'Line', ',', 'JR', 'Kobe', 'Line', 'or', 'the', 'like', ')', 'for', 'the', 'lines', 'in', 'the', 'Urban', 'Network', 'with', 'the', 'revision', 'of', 'March', '13', ',', '1988', ',', 'but', 'a', 'popular', 'name', 'was', 'not', 'given', 'to', 'the', 'Nara', 'Line', '.']\n",
            "PRED 775: 西 日本 で は <unk> 年 3 月 13 日 の <unk> 改正 に よ り 、 <unk> （ <unk> 京都 <unk> ・ <unk> 神戸 <unk> など ） が <unk> し た が 、 通称 は 奈良 <unk> に 与え られ な かっ た 。\n",
            "PRED SCORE: -30.4024\n",
            "\n",
            "[2021-08-14 10:38:18,762 INFO] \n",
            "SENT 776: ['The', 'Nara', 'Line', 'is', 'also', 'referred', 'to', 'as', 'the', \"'\", 'JR', 'Nara', 'Line', \"'\", 'in', 'order', 'to', 'distinguish', 'it', 'from', 'the', 'Kintetsu', 'Nara', 'Line', 'of', 'Kintetsu', 'Corporation', '.']\n",
            "PRED 776: 奈良 <unk> は <unk> 奈良 <unk> と 区別 する ため 「 <unk> 奈良 <unk> 」 と も い う 。\n",
            "PRED SCORE: -9.6859\n",
            "\n",
            "[2021-08-14 10:38:18,762 INFO] \n",
            "SENT 777: ['The', 'Nara', 'Line', 'was', 'referred', 'to', 'as', 'the', \"'\", 'JNR', 'Nara', 'Line', \"'\", 'in', 'the', 'era', 'of', 'Japan', 'National', 'Railways', '(', 'JNR', ')', ',', 'the', 'former', 'JR', ',', 'and', 'the', 'information', 'board', 'included', 'the', 'English', 'notation', \"'\", 'JNR', '.', \"'\"]\n",
            "PRED 777: 「 <unk> 奈良 <unk> 」 と 呼 ば れ た の は 、 日本 <unk> （ <unk> ） の 時代 に 「 <unk> 奈良 <unk> 」 と 呼 ば れ て お り 、 <unk> に は 「 <unk> <unk> 」 が 含 ま れ る 。\n",
            "PRED SCORE: -32.2612\n",
            "\n",
            "[2021-08-14 10:38:18,763 INFO] \n",
            "SENT 778: ['The', 'Kintetsu', 'Nara', 'Line', 'competes', 'with', 'the', 'Yamatoji', 'Line', 'between', 'Nanba', 'and', 'Nara', ',', 'whereas', 'the', 'JR', 'Nara', 'Line', 'competes', 'with', 'the', 'Kintetsu', 'Kyoto', 'Line', '.']\n",
            "PRED 778: <unk> 奈良 線 は <unk> と 奈良 の 間 の <unk> <unk> を <unk> し 、 <unk> 奈良 線 は <unk> 京都 線 と <unk> し た 。\n",
            "PRED SCORE: -20.9174\n",
            "\n",
            "[2021-08-14 10:38:18,763 INFO] \n",
            "SENT 779: ['While', 'many', 'trains', 'used', 'to', 'run', 'on', 'the', 'Keihan', 'Uji', 'Line', 'and', 'the', 'Kintetsu', 'Kyoto', 'Line', '(', 'both', 'of', 'which', 'run', 'parallel', 'to', 'the', 'Nara', 'Line', ')', ',', 'the', 'Nara', 'Line', 'was', 'only', 'electrified', 'toward', 'the', 'end', 'of', 'JNR', 'in', '1984', ';', 'consequently', ',', 'it', 'remained', 'just', 'a', 'small', 'local', 'line', 'on', 'which', 'the', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '105', '(', 'comprising', 'two', 'cars', 'or', 'the', 'like', ')', 'ran', 'for', 'some', 'time', ',', 'even', 'after', 'electrification', ',', 'until', 'the', 'privatization', 'of', 'the', 'JNR', '.']\n",
            "PRED 779: <unk> 宇治 <unk> と <unk> 京都 <unk> （ いずれ も 奈良 <unk> と <unk> し て い る ） に も かかわ ら ず 、 1984 年 の <unk> の <unk> に 対 し て 奈良 <unk> は <unk> <unk> の <unk> に <unk> し た だけ で な く 、 <unk> 年 以降 も <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> （ <unk> <unk> <unk> ） が <unk> し た 。\n",
            "PRED SCORE: -66.1361\n",
            "\n",
            "[2021-08-14 10:38:18,763 INFO] \n",
            "SENT 780: ['However', ',', 'after', 'the', 'foundation', 'of', 'JR', 'West', 'and', 'the', 'Nara', 'Line', \"'s\", 'incorporation', 'into', 'the', 'Urban', 'Network', ',', 'the', 'improvement', 'of', 'transportation', 'services', 'was', 'quickly', 'achieved', 'with', ',', 'for', 'example', ',', 'trains', 'comprised', 'of', 'four', 'cars', '(', 'some', 'comprised', 'of', 'six', 'cars', ')', ',', 'double-tracked', 'in', 'part', ',', 'or', 'with', 'increased', 'numbers', 'of', 'trains', ',', 'including', 'rapid', 'services', 'such', 'as', 'the', \"'\", 'Miyakoji', 'Rapid', 'Service', '.', \"'\"]\n",
            "PRED 780: しかし 、 <unk> 西 日本 と 奈良 <unk> が <unk> <unk> へ の <unk> を 経 て 、 <unk> 4 <unk> （ <unk> 6 <unk> ） 、 <unk> 4 <unk> （ 6 <unk> ） 、 <unk> <unk> など の <unk> <unk> が <unk> し た 。\n",
            "PRED SCORE: -39.0826\n",
            "\n",
            "[2021-08-14 10:38:19,772 INFO] \n",
            "SENT 781: ['Today', ',', 'the', 'Nara', 'Line', 'is', 'characterized', 'by', 'the', 'access', 'it', 'offers', 'to', 'sightseeing', 'areas', 'such', 'as', 'Byodo-in', 'Temple', 'in', 'Uji', 'City', ',', 'or', 'by', 'a', 'commuter', 'line', 'for', 'passengers', 'from', 'the', 'southern', 'part', 'of', 'the', 'Kyoto', 'Prefecture', ',', 'such', 'as', 'Joyo', 'City', '.']\n",
            "PRED 781: 現在 、 奈良 <unk> の 特徴 と し て は 、 宇治 市 の 平等 院 など の 観光 地 や 、 <unk> 市 など の 京都 府 南部 から の <unk> <unk> の <unk> など が あ る 。\n",
            "PRED SCORE: -25.5411\n",
            "\n",
            "[2021-08-14 10:38:19,772 INFO] \n",
            "SENT 782: ['However', ',', 'trains', 'go', 'around', 'toward', 'the', 'east', 'between', 'Momoyama', 'Station', 'and', 'Shinden', 'Station', 'and', 'run', 'the', 'edge', 'of', 'the', 'central', 'part', 'of', 'town', 'in', 'Joyo', 'or', 'to', 'the', 'south', 'of', 'Joyo', ';', 'thus', 'the', 'regional', 'and', 'transportation', 'gaps', 'between', 'the', 'Nara', 'Line', 'and', 'the', 'Kintetsu', 'Kyoto', 'Line', 'remain', '.']\n",
            "PRED 782: しかし ながら 、 桃山 <unk> と <unk> <unk> の 間 を 東西 に 進 み 、 <unk> の 中央 部 を <unk> や <unk> の <unk> に <unk> し 、 奈良 <unk> と <unk> 京都 <unk> の 間 の <unk> が 残 っ て い る 。\n",
            "PRED SCORE: -37.4024\n",
            "\n",
            "[2021-08-14 10:38:19,772 INFO] \n",
            "SENT 783: ['Rolling', 'stock', 'owned', 'by', 'the', 'Osaka', 'branch', 'for', 'the', 'Nara', 'rail', 'yard', 'is', 'used', ',', 'but', 'station', 'facilities', 'are', 'maintained', 'by', 'the', 'Kyoto', 'branch', '(', 'except', 'for', 'Kizu', 'Station', ')', '.']\n",
            "PRED 783: 奈良 <unk> の 大阪 <unk> の <unk> <unk> は 使用 さ れ て い る が 、 <unk> 施設 は 京都 <unk> （ <unk> <unk> を 除 く ） で 維持 さ れ て い る 。\n",
            "PRED SCORE: -20.8329\n",
            "\n",
            "[2021-08-14 10:38:19,773 INFO] \n",
            "SENT 784: ['The', 'following', 'commuter', 'passes', 'can', 'be', 'used', 'at', 'all', 'stations', 'on', 'this', 'line', ':', 'J-THRU', '/', 'ICOCA', ';', 'Suica', ',', 'which', 'is', 'offered', 'by', 'the', 'East', 'Japan', 'Railway', 'Company', '(', 'JR', 'East', ')', ';', 'TOICA', ',', 'which', 'is', 'offered', 'by', 'the', 'Central', 'Japan', 'Railway', 'Company', '(', 'JR', 'Central', ')', ';', 'and', 'PiTaPa', ',', 'which', 'is', 'offered', 'by', 'the', 'Surutto', 'Kansai', 'Association', '.']\n",
            "PRED 784: 東 日本 <unk> <unk> （ <unk> 東 日本 ） 、 中央 <unk> <unk> （ 中央 <unk> ） 、 関西 <unk> 協会 が <unk> し た <unk> <unk> （ <unk> <unk> ） 、 <unk> <unk> （ <unk> <unk> ） 、 <unk> <unk> （ <unk> <unk> ） の <unk> で あ る 。\n",
            "PRED SCORE: -45.8081\n",
            "\n",
            "[2021-08-14 10:38:19,773 INFO] \n",
            "SENT 785: ['Simple', 'ticket', 'gates', 'are', 'used', 'at', 'Joyo', 'Station', 'or', 'stations', 'to', 'the', 'south', 'of', 'Joyo', 'Station', ',', 'as', 'some', 'unmanned', 'stations', 'still', 'exist', '.']\n",
            "PRED 785: <unk> <unk> や <unk> <unk> の <unk> に は 、 一部 の <unk> <unk> が 現存 し て い る 。\n",
            "PRED SCORE: -17.3054\n",
            "\n",
            "[2021-08-14 10:38:19,773 INFO] \n",
            "SENT 786: ['After', 'the', 'limited', 'express', \"'\", 'Kuroshio', \"'\", 'connecting', 'Kyoto', 'Station', 'with', 'Wakayama', 'Station', 'via', 'the', 'Nara', ',', 'Sakurai', 'and', 'Wakayama', 'lines', 'ceased', 'operation', 'in', '1984', ',', 'only', 'the', 'local', 'trains', 'ran', 'until', '1991', '(', 'except', 'for', 'the', 'temporary', 'operation', 'of', 'a', 'special', 'limited', 'express', ')', ',', 'but', 'now', 'there', 'are', 'four', 'types', 'of', 'trains', ':', 'the', 'Miyakoji', 'Rapid', 'Service', ',', 'the', 'rapid', 'service', ',', 'the', 'trains', 'classified', 'by', 'operation', 'and', 'section', ',', 'and', 'the', 'local', 'train', '.']\n",
            "PRED 786: 奈良 を <unk> し た 和歌山 <unk> と 和歌山 線 を 結 ぶ 「 <unk> 」 の <unk> は 1984 年 に <unk> し て い る が 、 現在 で は <unk> <unk> （ 特別 <unk> の <unk> <unk> を 除 く ） に 限 ら れ て い る （ 平成 3 年 （ 1991 年 ） まで は 、 <unk> <unk> 、 <unk> 、 <unk> 、 <unk> 、 <unk> の 4 種 が あ る ） 。\n",
            "PRED SCORE: -64.1090\n",
            "\n",
            "[2021-08-14 10:38:19,773 INFO] \n",
            "SENT 787: ['The', 'Miyakoji', 'Rapid', 'Service--the', 'fastest', 'train', 'on', 'the', 'Nara', 'Line--runs', 'mainly', 'during', 'the', 'day', '.']\n",
            "PRED 787: <unk> <unk> は 主に 奈良 <unk> で <unk> し た 。\n",
            "PRED SCORE: -10.4863\n",
            "\n",
            "[2021-08-14 10:38:19,774 INFO] \n",
            "SENT 788: ['The', 'train', 'basically', 'runs', 'every', '30', 'minutes', 'and', 'variously', 'connects', 'with', 'the', 'local', 'trains', 'at', 'Uji', 'Station', '.']\n",
            "PRED 788: <unk> は 30 <unk> 、 <unk> は 宇治 <unk> で <unk> と <unk> する 。\n",
            "PRED SCORE: -13.5192\n",
            "\n",
            "[2021-08-14 10:38:19,774 INFO] \n",
            "SENT 789: ['The', 'public', 'gave', 'this', 'train', 'the', 'nickname', \"'\", 'Miyakoji', 'rapid', 'train', \"'\", 'before', 'it', 'went', 'into', 'operation', '.']\n",
            "PRED 789: <unk> は この <unk> を 「 <unk> <unk> 」 と 呼 ん で <unk> し た 。\n",
            "PRED SCORE: -16.8038\n",
            "\n",
            "[2021-08-14 10:38:19,774 INFO] \n",
            "SENT 790: ['Not', 'only', 'Japanese', 'people', 'but', 'also', 'foreign', 'visitors', 'use', 'the', 'Miyakoji', 'Rapid', 'Service', 'as', 'a', 'train', 'connecting', 'Kyoto', 'with', 'Nara', ',', 'both', 'of', 'which', 'are', 'sightseeing', 'destinations', '.']\n",
            "PRED 790: 日本 人 だけ で な く 、 <unk> 客 は 奈良 と の 間 の <unk> と し て <unk> <unk> を 利用 し た 。\n",
            "PRED SCORE: -19.6033\n",
            "\n",
            "[2021-08-14 10:38:19,774 INFO] \n",
            "SENT 791: ['The', 'cars', 'are', 'all', 'from', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', ',', 'which', 'comprises', 'either', 'four', 'or', 'six', 'cars', '.']\n",
            "PRED 791: <unk> は <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> 4 - 6 <unk> 。\n",
            "PRED SCORE: -15.2998\n",
            "\n",
            "[2021-08-14 10:38:19,775 INFO] \n",
            "SENT 792: ['The', 'maximum', 'train', 'speed', 'is', '110', 'km', '/', 'h', 'in', 'double-track', 'sections', ',', 'or', '95', 'km', '/', 'h', 'in', 'other', 'sections', '.']\n",
            "PRED 792: <unk> <unk> は <unk> <unk> 、 <unk> は <unk> <unk> 、 <unk> は <unk> <unk> 。\n",
            "PRED SCORE: -15.8633\n",
            "\n",
            "[2021-08-14 10:38:19,775 INFO] \n",
            "SENT 793: ['The', 'standard', 'travel', 'times', 'are', 'approximately', '44', 'minutes', 'from', 'Kyoto', 'to', 'Nara', 'and', 'about', '47', 'minutes', 'from', 'Nara', 'to', 'Kyoto', '.']\n",
            "PRED 793: <unk> 時間 は 京都 から 奈良 に かけ て 約 44 分 、 奈良 から 京都 へ の <unk> 約 <unk> 分 。\n",
            "PRED SCORE: -15.9335\n",
            "\n",
            "[2021-08-14 10:38:19,775 INFO] \n",
            "SENT 794: ['A', 'train', 'bound', 'for', 'Kyoto', 'stops', 'at', 'Kamikoma', 'Station', 'or', 'Tanakura', 'Station', 'for', 'about', 'two', 'minutes', 'and', 'passes', 'the', 'Miyakoji', 'Rapid', 'Service', 'bound', 'for', 'Nara', ',', 'thus', 'making', 'a', 'slight', 'difference', 'between', 'the', 'travel', 'times', 'of', 'the', 'inbound', 'train', 'and', 'outbound', 'train', '.']\n",
            "PRED 794: <unk> <unk> の <unk> は <unk> <unk> また は 棚倉 <unk> で 約 2 時間 、 奈良 <unk> の <unk> <unk> を <unk> し た 上 で 、 <unk> と <unk> の 間 で <unk> が 異な る 。\n",
            "PRED SCORE: -38.3976\n",
            "\n",
            "[2021-08-14 10:38:19,775 INFO] \n",
            "SENT 795: ['During', 'the', 'New', 'Year', 'holiday', 'the', 'train', 'temporarily', 'stops', 'at', 'Inari', 'Station', 'for', 'visitors', 'to', 'Fushimi', 'Inari', 'Taisha', 'Shrine', '.']\n",
            "PRED 795: 正月 に は 、 伏見 稲荷 大社 に 参拝 する ため に 一時 的 に <unk> を <unk> し た 。\n",
            "PRED SCORE: -18.3929\n",
            "\n",
            "[2021-08-14 10:38:19,776 INFO] \n",
            "SENT 796: ['History']\n",
            "PRED 796: 歴史\n",
            "PRED SCORE: -0.3102\n",
            "\n",
            "[2021-08-14 10:38:19,776 INFO] \n",
            "SENT 797: ['March', '3', ',', '2001', ':', 'Operations', 'began', '.']\n",
            "PRED 797: 2001 年 3 月 3 日 <unk> <unk> 開始 。\n",
            "PRED SCORE: -4.9102\n",
            "\n",
            "[2021-08-14 10:38:19,776 INFO] \n",
            "SENT 798: ['March', '15', ',', '2003', ':', 'The', 'train', 'began', 'making', 'stops', 'at', 'Tofuku-ji', 'Station', 'and', 'Tamamizu', 'Station', 'through', 'a', 'revision', 'of', 'the', 'schedule', '.']\n",
            "PRED 798: <unk> 年 3 月 15 日 、 東福 <unk> と <unk> <unk> の <unk> に よ り <unk> 。\n",
            "PRED SCORE: -12.4186\n",
            "\n",
            "[2021-08-14 10:38:19,776 INFO] \n",
            "SENT 799: ['The', 'rapid', 'service', 'runs', 'during', 'the', 'morning', 'and', 'evening', 'rush', 'periods', '.']\n",
            "PRED 799: <unk> ・ <unk> 期 の <unk> 。\n",
            "PRED SCORE: -6.3555\n",
            "\n",
            "[2021-08-14 10:38:19,777 INFO] \n",
            "SENT 800: ['It', 'stops', 'at', 'JR-Ogura', 'Station', 'and', 'Shinden', 'Station', '(', 'Kyoto', 'Prefecture', ')', ',', 'through', 'which', 'the', \"'\", 'Miyakoji', 'Rapid', 'Service', \"'\", 'passes', '.']\n",
            "PRED 800: 「 <unk> <unk> 」 を 通 じ て <unk> <unk> ・ <unk> <unk> ( 京都 府 ) に <unk> 。\n",
            "PRED SCORE: -11.7418\n",
            "\n",
            "[2021-08-14 10:38:19,777 INFO] \n",
            "SENT 801: ['The', 'cars', 'used', 'are', 'all', 'from', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', ',', 'which', 'comprises', 'either', 'four', 'or', 'six', 'cars', '.']\n",
            "PRED 801: 使用 さ れ る <unk> は 、 <unk> <unk> <unk> <unk> <unk> <unk> で 、 4 - 6 <unk> で あ る 。\n",
            "PRED SCORE: -20.3014\n",
            "\n",
            "[2021-08-14 10:38:19,777 INFO] \n",
            "SENT 802: ['The', 'train', 'basically', 'runs', 'every', '30', 'minutes', 'and', 'variously', 'connects', 'with', 'the', 'local', 'train', 'at', 'the', 'Uji', 'Station', '.']\n",
            "PRED 802: <unk> は 30 <unk> 、 <unk> は 宇治 <unk> で <unk> を 結 ぶ 。\n",
            "PRED SCORE: -12.6958\n",
            "\n",
            "[2021-08-14 10:38:19,777 INFO] \n",
            "SENT 803: ['Like', 'the', 'Miyakoji', 'Rapid', 'Service', ',', 'the', 'rapid', 'service', 'passes', 'through', 'Narayama', 'Station', ',', 'at', 'which', 'the', 'rapid', 'train', 'on', 'the', 'Yamatoji', 'Line', 'stops', '.']\n",
            "PRED 803: <unk> <unk> は <unk> <unk> を <unk> し 、 <unk> <unk> の <unk> は <unk> し た 。\n",
            "PRED SCORE: -15.4257\n",
            "\n",
            "[2021-08-14 10:38:19,777 INFO] \n",
            "SENT 804: ['Before', 'the', \"'\", 'Miyakoji', 'rapid', 'train', \"'\", 'came', 'into', 'operation', 'in', 'March', '2001', ',', 'the', 'rapid', 'train', 'had', 'stopped', 'at', 'Kyoto', ',', 'Uji', ',', 'Joyo', '(', 'except', 'at', 'the', 'beginning', ')', ',', 'Kizu', 'and', 'Nara', 'stations', ',', 'employing', 'the', 'JNR', '/', 'JR', 'Suburban', 'Train', 'Series', '117', 'for', 'its', 'cars', ';', 'since', 'then', ',', 'however', ',', 'this', 'series', 'has', 'not', 'been', 'used', 'on', 'the', 'Nara', 'Line', '.']\n",
            "PRED 804: 2001 年 （ 平成 13 年 ） 3 月 に 「 <unk> <unk> 」 が <unk> 化 する 以前 に は 、 <unk> <unk> は 京都 ・ 宇治 ・ <unk> ・ 奈良 <unk> を 除 い て <unk> ・ <unk> <unk> <unk> を <unk> し て い た が 、 これ 以降 、 奈良 <unk> に は 使用 さ れ な く な っ た 。\n",
            "PRED SCORE: -46.4242\n",
            "\n",
            "[2021-08-14 10:38:19,778 INFO] \n",
            "SENT 805: ['Some', 'rapid', 'service', 'trains', 'run', 'through', 'to', 'the', 'Yamatoji', 'Line', 'in', 'the', 'morning', 'and', 'evening', 'due', 'to', 'the', 'schedule', 'of', 'operation', '.']\n",
            "PRED 805: <unk> の 中 に は 、 <unk> の <unk> に よ り 、 <unk> ・ <unk> の <unk> を 通 じ て <unk> する 者 も い た 。\n",
            "PRED SCORE: -23.5221\n",
            "\n",
            "[2021-08-14 10:38:19,778 INFO] \n",
            "SENT 806: ['The', 'regional', 'rapid', 'service', 'runs', 'mainly', 'in', 'the', 'morning', 'and', 'nighttime', 'hours', '.']\n",
            "PRED 806: 主に <unk> ・ 夜 に <unk> する 。\n",
            "PRED SCORE: -7.9710\n",
            "\n",
            "[2021-08-14 10:38:19,778 INFO] \n",
            "SENT 807: ['Initially', ',', 'the', 'operation', 'was', 'limited', 'to', 'weekdays', ',', 'but', 'with', 'the', 'schedule', 'revision', 'of', 'March', '18', ',', '2006', 'it', 'was', 'changed', 'to', 'Saturdays', 'and', 'holidays', 'in', 'addition', 'to', 'weekdays', '.']\n",
            "PRED 807: 当初 は <unk> に 限 ら れ て い た が 、 <unk> 年 3 月 18 日 の <unk> 改正 に よ り <unk> ・ <unk> に <unk> さ れ た 。\n",
            "PRED SCORE: -17.1417\n",
            "\n",
            "[2021-08-14 10:38:19,778 INFO] \n",
            "SENT 808: ['The', 'regional', 'rapid', 'service', 'stops', 'at', 'every', 'station', 'between', 'Uji', 'Station', 'and', 'Nara', 'Station', ',', 'while', 'some', 'regional', 'rapid', 'services', 'bound', 'for', 'Kizu', 'used', 'to', 'pass', 'the', 'local', 'train', 'at', 'Uji', 'Station', 'in', 'the', 'late', 'evening', ',', 'etc', '.', ',', 'due', 'to', 'the', 'schedule', ';', 'however', ',', 'based', 'on', 'the', 'current', 'schedule', ',', 'the', 'regional', 'rapid', 'service', 'doesn', \"'t\", 'pass', 'the', 'local', 'train', 'before', 'reaching', 'the', 'arrival', 'station', '.']\n",
            "PRED 808: <unk> は 宇治 <unk> と 奈良 <unk> の 間 で <unk> する が 、 <unk> の <unk> など に よ っ て <unk> の <unk> を <unk> する 地域 も あ る が 、 現在 の <unk> に よ っ て 地域 <unk> は <unk> し な い 。\n",
            "PRED SCORE: -40.2864\n",
            "\n",
            "[2021-08-14 10:38:19,779 INFO] \n",
            "SENT 809: ['All', 'regional', 'rapid', 'services', 'employ', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', ',', 'except', 'that', 'one', 'regional', 'rapid', 'service', 'leaving', 'Kyoto', 'Station', 'between', '8', 'p.m.', 'and', '9', 'p.m.', 'on', 'Saturdays', 'and', 'holidays', 'employs', 'the', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '103', '.']\n",
            "PRED 809: <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -29.2462\n",
            "\n",
            "[2021-08-14 10:38:19,779 INFO] \n",
            "SENT 810: ['Due', 'to', 'the', 'operation', 'schedule', ',', 'some', 'regional', 'rapid', 'services', 'run', 'through', 'from', 'the', 'Yamatoji', 'Line', 'during', 'the', 'morning', 'rush', 'period', '.']\n",
            "PRED 810: <unk> <unk> に よ っ て 、 <unk> 期 に は <unk> <unk> から <unk> し た 地域 <unk> も 見 られ る 。\n",
            "PRED SCORE: -19.1182\n",
            "\n",
            "[2021-08-14 10:38:20,664 INFO] \n",
            "SENT 811: ['The', 'regional', 'rapid', 'service', 'on', 'the', 'Nara', 'Line', 'formerly', 'used', 'orange', 'letters', 'as', 'the', 'Line', \"'s\", 'own', 'color', ',', 'but', 'it', 'was', 'the', 'same', 'color', 'as', 'the', 'one', 'used', 'for', 'the', \"'\", 'Miyakoji', 'Rapid', 'Service', \"'\", 'and', 'the', 'rapid', 'service', 'so', 'as', 'to', 'distinguish', 'the', 'regional', 'rapid', 'service', 'on', 'the', 'Nara', 'Line', 'from', 'that', 'of', 'the', 'Yamatoji', 'Line', '.', 'However', ',', 'in', 'March', '2008', ',', 'with', 'the', 'replacement', 'of', 'signs', 'along', 'with', 'the', 'revision', 'of', 'the', 'schedule', ',', 'a', 'sign', 'for', 'the', 'regional', 'rapid', 'service', 'was', 'changed', 'to', 'include', 'green', 'letters', ',', 'whereby', 'the', 'use', 'of', 'the', 'line', 'color', 'was', 'stopped', '.']\n",
            "PRED 811: 奈良 <unk> の <unk> は 、 かつて <unk> の <unk> と し て <unk> を 使用 し て い た が 、 2008 年 3 月 の <unk> 改正 に 伴 い 、 奈良 <unk> の 地域 <unk> と 区別 する ため 、 「 <unk> <unk> 」 や <unk> <unk> の <unk> と 同じ 色 で あ っ た 。\n",
            "PRED SCORE: -48.6395\n",
            "\n",
            "[2021-08-14 10:38:20,664 INFO] \n",
            "SENT 812: ['At', 'the', 'Kamikoma', 'Station', 'or', 'stations', 'to', 'the', 'north', 'of', 'Kamikoma', 'Station', ',', 'purple', 'letters', 'are', 'used', 'on', 'the', 'timetable', 'boards', '.']\n",
            "PRED 812: <unk> <unk> の <unk> に は 紫 の 文字 が 用い られ る 。\n",
            "PRED SCORE: -10.5212\n",
            "\n",
            "[2021-08-14 10:38:20,665 INFO] \n",
            "SENT 813: ['The', 'local', 'train', 'runs', 'between', 'Kyoto', 'Station', ',', 'Uji', 'Station', ',', 'Joyo', 'Station', 'and', 'Nara', 'Station', '.']\n",
            "PRED 813: 京都 <unk> ・ 宇治 <unk> ・ <unk> <unk> ・ 奈良 <unk> 間 の <unk> 。\n",
            "PRED SCORE: -10.4470\n",
            "\n",
            "[2021-08-14 10:38:20,665 INFO] \n",
            "SENT 814: ['The', 'train', 'runs', 'every', '15', 'minutes', 'during', 'the', 'day', 'between', 'Kyoto', 'Station', 'and', 'Joyo', 'Station', ',', 'and', 'every', '30', 'minutes', 'between', 'Joyo', 'Station', 'and', 'Kizu', 'Station', '.']\n",
            "PRED 814: 京都 <unk> と <unk> <unk> の 間 で 15 分 、 <unk> <unk> と <unk> <unk> の 間 で 30 分 。\n",
            "PRED SCORE: -15.9603\n",
            "\n",
            "[2021-08-14 10:38:20,665 INFO] \n",
            "SENT 815: ['Basically', ',', 'the', 'cars', 'are', 'from', 'the', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '103', ',', 'but', 'some', 'are', 'from', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', '.']\n",
            "PRED 815: 基本 的 に は <unk> <unk> 系 <unk> の <unk> <unk> で あ る が 、 <unk> <unk> 系 の もの も あ る 。\n",
            "PRED SCORE: -18.2219\n",
            "\n",
            "[2021-08-14 10:38:20,665 INFO] \n",
            "SENT 816: ['Due', 'to', 'the', 'schedule', ',', 'some', 'local', 'trains', 'go', 'through', 'to', 'the', 'Yamatoji', 'Line', 'in', 'the', 'early', 'morning', 'and', 'late', 'evening', '.']\n",
            "PRED 816: <unk> に よ っ て 、 <unk> ・ <unk> の <unk> に <unk> する 地方 <unk> の 中 に は 、 <unk> に <unk> する 者 も い た 。\n",
            "PRED SCORE: -26.1343\n",
            "\n",
            "[2021-08-14 10:38:20,666 INFO] \n",
            "SENT 817: ['Formerly', ',', 'some', 'local', 'trains', 'would', 'go', 'through', 'to', 'the', 'Sakurai', 'Line', ',', 'but', 'with', 'the', 'schedule', 'revision', 'of', 'September', '4', ',', '1994', ',', 'the', 'Nara', 'and', 'Sakurai', 'lines', 'were', 'divided', '.']\n",
            "PRED 817: その 後 、 一部 の 地方 <unk> は 桜井 <unk> へ <unk> する が 、 1994 年 9 月 4 日 の <unk> 改正 に よ り 奈良 ・ 桜井 線 が 分割 さ れ た 。\n",
            "PRED SCORE: -21.5761\n",
            "\n",
            "[2021-08-14 10:38:20,666 INFO] \n",
            "SENT 818: ['Formerly', ',', 'a', 'limited', 'express', 'ran', 'on', 'the', 'Nara', 'Line', 'as', 'a', 'special', 'train', '.']\n",
            "PRED 818: <unk> （ <unk> ） と は 、 奈良 <unk> の <unk> を 特別 <unk> と し て い る 。\n",
            "PRED SCORE: -12.5440\n",
            "\n",
            "[2021-08-14 10:38:20,666 INFO] \n",
            "SENT 819: ['A', 'limited', 'express', 'which', 'had', 'the', 'nickname', \"'\", 'Kuroshio', 'XX', \"'\", 'from', '1987', 'to', '1988', 'and', \"'\", 'Kuroshio', 'XX', \"'\", 'from', '1988', 'to', '1989', ',', 'the', 'JNR', '/', 'JR', 'Limited', 'Express', 'Series', '381ran', 'between', 'Kyoto', 'Station', 'and', 'Shirahama', 'Station', 'via', 'the', 'Kansai', 'Main', 'Line', ',', 'the', 'Kansai', 'Main', 'Line', 'Hanwa', 'Freight', 'Line', 'and', 'the', 'Hanwa', 'Line', '.']\n",
            "PRED 819: 1987 年 から <unk> 年 まで の 「 <unk> <unk> 」 、 <unk> 年 から <unk> 年 まで の 「 <unk> <unk> 」 、 <unk> 年 ～ <unk> 年 に かけ て の 「 <unk> <unk> 」 、 <unk> 年 ～ <unk> 年 に かけ て の 「 <unk> <unk> 」 、 関西 <unk> <unk> <unk> ・ <unk> <unk> と の 間 で <unk> さ れ た <unk> 。\n",
            "PRED SCORE: -47.8450\n",
            "\n",
            "[2021-08-14 10:38:20,666 INFO] \n",
            "SENT 820: ['The', 'Kinki', 'edition', 'of', 'the', 'Yomiuri', 'Shinbun', 'newspaper', 'announced', 'on', 'January', '6', ',', '1998', 'that', 'a', 'limited', 'express', 'comprising', 'the', 'JNR', '/', 'JR', 'Limited', 'Express', 'Series', '381', 'would', 'begin', 'operating', '(', 'as', 'a', 'regular', 'train', ')', 'on', 'the', 'Nara', 'Line', 'in', 'about', '2001', ',', 'but', 'eventually', 'the', 'plan', 'was', 'canceled', '.']\n",
            "PRED 820: 2001 年 （ 平成 13 年 ） 1 月 6 日 に は 、 <unk> <unk> ・ <unk> <unk> <unk> <unk> <unk> の <unk> <unk> が 奈良 <unk> で <unk> （ <unk> ） を 開始 し た が 、 最終 的 に <unk> さ れ た 。\n",
            "PRED SCORE: -37.0588\n",
            "\n",
            "[2021-08-14 10:38:20,667 INFO] \n",
            "SENT 821: ['The', 'Miyakoji', 'leisure', 'train', 'ran', 'between', 'Kyoto', 'Station', 'and', 'Sakurai', 'Station', '(', 'the', 'Miyakoji', 'Rapid', 'Service', 'ran', 'for', 'the', 'section', 'between', 'Kyoto', 'Station', 'and', 'Nara', 'Station', ')', 'for', 'some', 'time', ',', 'but', 'now', 'there', 'is', 'no', 'train', 'excluding', 'a', 'special', 'train', 'going', 'through', 'to', 'the', 'Sakurai', 'Line', '.']\n",
            "PRED 821: <unk> <unk> は 京都 <unk> と 桜井 <unk> （ 奈良 <unk> 間 の <unk> <unk> ） の 間 で <unk> し て い る が 、 現在 で は 特別 <unk> <unk> が な い 。\n",
            "PRED SCORE: -28.0260\n",
            "\n",
            "[2021-08-14 10:38:20,667 INFO] \n",
            "SENT 822: ['The', 'Uji-gawa', 'River', 'fireworks', 'display', '(', 'nearest', 'stop', ':', 'Uji', 'Station', ')', 'is', 'held', 'in', 'mid-August', ',', 'when', 'the', 'special', 'schedule', 'is', 'introduced', 'to', 'secure', 'sufficient', 'transport', 'capacity', 'before', '4', 'p.m.', 'to', 'the', 'end', ';', 'after', '4', 'p.m.', ',', 'only', 'the', 'local', 'trains', 'run', 'between', 'Kyoto', 'Station', 'and', 'Uji', 'Station', 'at', 'intervals', 'of', 'approximately', '10', 'minutes', '.']\n",
            "PRED 822: <unk> <unk> （ <unk> <unk> ： 宇治 <unk> ） は 、 午前 4 時 前 に <unk> <unk> を <unk> する ため に <unk> <unk> を 導入 し 、 午後 4 時 以降 、 京都 <unk> ～ 宇治 <unk> 間 の <unk> <unk> は 約 10 <unk> で あ る 。\n",
            "PRED SCORE: -45.4735\n",
            "\n",
            "[2021-08-14 10:38:20,667 INFO] \n",
            "SENT 823: ['Kizu', 'Station', 'is', 'the', 'arrival', 'and', 'departure', 'station', 'of', 'some', 'local', 'trains', '.']\n",
            "PRED 823: <unk> <unk> （ <unk> <unk> ） と は 、 地方 <unk> の <unk> <unk> 。\n",
            "PRED SCORE: -12.0407\n",
            "\n",
            "[2021-08-14 10:38:20,667 INFO] \n",
            "SENT 824: ['When', 'the', 'Nara', 'Line', 'was', 'a', 'single', 'track', ',', 'a', 'special', 'schedule', 'was', 'adopted', 'during', 'the', 'New', 'Year', 'holidays', ',', 'according', 'to', 'which', 'the', 'rapid', 'train', 'stopped', 'at', 'every', 'station', 'between', 'Kyoto', 'Station', 'and', 'Uji', 'Station', ',', 'and', 'the', 'number', 'of', 'trains', 'traveling', 'to', 'Uji', 'Station', 'was', 'increased', '.']\n",
            "PRED 824: <unk> の <unk> で あ れ ば 、 毎年 正月 に は <unk> <unk> が <unk> し て い た と さ れ 、 <unk> の <unk> は 京都 <unk> と 宇治 <unk> の 間 で <unk> し 、 宇治 <unk> の <unk> は <unk> し た 。\n",
            "PRED SCORE: -42.7285\n",
            "\n",
            "[2021-08-14 10:38:20,668 INFO] \n",
            "SENT 825: ['During', 'some', 'New', 'Year', 'holidays', 'the', 'train', 'would', 'arrive', 'at', 'and', 'depart', 'from', 'Momoyama', 'Station', '.']\n",
            "PRED 825: <unk> の 中 に は 、 <unk> を <unk> し て 桃山 <unk> から <unk> し た 。\n",
            "PRED SCORE: -15.5610\n",
            "\n",
            "[2021-08-14 10:38:20,668 INFO] \n",
            "SENT 826: ['In', 'about', '1992', '(', 'mainly', 'on', 'Saturdays', 'and', 'holidays', ')', 'a', 'through', 'train', 'to', 'the', 'Sakurai', 'Line', 'bound', 'for', 'Tenri', 'Station', 'ran', 'once', 'an', 'hour', 'by', 'extending', 'its', 'regular', 'rapid', 'service', '.']\n",
            "PRED 826: 1992 年 （ 平成 4 年 ） 頃 、 天理 <unk> に <unk> し た <unk> を <unk> し 、 <unk> <unk> を <unk> し た 。\n",
            "PRED SCORE: -22.9116\n",
            "\n",
            "[2021-08-14 10:38:20,668 INFO] \n",
            "SENT 827: ['Occasionally', ',', 'trains', 'reserved', 'for', 'groups', 'enter', 'the', 'Nara', 'Line', 'from', 'around', 'the', 'country', '.']\n",
            "PRED 827: その 後 、 各地 から 奈良 <unk> に <unk> さ れ た 。\n",
            "PRED SCORE: -13.4362\n",
            "\n",
            "[2021-08-14 10:38:20,668 INFO] \n",
            "SENT 828: ['During', 'the', 'Tenrikyo', 'Autumn', 'Grand', 'Service', 'held', 'every', 'October', '26', ',', 'particularly', ',', 'the', 'through', 'train', 'denoted', 'as', 'a', \"'\", 'train', 'reserved', 'for', 'groups', ':', 'Tenrikyo', 'transportation', 'train', \"'\", 'runs', 'from', 'Kyoto', 'Station', 'to', 'Kizu', 'Station', 'via', 'the', 'Nara', 'Line', ',', 'to', 'Nara', 'Station', 'via', 'the', 'Yamatoji', 'Line', ',', 'and', 'to', 'Tenri', 'Station', 'via', 'the', 'Sakurai', 'Line', '.']\n",
            "PRED 828: 特に 10 月 26 日 に 行 わ れ た <unk> <unk> の 際 に は 、 <unk> <unk> を 通 じ て 、 京都 <unk> から 奈良 <unk> を 経 て 奈良 <unk> を 経 て <unk> <unk> に 至 る 「 <unk> <unk> 」 と し て <unk> し 、 桜井 <unk> を 経 て 天理 <unk> へ <unk> し た 。\n",
            "PRED SCORE: -42.9260\n",
            "\n",
            "[2021-08-14 10:38:20,668 INFO] \n",
            "SENT 829: ['All', 'cars', 'belong', 'to', 'the', 'Nara', 'rail', 'yard', '.']\n",
            "PRED 829: いずれ も 奈良 <unk> に 属 する 。\n",
            "PRED SCORE: -5.3541\n",
            "\n",
            "[2021-08-14 10:38:20,669 INFO] \n",
            "SENT 830: ['JR', 'Suburban', 'Train', 'Series', '221']\n",
            "PRED 830: <unk> <unk> 系 <unk>\n",
            "PRED SCORE: -3.2888\n",
            "\n",
            "[2021-08-14 10:38:20,669 INFO] \n",
            "SENT 831: ['The', 'Nara', 'Line', 'shares', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', '(', 'comprising', 'two', ',', 'four', 'or', 'six', 'cars', ')', 'with', 'the', 'Yamatoji', 'Line', ',', 'the', 'Osaka', 'Loop', 'Line', ',', 'etc', '.']\n",
            "PRED 831: 奈良 <unk> は 、 <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> （ 2 名 4 名 6 名 ） を <unk> し た 。\n",
            "PRED SCORE: -26.1231\n",
            "\n",
            "[2021-08-14 10:38:20,669 INFO] \n",
            "SENT 832: ['The', 'JR', 'Suburban', 'Train', 'Series', '221', 'comprising', 'either', 'four', 'or', 'six', 'cars', 'is', 'used', 'mainly', 'for', 'the', \"'\", 'Miyakoji', 'Rapid', 'Service', \"'\", 'and', 'the', \"'\", 'Rapid', 'Service', ',', \"'\", 'while', 'the', 'one', 'comprising', 'four', 'cars', 'mainly', 'enters', 'the', 'Nara', 'Line', '.']\n",
            "PRED 832: 「 <unk> <unk> 」 と 「 <unk> <unk> 」 に は 4 <unk> 6 <unk> の <unk> <unk> が <unk> さ れ て お り 、 4 <unk> の <unk> が 奈良 <unk> に 入 っ て い る 。\n",
            "PRED SCORE: -30.4197\n",
            "\n",
            "[2021-08-14 10:38:20,669 INFO] \n",
            "SENT 833: ['The', 'JR', 'Suburban', 'Train', 'Series', '221', '(', 'comprising', 'two', 'cars', 'joining', 'two', 'other', 'cars', ')', 'runs', 'according', 'to', 'the', 'holiday', 'schedule', '.']\n",
            "PRED 833: <unk> に よ れ ば 、 <unk> <unk> <unk> <unk> （ <unk> 2 名 ） が <unk> し た 。\n",
            "PRED SCORE: -19.5739\n",
            "\n",
            "[2021-08-14 10:38:20,670 INFO] \n",
            "SENT 834: ['JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '103']\n",
            "PRED 834: <unk> <unk> 系 <unk>\n",
            "PRED SCORE: -4.5425\n",
            "\n",
            "[2021-08-14 10:38:20,670 INFO] \n",
            "SENT 835: ['The', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '103', '(', 'comprising', 'four', 'cars', ')', 'is', 'used', 'on', 'the', 'Nara', 'Line', 'for', 'the', 'local', 'train', ',', 'while', 'the', 'one', 'comprising', 'eight', 'cars', '(', 'four', 'joining', 'four', 'other', 'cars', ')', 'is', 'used', 'on', 'the', 'Osaka', 'Loop', 'Line', 'and', 'on', 'the', 'Yamatoji', 'Line', 'for', 'the', 'regional', 'rapid', 'service', 'during', 'the', 'rush', 'hours', '.']\n",
            "PRED 835: 奈良 <unk> で は <unk> <unk> <unk> <unk> （ 4 <unk> ） が 使用 さ れ て お り 、 大阪 <unk> で は 8 <unk> （ 4 名 の 他 の 4 名 の <unk> ） が 使用 さ れ て お り 、 <unk> 時 に は 地方 <unk> の <unk> <unk> で <unk> さ れ る 。\n",
            "PRED SCORE: -52.9172\n",
            "\n",
            "[2021-08-14 10:38:20,670 INFO] \n",
            "SENT 836: ['Part', 'of', 'the', 'rolling', 'stock', 'is', 'replaced', 'with', 'stock', 'transferred', 'from', 'the', 'Osaka', 'Loop', 'Line', \"'s\", 'Morinomiya', 'rail', 'yard', '.']\n",
            "PRED 836: <unk> <unk> の 一部 は 、 大阪 <unk> <unk> の <unk> <unk> に <unk> さ れ る 。\n",
            "PRED SCORE: -15.4263\n",
            "\n",
            "[2021-08-14 10:38:20,670 INFO] \n",
            "SENT 837: ['The', 'line', 'connecting', 'Kyoto', ',', 'Kizu', 'and', 'Nara', 'was', 'opened', 'by', 'the', 'Nara', 'Electric', 'Railway', ',', 'and', 'initially', 'trains', 'ran', 'the', 'same', 'route', 'as', 'the', 'current', 'Kintetsu', 'Kyoto', 'Line', 'between', 'Kyoto', 'and', 'Momoyama', '.']\n",
            "PRED 837: 京都 と 奈良 を 結 ぶ <unk> は 奈良 <unk> に よ っ て 開 か れ 、 当初 は 現在 の 京都 <unk> と 同じ <unk> を <unk> し た 。\n",
            "PRED SCORE: -18.5323\n",
            "\n",
            "[2021-08-14 10:38:20,671 INFO] \n",
            "SENT 838: ['In', '1921', ',', 'the', 'Tokaido', 'Main', 'Line', 'between', 'Baba', '(', 'currently', 'Zeze', ')', 'Station', 'and', 'Kyoto', 'Station', 'was', 'switched', 'to', 'the', 'current', 'line', 'via', 'the', 'Higashiyama', 'tunnel', ';', 'and', 'on', 'the', 'same', 'day', 'the', 'old', 'Tokaido', 'Main', 'Line', 'between', 'Kyoto', 'Station', 'and', 'Inari', 'Station', 'and', 'a', 'new', 'line', 'between', 'Inari', 'Station', 'and', 'Momoyama', 'Station', 'came', 'to', 'serve', 'as', 'the', 'Nara', 'Line', ',', 'whereby', 'the', 'line', 'between', 'Kyoto', 'Station', 'and', 'Fushimi', 'Station', 'was', 'abolished', 'and', 'the', 'line', 'between', 'Fushimi', 'Station', 'and', 'Momoyama', 'Station', 'was', 'made', 'a', 'freight', 'line', '.']\n",
            "PRED 838: <unk> 年 に は <unk> <unk> （ 現在 の <unk> <unk> ） と 京都 <unk> の 間 の <unk> <unk> が 東山 トンネル を 経 て 現在 の <unk> に <unk> さ れ 、 同日 に 京都 <unk> と 伏見 稲荷 <unk> と の 間 の <unk> <unk> が 奈良 <unk> と な り 、 京都 <unk> と 伏見 桃山 <unk> の 間 に <unk> が <unk> し 、 <unk> が <unk> と な っ た 。\n",
            "PRED SCORE: -56.3489\n",
            "\n",
            "[2021-08-14 10:38:20,671 INFO] \n",
            "SENT 839: ['Later', ',', 'the', 'land', 'after', 'the', 'line', 'between', 'the', 'Kyoto', 'Station', 'and', 'the', 'Fushimi', 'Station', 'was', 'sold', 'to', 'the', 'Nara', 'Electric', 'Railway', ',', 'a', 'predecessor', 'of', 'the', 'Kintetsu', 'Kyoto', 'Line', '.']\n",
            "PRED 839: その 後 、 京都 <unk> と 伏見 港 の 間 に あ っ た <unk> は 、 <unk> 京都 <unk> の 前身 で あ る 奈良 <unk> に <unk> さ れ た 。\n",
            "PRED SCORE: -18.2530\n",
            "\n",
            "[2021-08-14 10:38:20,671 INFO] \n",
            "SENT 840: ['August', '18', ',', '1879', ':', 'The', 'line', 'between', 'Kyoto', 'Station', ',', 'Inari', 'Station', 'and', 'Otani', 'Station', '(', 'Shiga', 'Prefecture', ')', 'was', 'opened', 'as', 'a', 'governmental', 'railway', '(', 'later', 'as', 'the', 'Tokaido', 'Main', 'Line', ')', '.']\n",
            "PRED 840: <unk> 年 8 月 18 日 京都 <unk> と 大谷 <unk> ( 滋賀 県 ) の 間 を <unk> （ 後 の <unk> <unk> ） と し て <unk> 。\n",
            "PRED SCORE: -16.9955\n",
            "\n",
            "[2021-08-14 10:38:21,049 INFO] \n",
            "SENT 841: ['Inari', 'Station', 'was', 'opened', '.']\n",
            "PRED 841: 稲荷 <unk> が <unk> 。\n",
            "PRED SCORE: -5.5624\n",
            "\n",
            "[2021-08-14 10:38:21,050 INFO] \n",
            "SENT 842: ['September', '5', ',', '1895', ':', 'The', 'line', 'between', 'Kyoto', 'Station', 'and', 'Fushimi', 'Station', '(', '3', 'miles', '23', 'chains', '≒', '5.29', 'km', ')', 'was', 'opened', 'by', 'Nara', 'Railways', '.']\n",
            "PRED 842: 1895 年 （ 明治 28 年 ） 9 月 5 日 ： 奈良 <unk> に よ り 京都 <unk> と 伏見 <unk> （ 3 <unk> <unk> <unk> 23 <unk> ） が <unk> 。\n",
            "PRED SCORE: -17.5087\n",
            "\n",
            "[2021-08-14 10:38:21,050 INFO] \n",
            "SENT 843: ['Fushimi', 'Station', 'was', 'opened', '.']\n",
            "PRED 843: 伏見 港 が <unk> 。\n",
            "PRED SCORE: -3.8113\n",
            "\n",
            "[2021-08-14 10:38:21,050 INFO] \n",
            "SENT 844: ['Kyoto', 'Station', 'was', 'shared', 'with', 'the', 'governmental', 'railway', '.']\n",
            "PRED 844: 京都 <unk> は 、 行政 <unk> と <unk> し た 。\n",
            "PRED SCORE: -10.2779\n",
            "\n",
            "[2021-08-14 10:38:21,051 INFO] \n",
            "SENT 845: ['November', '3', ':', 'The', 'line', 'between', 'Fushimi', 'Station', 'and', 'Momoyama', 'Station', '(', '1M9C', '≒', '2.19', 'km', ')', 'was', 'extended', 'and', 'opened', '.']\n",
            "PRED 845: 11 月 3 日 伏見 <unk> と 桃山 <unk> （ <unk> <unk> ） の 間 を <unk> し て <unk> 。\n",
            "PRED SCORE: -12.3424\n",
            "\n",
            "[2021-08-14 10:38:21,051 INFO] \n",
            "SENT 846: ['Momoyama', 'Station', 'was', 'opened', '.']\n",
            "PRED 846: 桃山 <unk> <unk> 。\n",
            "PRED SCORE: -4.2863\n",
            "\n",
            "[2021-08-14 10:38:21,051 INFO] \n",
            "SENT 847: ['January', '25', ',', '1896', ':', 'The', 'line', 'between', 'Momoyama', 'Station', 'and', 'Tamamizu', 'Station', '(', '12M46C', '≒', '20.24', 'km', ')', 'was', 'extended', 'and', 'opened', '.']\n",
            "PRED 847: <unk> 年 1 月 25 日 桃山 <unk> と <unk> <unk> （ <unk> <unk> ） の 間 を <unk> 。\n",
            "PRED SCORE: -12.2534\n",
            "\n",
            "[2021-08-14 10:38:21,051 INFO] \n",
            "SENT 848: ['Kohata', ',', 'Uji', ',', 'Shinden', ',', 'Nagaike', 'and', 'Tamamizu', 'stations', 'were', 'opened', '.']\n",
            "PRED 848: <unk> 、 宇治 、 <unk> 、 <unk> 、 <unk> など が <unk> 。\n",
            "PRED SCORE: -9.2738\n",
            "\n",
            "[2021-08-14 10:38:21,051 INFO] \n",
            "SENT 849: ['March', '13', ':', 'The', 'line', 'between', 'Tamamizu', 'Station', 'and', 'Kizu', 'Station', '(', '4M50C', '≒', '7.44', 'km', ')', 'was', 'extended', 'and', 'opened', '.']\n",
            "PRED 849: 3 月 13 日 <unk> <unk> と <unk> <unk> （ <unk> <unk> ） の 間 を <unk> し 、 <unk> 。\n",
            "PRED SCORE: -11.8887\n",
            "\n",
            "[2021-08-14 10:38:21,052 INFO] \n",
            "SENT 850: ['Tanakura', 'and', 'Kizu', 'stations', 'were', 'opened', '.']\n",
            "PRED 850: 良忍 と <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -7.0003\n",
            "\n",
            "[2021-08-14 10:38:21,052 INFO] \n",
            "SENT 851: ['April', '18', ':', 'The', 'line', 'between', 'Kizu', 'Station', 'and', 'Nara', 'Station', 'was', 'extended', 'and', 'opened', ',', 'thereby', 'connecting', 'Kyoto', 'Station', 'and', 'Nara', 'Station', '.']\n",
            "PRED 851: 4 月 18 日 <unk> <unk> と 奈良 <unk> の 間 を <unk> し 、 京都 <unk> と 奈良 <unk> を 結 ぶ 。\n",
            "PRED SCORE: -11.6383\n",
            "\n",
            "[2021-08-14 10:38:21,052 INFO] \n",
            "SENT 852: ['April', '21', ':', 'To-ji', 'provisional', 'train', 'station', 'was', 'opened', '.']\n",
            "PRED 852: 4 月 21 日 東寺 <unk> <unk> 。\n",
            "PRED SCORE: -4.7711\n",
            "\n",
            "[2021-08-14 10:38:21,052 INFO] \n",
            "SENT 853: ['April', '1', ',', '1897', ':', 'The', 'Nara', 'Railways', 'Kyoto', 'Station', 'was', 'renamed', 'as', 'Shichijo', 'Station', '.']\n",
            "PRED 853: <unk> 年 4 月 1 日 、 奈良 <unk> が 七 条 <unk> と し て <unk> 。\n",
            "PRED SCORE: -9.5614\n",
            "\n",
            "[2021-08-14 10:38:21,053 INFO] \n",
            "SENT 854: ['May', '3', ',', '1902', ':', 'Kamikoma', 'Station', 'was', 'opened', '.']\n",
            "PRED 854: 1902 年 5 月 3 日 <unk> <unk> 。\n",
            "PRED SCORE: -5.1027\n",
            "\n",
            "[2021-08-14 10:38:21,053 INFO] \n",
            "SENT 855: ['November', '12', ':', 'The', 'operating', 'distance', 'was', 'changed', 'from', 'miles', 'and', 'chains', 'to', 'miles', '(', 'e.g.', ',', 'from', '21M48C', 'to', '21.6M', ')', '.']\n",
            "PRED 855: 11 月 12 日 <unk> <unk> を <unk> ・ <unk> から <unk> へ <unk> （ <unk> → <unk> ）\n",
            "PRED SCORE: -12.9118\n",
            "\n",
            "[2021-08-14 10:38:21,053 INFO] \n",
            "SENT 856: ['February', '7', ',', '1905', ':', 'The', 'track', 'was', 'transferred', 'from', 'Nara', 'Railways', 'to', 'the', 'Kansei', 'Railway', 'Company', '.']\n",
            "PRED 856: 1905 年 （ 明治 38 年 ） 2 月 7 日 奈良 <unk> から <unk> <unk> へ <unk> 。\n",
            "PRED SCORE: -6.8799\n",
            "\n",
            "[2021-08-14 10:38:21,053 INFO] \n",
            "SENT 857: ['October', '1', ',', '1907', ':', 'The', 'Kansei', 'Railway', 'Company', 'was', 'nationalized', '.']\n",
            "PRED 857: <unk> 年 10 月 1 日 ： <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -7.6239\n",
            "\n",
            "[2021-08-14 10:38:21,054 INFO] \n",
            "SENT 858: ['August', '1', ',', '1908', ':', 'Shichijo', 'Station', 'was', 'merged', 'into', 'Kyoto', 'Station', '.']\n",
            "PRED 858: 1908 年 （ 明治 41 年 ） 8 月 1 日 、 七 条 <unk> が 京都 <unk> に <unk> 。\n",
            "PRED SCORE: -8.8914\n",
            "\n",
            "[2021-08-14 10:38:21,054 INFO] \n",
            "SENT 859: ['October', '12', ',', '1909', ':', 'The', 'line', 'names', 'were', 'given', 'and', 'the', 'line', 'between', 'Kizu', 'Station', 'and', 'Kyoto', 'Station', 'was', 'called', 'the', 'Nara', 'Line', '.']\n",
            "PRED 859: <unk> 年 10 月 12 日 ： <unk> を <unk> し 、 <unk> <unk> と 京都 <unk> の 間 を 奈良 <unk> と 呼 ぶ 。\n",
            "PRED SCORE: -13.9099\n",
            "\n",
            "[2021-08-14 10:38:21,054 INFO] \n",
            "SENT 860: ['December', '19', ',', '1910', ':', 'The', 'Ujigawa', 'signal', 'box', 'was', 'built', 'for', 'the', 'line', 'between', 'Uji', 'Station', 'and', 'Kohata', 'Station', '.']\n",
            "PRED 860: 1910 年 （ 明治 43 年 ） 12 月 19 日 ： 宇治 <unk> と <unk> <unk> <unk> の 間 に <unk> <unk> が 設置 さ れ た 。\n",
            "PRED SCORE: -14.7675\n",
            "\n",
            "[2021-08-14 10:38:21,054 INFO] \n",
            "SENT 861: ['June', '20', ',', '1913', ':', 'The', 'Hachijo', 'signal', 'box', 'was', 'built', 'for', 'the', 'line', 'between', 'Fushimi', 'Station', 'and', 'Kyoto', 'Station', '.']\n",
            "PRED 861: <unk> 年 6 月 20 日 - 伏見 <unk> と 京都 <unk> の 間 に <unk> <unk> が 設置 さ れ る 。\n",
            "PRED SCORE: -12.9113\n",
            "\n",
            "[2021-08-14 10:38:21,055 INFO] \n",
            "SENT 862: ['November', '5', ':', 'The', 'Ujigawa', 'signal', 'box', 'was', 'abolished', '.']\n",
            "PRED 862: 11 月 5 日 <unk> <unk> 廃止\n",
            "PRED SCORE: -4.7036\n",
            "\n",
            "[2021-08-14 10:38:21,055 INFO] \n",
            "SENT 863: ['August', '15', ',', '1914', ':', 'The', 'Hachijo', 'signal', 'box', 'was', 'abolished', '.']\n",
            "PRED 863: 1914 年 8 月 15 日 <unk> <unk> 廃止\n",
            "PRED SCORE: -5.3622\n",
            "\n",
            "[2021-08-14 10:38:21,055 INFO] \n",
            "SENT 864: ['March', '20', ',', '1921', ':', 'Ujigawa', 'temporary', 'signal', 'box', 'was', 'built', 'for', 'the', 'line', 'between', 'Uji', 'Station', 'and', 'Kohata', 'Station', '.']\n",
            "PRED 864: <unk> 年 3 月 20 日 ： 宇治 <unk> と <unk> <unk> の 間 に 仮 の <unk> <unk> を 設置 。\n",
            "PRED SCORE: -14.1985\n",
            "\n",
            "[2021-08-14 10:38:21,055 INFO] \n",
            "SENT 865: ['August', '1', ':', 'The', 'line', 'between', 'Kyoto', 'Station', 'and', 'Fushimi', 'Station', '(', '3.3M', '≒', '5.31', 'km', ')', 'on', 'the', 'Nara', 'Line', 'was', 'abolished', '.']\n",
            "PRED 865: 8 月 1 日 - 奈良 <unk> の 京都 <unk> と 伏見 <unk> （ <unk> <unk> ） の 間 で <unk> 。\n",
            "PRED SCORE: -13.8082\n",
            "\n",
            "[2021-08-14 10:38:21,055 INFO] \n",
            "SENT 866: ['The', 'passenger', 'service', 'was', 'abolished', 'between', 'Fushimi', 'Station', 'and', 'Momoyama', 'Station', '(', '1.1M', '≒', '1.77', 'km', ')', '.']\n",
            "PRED 866: 伏見 奉行 と 桃山 <unk> の 間 に <unk> が 廃止 さ れ た 。\n",
            "PRED SCORE: -9.1662\n",
            "\n",
            "[2021-08-14 10:38:21,056 INFO] \n",
            "SENT 867: ['The', 'Tokaido', 'Main', 'Line', 'between', 'Kyoto', 'Station', 'and', 'Inari', 'Station', '(', '1.8M', '≒', '2.90', 'km', ')', 'was', 'incorporated', 'into', 'the', 'Nara', 'Line', '.']\n",
            "PRED 867: 京都 <unk> と 稲荷 <unk> （ <unk> <unk> ） の 間 に あ る <unk> <unk> は 奈良 <unk> に 編入 さ れ た 。\n",
            "PRED SCORE: -14.2088\n",
            "\n",
            "[2021-08-14 10:38:21,056 INFO] \n",
            "SENT 868: ['The', 'new', 'line', 'between', 'Inari', 'Station', 'and', 'Momoyama', 'Station', '（', '2.6M', '≒', '4.18', 'km', ')', 'was', 'opened', '.']\n",
            "PRED 868: 稲荷 <unk> と 桃山 <unk> （ <unk> <unk> ） の 間 に 新た な <unk> が 開 か れ た 。\n",
            "PRED SCORE: -11.6646\n",
            "\n",
            "[2021-08-14 10:38:21,056 INFO] \n",
            "SENT 869: ['April', '1', ',', '1922', ':', 'The', 'Ujigawa', 'temporary', 'signal', 'box', '(', '宇治川仮信号所', ')', 'was', 'changed', 'to', 'the', 'Ujigawa', 'temporary', 'signal', 'station', '(', '宇治川仮信号場', ')', '.']\n",
            "PRED 869: <unk> 年 4 月 1 日 （ <unk> 2 年 4 月 1 日 ( 旧暦 ) ） ： <unk> <unk> （ <unk> <unk> ） を <unk> <unk> <unk> （ <unk> ） に 変更 。\n",
            "PRED SCORE: -24.8722\n",
            "\n",
            "[2021-08-14 10:38:21,056 INFO] \n",
            "SENT 870: ['February', '13', ',', '1926', ':', 'Aodani-Bairin', 'temporary', 'train', 'station', 'was', 'opened', '.']\n",
            "PRED 870: <unk> 年 2 月 13 日 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -6.2554\n",
            "\n",
            "[2021-08-14 10:38:21,545 INFO] \n",
            "SENT 871: ['April', '1', ':', 'The', 'Ujigawa', 'temporary', 'signal', 'station', 'was', 'abolished', '.']\n",
            "PRED 871: 4 月 1 日 <unk> <unk> 廃止\n",
            "PRED SCORE: -5.4866\n",
            "\n",
            "[2021-08-14 10:38:21,545 INFO] \n",
            "SENT 872: ['September', '3', ',', '1928', ':', 'The', 'freight', 'branch', 'line', 'between', 'Momoyama', 'Station', 'and', 'Fushimi', 'Station', 'was', 'abolished', '.']\n",
            "PRED 872: <unk> 年 9 月 3 日 桃山 <unk> と 伏見 <unk> の 間 に <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -11.4258\n",
            "\n",
            "[2021-08-14 10:38:21,545 INFO] \n",
            "SENT 873: ['Fushimi', 'Station', 'was', 'abolished', '.']\n",
            "PRED 873: 伏見 奉行 は 廃止 さ れ た 。\n",
            "PRED SCORE: -2.8718\n",
            "\n",
            "[2021-08-14 10:38:21,545 INFO] \n",
            "SENT 874: ['April', '1', ',', '1930', ':', 'The', 'operating', 'distance', 'was', 'changed', 'to', 'be', 'given', 'in', 'meters', 'from', 'miles', '(', 'e.g.', ',', 'from', '21.6M', 'to', '34.7', 'km', ')', '.']\n",
            "PRED 874: 1930 年 （ 昭和 5 年 ） 4 月 1 日 <unk> <unk> を <unk> から <unk> する （ 例 ： <unk> → <unk> ） 。\n",
            "PRED SCORE: -15.4231\n",
            "\n",
            "[2021-08-14 10:38:21,546 INFO] \n",
            "SENT 875: ['December', '1', ',', '1933', ':', 'Aodani-Bairin', 'temporary', 'train', 'station', 'was', 'upgraded', 'to', 'Yamashiro-Aodani', 'Station', '.']\n",
            "PRED 875: 1933 年 12 月 1 日 （ 昭和 8 年 12 月 1 日 ） <unk> <unk> を <unk> <unk> に <unk> 。\n",
            "PRED SCORE: -13.0453\n",
            "\n",
            "[2021-08-14 10:38:21,546 INFO] \n",
            "SENT 876: ['July', '15', ',', '1955', ':', 'Yamashiro-Taga', 'Station', 'was', 'opened', '.']\n",
            "PRED 876: <unk> 年 7 月 15 日 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -5.3653\n",
            "\n",
            "[2021-08-14 10:38:21,546 INFO] \n",
            "SENT 877: ['December', '27', ',', '1957', ':', 'Tofuku-ji', 'Station', 'was', 'opened', '.']\n",
            "PRED 877: <unk> 年 12 月 27 日 東福 <unk> <unk> 。\n",
            "PRED SCORE: -5.2389\n",
            "\n",
            "[2021-08-14 10:38:21,546 INFO] \n",
            "SENT 878: ['July', '11', ',', '1958', ':', 'Joyo', 'Station', 'was', 'opened', '.']\n",
            "PRED 878: 1958 年 7 月 11 日 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -4.9209\n",
            "\n",
            "[2021-08-14 10:38:21,547 INFO] \n",
            "SENT 879: ['April', '21', ',', '1961', ':', 'Obaku', 'Station', 'was', 'opened', '.']\n",
            "PRED 879: 1961 年 4 月 21 日 黄檗 <unk> 。\n",
            "PRED SCORE: -3.8055\n",
            "\n",
            "[2021-08-14 10:38:21,547 INFO] \n",
            "SENT 880: ['March', '2', ',', '1982', ':', 'Centralized', 'Traffic', 'Control', 'was', 'introduced', '.']\n",
            "PRED 880: 1982 年 （ 昭和 57 年 ） 3 月 2 日 ： <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -9.6325\n",
            "\n",
            "[2021-08-14 10:38:21,547 INFO] \n",
            "SENT 881: ['October', '1', ',', '1984', ':', 'The', 'line', 'between', 'Kyoto', 'Station', 'and', 'Kizu', 'Station', '(', 'to', 'Nara', 'Station', ')', 'became', 'electrified', '.']\n",
            "PRED 881: 1984 年 10 月 1 日 京都 <unk> と <unk> <unk> （ 奈良 <unk> ） の 間 を <unk> 。\n",
            "PRED SCORE: -9.9111\n",
            "\n",
            "[2021-08-14 10:38:21,547 INFO] \n",
            "SENT 882: ['The', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '105', 'and', 'the', 'JNR', '/', 'JR', 'Suburban', 'Train', 'Series', '113', 'began', 'operating', '.']\n",
            "PRED 882: <unk> <unk> ・ <unk> <unk> 系 <unk> ・ <unk> 系 <unk> 系 <unk> が <unk> し た 。\n",
            "PRED SCORE: -15.0594\n",
            "\n",
            "[2021-08-14 10:38:21,548 INFO] \n",
            "SENT 883: ['The', 'limited', 'express', \"'\", 'Kinokawa', \"'\", '(', 'between', 'Kyoto', 'Station', 'and', 'Wakayama', 'Station', 'via', 'the', 'Nara', ',', 'Sakurai', 'and', 'Wakayama', 'lines', ')', 'was', 'abolished', '.']\n",
            "PRED 883: 「 <unk> 」 の <unk> は 廃止 さ れ た 。\n",
            "PRED SCORE: -7.3104\n",
            "\n",
            "[2021-08-14 10:38:21,548 INFO] \n",
            "SENT 884: ['April', '1', ',', '1987', ':', 'The', 'Japan', 'National', 'Railways', 'was', 'split', 'up', 'and', 'privatized', 'to', 'form', 'the', 'JR', 'Group', ',', 'as', 'a', 'result', 'of', 'which', 'the', 'JR', 'Nara', 'Line', 'became', 'part', 'of', 'the', 'West', 'Japan', 'Railway', 'Company', '.']\n",
            "PRED 884: 1987 年 4 月 1 日 （ 昭和 62 年 4 月 1 日 ） 日本 <unk> <unk> が <unk> し 、 <unk> 奈良 <unk> が 西 日本 <unk> <unk> の 一部 と な っ た こと に よ り 、 <unk> <unk> は 消滅 し た 。\n",
            "PRED SCORE: -27.1066\n",
            "\n",
            "[2021-08-14 10:38:21,548 INFO] \n",
            "SENT 885: ['The', 'Japan', 'Freight', 'Railway', 'Company', 'became', 'a', 'railway', 'business', 'operator', 'for', 'every', 'line', '.']\n",
            "PRED 885: 日本 <unk> <unk> は <unk> <unk> と な っ た 。\n",
            "PRED SCORE: -8.3220\n",
            "\n",
            "[2021-08-14 10:38:21,548 INFO] \n",
            "SENT 886: ['March', '16', ',', '1991', ':', 'The', 'rapid', 'service', 'comprising', 'the', 'JNR', '/', 'JR', 'Suburban', 'Train', 'Series', '117', 'began', 'operating', '.']\n",
            "PRED 886: 1991 年 （ 平成 3 年 ） 3 月 16 日 <unk> <unk> ・ <unk> <unk> <unk> の <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -14.5057\n",
            "\n",
            "[2021-08-14 10:38:21,549 INFO] \n",
            "SENT 887: ['October', '22', ',', '1992', ':', 'Rokujizo', 'Station', 'was', 'opened', '.']\n",
            "PRED 887: 1992 年 10 月 22 日 六 地蔵 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -4.0442\n",
            "\n",
            "[2021-08-14 10:38:21,549 INFO] \n",
            "SENT 888: ['The', 'rapid', 'service', 'began', 'making', 'stops', 'at', 'Joyo', 'Station', '.']\n",
            "PRED 888: <unk> は <unk> <unk> に <unk> し た 。\n",
            "PRED SCORE: -7.3806\n",
            "\n",
            "[2021-08-14 10:38:21,549 INFO] \n",
            "SENT 889: ['September', '4', ',', '1994', ':', 'The', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '105', 'was', 'withdrawn', '.']\n",
            "PRED 889: 1994 年 （ 平成 6 年 ） 9 月 4 日 <unk> <unk> ・ <unk> <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -10.8530\n",
            "\n",
            "[2021-08-14 10:38:21,549 INFO] \n",
            "SENT 890: ['(', 'The', 'JNR', '/', 'JR', 'Commuter', 'Train', 'Series', '105', 'came', 'to', 'run', 'only', 'on', 'the', 'Sakurai', 'and', 'Wakayama', 'lines', '.', ')']\n",
            "PRED 890: （ <unk> ・ <unk> 系 <unk> は 桜井 線 ・ 和歌山 線 のみ ）\n",
            "PRED SCORE: -10.7684\n",
            "\n",
            "[2021-08-14 10:38:21,550 INFO] \n",
            "SENT 891: ['March', '8', ',', '1997', ':', 'JR-Fujinomori', 'Station', 'was', 'opened', '.']\n",
            "PRED 891: 1997 年 3 月 8 日 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -5.0604\n",
            "\n",
            "[2021-08-14 10:38:21,550 INFO] \n",
            "SENT 892: ['May', '10', ',', '1999', ':', 'The', 'rapid', 'service', 'began', 'making', 'stops', 'at', 'Rokujizo', 'Station', '.']\n",
            "PRED 892: 1999 年 5 月 10 日 六 地蔵 <unk> で <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -7.4676\n",
            "\n",
            "[2021-08-14 10:38:21,550 INFO] \n",
            "SENT 893: ['March', '3', ',', '2001', ':', 'The', 'lines', 'between', 'Kyoto', 'Station', 'and', 'JR-Fujinomori', 'Station', ',', 'Uji', 'Station', 'and', 'Shinden', 'Station', 'became', 'double-track', '.']\n",
            "PRED 893: 2001 年 （ 平成 13 年 ） 3 月 3 日 ： 京都 <unk> と <unk> <unk> 、 宇治 <unk> 、 <unk> <unk> の 間 が <unk> 。\n",
            "PRED SCORE: -14.9695\n",
            "\n",
            "[2021-08-14 10:38:21,550 INFO] \n",
            "SENT 894: ['JR-Ogura', 'Station', 'was', 'opened', '.']\n",
            "PRED 894: <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -4.2951\n",
            "\n",
            "[2021-08-14 10:38:21,551 INFO] \n",
            "SENT 895: ['The', \"'\", 'Miyakoji', 'Rapid', 'Service', \"'\", 'comprising', 'the', 'regional', 'rapid', 'service', 'and', 'the', 'JR', 'Suburban', 'Train', 'Series', '221', 'began', 'operating', '.']\n",
            "PRED 895: 地域 <unk> に よ る 「 <unk> <unk> 」 や 、 <unk> <unk> 系 <unk> が <unk> し た 。\n",
            "PRED SCORE: -17.4164\n",
            "\n",
            "[2021-08-14 10:38:21,551 INFO] \n",
            "SENT 896: ['October', '1', ':', 'The', 'rapid', 'service', 'and', 'regional', 'rapid', 'service', 'began', 'making', 'stops', 'at', 'Tofuku-ji', 'Station', '.']\n",
            "PRED 896: 10 月 1 日 、 <unk> ・ <unk> <unk> は 東福 <unk> に <unk> 。\n",
            "PRED SCORE: -10.7881\n",
            "\n",
            "[2021-08-14 10:38:21,551 INFO] \n",
            "SENT 897: ['March', '15', ',', '2003', ':', 'The', 'Miyakoji', 'Rapid', 'Service', 'and', 'the', 'rapid', 'service', 'began', 'making', 'stops', 'at', 'Tofuku-ji', 'Station', 'and', 'Tamamizu', 'Station', ',', 'and', 'at', 'Tamamizu', 'Station', ',', 'respectively', '.']\n",
            "PRED 897: <unk> 年 3 月 15 日 、 <unk> <unk> と <unk> <unk> が 東福 <unk> と <unk> <unk> で <unk> 、 <unk> <unk> で <unk> 。\n",
            "PRED SCORE: -17.7493\n",
            "\n",
            "[2021-08-14 10:38:21,551 INFO] \n",
            "SENT 898: ['April', '1', ':', 'The', 'Japan', 'Freight', 'Railway', 'Company', 'left', 'the', 'Type', 'II', 'railway', 'business', '.']\n",
            "PRED 898: 4 月 1 日 、 日本 <unk> <unk> が 第 二 次 <unk> <unk> を <unk> 。\n",
            "PRED SCORE: -11.2620\n",
            "\n",
            "[2021-08-14 10:38:21,552 INFO] \n",
            "SENT 899: ['April', '23', ',', '2008', ':', 'The', 'ATS', 'was', 'introduced', 'between', 'Yamashiro-Aodani', 'Station', 'and', 'Kizu', 'Station', '.']\n",
            "PRED 899: 2008 年 （ 平成 20 年 ） 4 月 23 日 <unk> <unk> と <unk> <unk> の 間 に <unk> が <unk> さ れ る 。\n",
            "PRED SCORE: -12.8127\n",
            "\n",
            "[2021-08-14 10:38:21,552 INFO] \n",
            "SENT 900: ['April', '27', ':', 'The', 'ATS-P', 'was', 'introduced', 'between', 'Obaku', 'Station', 'and', 'Yamashiro-Aodani', 'Station', '.']\n",
            "PRED 900: 4 月 27 日 ( 旧暦 ) （ 4 月 27 日 ） 黄檗 <unk> と <unk> <unk> の 間 で <unk> <unk> が 導入 さ れ る 。\n",
            "PRED SCORE: -15.7730\n",
            "\n",
            "[2021-08-14 10:38:22,430 INFO] \n",
            "SENT 901: ['April', '30', ':', 'The', 'ATS-P', 'was', 'introduced', 'between', 'Kyoto', 'Station', 'and', 'Obaku', 'Station', '.']\n",
            "PRED 901: 4 月 30 日 京都 <unk> と 黄檗 <unk> の 間 に <unk> <unk> が 導入 さ れ る 。\n",
            "PRED SCORE: -11.0345\n",
            "\n",
            "[2021-08-14 10:38:22,430 INFO] \n",
            "SENT 902: ['The', 'single-track', 'sections', 'between', 'JR-Fujinomori', 'and', 'Uji', 'stations', ',', 'and', 'between', 'Shinden', 'and', 'Kizu', 'stations', ',', 'remain', 'under', 'discussion', ',', 'but', 'no', 'specific', 'plan', 'has', 'been', 'established', '.']\n",
            "PRED 902: <unk> と 宇治 <unk> の 間 の <unk> <unk> は 議論 中 に 残 っ て い る が 、 具体 的 な <unk> は 成立 し て い な い 。\n",
            "PRED SCORE: -15.3101\n",
            "\n",
            "[2021-08-14 10:38:22,431 INFO] \n",
            "SENT 903: ['Moreover', ',', 'the', 'acquisition', 'of', 'land', 'along', 'National', 'Route', '24', 'between', 'JR-Fujinomori', 'Station', 'and', 'Momoyama', 'Station', ',', 'and', 'along', 'the', 'Keihan', 'Uji', 'Line', 'between', 'Kohata', 'Station', 'and', 'Uji', 'Station', '(', 'near', 'Obaku', 'Station', ')', 'is', 'particularly', 'difficult', '.']\n",
            "PRED 903: また 、 <unk> <unk> と 桃山 <unk> の 間 に あ る <unk> 24 号 の <unk> <unk> は 特に 困難 で あ る 。\n",
            "PRED SCORE: -17.9237\n",
            "\n",
            "[2021-08-14 10:38:22,431 INFO] \n",
            "SENT 904: ['Due', 'to', 'a', 'shortage', 'of', 'budget', ',', 'no', 'further', 'plan', 'will', 'proceed', 'before', 'the', 'double-tracking', 'of', 'the', 'entire', 'Sagano', 'Line', '(', 'between', 'the', 'Sanin', 'Main', 'Line', 'Kyoto', 'Station', 'and', 'Sonobe', 'Station', ')', 'is', 'completed', '.']\n",
            "PRED 904: <unk> の <unk> に よ り 、 <unk> <unk> （ <unk> <unk> 京都 と <unk> <unk> <unk> ） の <unk> 前 に <unk> は <unk> し な い 。\n",
            "PRED SCORE: -21.5722\n",
            "\n",
            "[2021-08-14 10:38:22,431 INFO] \n",
            "SENT 905: ['At', 'the', 'Council', 'for', 'Transportation', 'in', 'the', 'Kinki', 'region', ',', 'a', 'plan', 'for', 'operation', 'of', 'the', 'Nara', 'Line', 'through', 'to', 'the', 'Tokaido', 'Main', 'Line', '(', 'JR', 'Kyoto', 'Line', ')', 'in', 'the', 'future', 'is', 'under', 'discussion', '(', 'there', 'was', 'once', 'an', 'overnight', 'service', 'from', 'the', 'late', 'evening', 'of', 'December', '31', 'to', 'the', 'early', 'morning', 'of', 'January', '1', ')', '.']\n",
            "PRED 905: 近畿 地方 の <unk> <unk> で は 、 奈良 <unk> の <unk> <unk> （ <unk> 京都 線 ） を 経 て <unk> <unk> （ 12 月 31 日 <unk> から 1 月 1 日 <unk> に かけ て の <unk> が あ っ た ） と の 議論 が あ る 。\n",
            "PRED SCORE: -34.9521\n",
            "\n",
            "[2021-08-14 10:38:22,431 INFO] \n",
            "SENT 906: ['Uji', 'City', 'is', 'planning', 'to', 'build', 'a', 'new', 'station', 'between', 'Obaku', 'Station', 'and', 'Uji', 'Station', '.']\n",
            "PRED 906: 宇治 市 は 黄檗 <unk> と 宇治 <unk> の 間 に 新た な <unk> を 作 る こと を 目的 と し て い る 。\n",
            "PRED SCORE: -14.8264\n",
            "\n",
            "[2021-08-14 10:38:22,432 INFO] \n",
            "SENT 907: ['There', 'is', 'no', 'intermediate', 'station', 'under', 'direct', 'control', ',', 'except', 'for', 'Rokujizo', 'Station', 'and', 'Uji', 'Station', '(', 'JR', 'West', ')', '.']\n",
            "PRED 907: 六 地蔵 <unk> と 宇治 <unk> を 除 い て 直接 支配 下 に 置 か れ な い 。\n",
            "PRED SCORE: -12.8914\n",
            "\n",
            "[2021-08-14 10:38:22,432 INFO] \n",
            "SENT 908: ['The', 'distance', 'of', 'operation', '(', 'in', 'kilometers', ')', 'from', 'Kyoto', 'Station', 'is', 'placed', 'in', 'parentheses', '.']\n",
            "PRED 908: <unk> に は 京都 <unk> の <unk> が 置 か れ て い る 。\n",
            "PRED SCORE: -9.5357\n",
            "\n",
            "[2021-08-14 10:38:22,432 INFO] \n",
            "SENT 909: ['Kyoto', 'Station', '(', '0.00', 'km', ')', '-', 'Hachijo', 'temporary', 'signal', 'box', '(', '0.80', 'km', ')', '-', 'To-ji', 'temporary', 'depot', '(', '1.13', 'km', ')', '-', 'Fushimi', 'Station', '(', '5.31', 'km', ')', '-', 'Momoyama', 'Station', '(', '7.08', 'km', ')']\n",
            "PRED 909: 京都 <unk> - <unk> <unk> （ <unk> <unk> ） - <unk> <unk> （ <unk> <unk> ） - <unk> <unk> （ <unk> <unk> ） - 伏見 <unk> （ <unk> <unk> ） - 桃山 <unk>\n",
            "PRED SCORE: -20.6781\n",
            "\n",
            "[2021-08-14 10:38:22,432 INFO] \n",
            "SENT 910: ['The', 'distance', 'of', 'operation', '(', 'in', 'kilometers', ')', 'from', 'Kyoto', 'Station', 'are', 'placed', 'in', 'parentheses', '.']\n",
            "PRED 910: <unk> に は 京都 <unk> の <unk> が 置 か れ て い る 。\n",
            "PRED SCORE: -9.2797\n",
            "\n",
            "[2021-08-14 10:38:22,433 INFO] \n",
            "SENT 911: ['Ujigawa', 'temporary', 'signal', 'station', '-', 'from', 'Obaku', 'Station', 'to', 'Uji', 'Station', '(', 'approximately', '13.8', 'km', '）']\n",
            "PRED 911: <unk> <unk> <unk> - 黄檗 <unk> - 宇治 <unk>\n",
            "PRED SCORE: -8.1583\n",
            "\n",
            "[2021-08-14 10:38:22,433 INFO] \n",
            "SENT 912: ['The', 'Keiji', 'Bypass', 'is', 'the', 'bypass', 'of', 'a', 'national', 'highway', 'that', 'extends', 'from', 'Kusatsu', 'City', 'in', 'Shiga', 'Prefecture', 'to', 'Kumiyama', 'Town', ',', 'Kuse-gun', 'in', 'Kyoto', 'Prefecture', '.']\n",
            "PRED 912: <unk> <unk> （ <unk> <unk> ） は 、 滋賀 県 <unk> 市 から 京都 府 <unk> 郡 <unk> 町 に 至 る <unk> 。\n",
            "PRED SCORE: -11.3024\n",
            "\n",
            "[2021-08-14 10:38:22,433 INFO] \n",
            "SENT 913: ['It', 'is', 'a', 'planning', 'route', 'designated', 'as', 'a', 'local', 'high-standard', 'highway', '.']\n",
            "PRED 913: 地方 <unk> 団体 に 指定 さ れ た <unk> 。\n",
            "PRED SCORE: -6.7693\n",
            "\n",
            "[2021-08-14 10:38:22,433 INFO] \n",
            "SENT 914: ['The', 'first', 'description', 'below', 'refers', 'to', 'a', 'toll', 'road', 'called', 'the', 'Keiji', 'Bypass', 'and', 'the', 'second', 'refers', 'to', 'a', 'bypass', 'joining', 'National', 'Highways', '1', 'and', '24', 'that', 'is', 'also', 'called', 'the', 'Keiji', 'Bypass', '.']\n",
            "PRED 914: 以下 は <unk> <unk> と 呼 ば れ る <unk> 路 を 指 し 、 第 2 号 は <unk> 1 号 、 第 24 号 は <unk> 24 号 と も い う 。\n",
            "PRED SCORE: -24.0965\n",
            "\n",
            "[2021-08-14 10:38:22,434 INFO] \n",
            "SENT 915: ['Its', 'toll', 'road', 'section', 'is', 'integrated', 'in', 'the', 'Meishin', 'Expressway', 'to', 'connect', 'the', 'Ritto', 'Interchange', '(', 'in', 'the', 'direction', 'of', 'Nagoya', 'City', ')', 'and', 'the', 'Suita', 'Interchange', '(', 'in', 'the', 'direction', 'of', 'Osaka', 'City', ')', 'of', 'the', 'Meishin', 'Expressway', 'by', 'passing', 'round', 'the', 'urban', 'areas', 'of', 'Otsu', 'City', 'and', 'Kyoto', 'City', '.']\n",
            "PRED 915: <unk> <unk> は <unk> <unk> （ 名古屋 市 方面 ） と <unk> <unk> （ 大阪 市 方面 ） を 結 び 、 大津 市 や 京都 市 街 を <unk> し て <unk> <unk> （ 大阪 市 方面 ） を 結 ぶ 。\n",
            "PRED SCORE: -26.6878\n",
            "\n",
            "[2021-08-14 10:38:22,435 INFO] \n",
            "SENT 916: ['In', 'terms', 'of', 'laws', ',', 'the', 'section', 'from', 'the', 'Seta-higashi', 'Interchange', 'to', 'the', 'Kumiyamayodo', 'Interchange', ',', 'being', 'part', 'of', 'the', 'national', 'highways', '1', 'and', '478', ',', 'is', 'a', 'regional', 'high-standard', 'road', ';', 'the', 'Kumiyamayodo', 'Interchange', 'to', 'Oyamazaki', 'Junction', ',', 'a', 'part', 'of', 'National', 'Highway', '478', ',', 'is', 'a', 'high-standard', 'highway', 'designated', 'by', 'the', 'Ministry', 'of', 'Land', ',', 'Infrastructure', 'and', 'Transportation', '(', 'a', 'national', 'highway', 'only', 'for', 'vehicles', ')', '(', 'Kyoto-daini-soto-kanjo-doro', 'Belt', 'Line', 'of', 'the', 'Kyoto', 'jukan-jidoushdo', 'Expressway', ')', ';', 'and', 'the', 'section', 'from', 'Oyamazaki', 'Junction', 'to', 'Kumiyamyodo', 'Interchange', 'is', 'a', 'national', 'express', 'highway', '(', 'a', 'section', 'called', 'the', 'Keiji', 'Bypass', 'of', 'the', 'Chuo', 'Jidosha-do', 'National', 'Expressway', ')', '.']\n",
            "PRED 916: <unk> に つ い て は 、 <unk> <unk> から <unk> <unk> まで の <unk> は 、 <unk> 1 号 の 一部 で あ り 、 <unk> <unk> 号 の 一部 で あ る <unk> <unk> に <unk> <unk> 号 の 一部 で あ る <unk> <unk> <unk> 号 （ <unk> <unk> 号 ） と <unk> <unk> <unk> 号 （ <unk> <unk> 号 ） に よ っ て 指定 さ れ た <unk> <unk> で あ る 。\n",
            "PRED SCORE: -67.4966\n",
            "\n",
            "[2021-08-14 10:38:22,437 INFO] \n",
            "SENT 917: ['To', 'reduce', 'congestion', 'on', 'the', 'Meishin', 'Expressway', 'and', 'respond', 'to', 'the', 'need', 'for', 'a', 'road', 'network', 'that', 'could', 'serve', 'as', 'a', 'radial', 'road', 'and', 'belt', 'line', 'in', 'Kyoto', 'City', ',', 'the', 'construction', 'of', 'the', 'Kyoto-daini-soto-kanjo-doro', 'Belt', 'Line', 'was', 'subsequently', 'planned', 'to', 'connect', 'the', 'Kyoto-Tanba-doro', '(', 'formerly', 'the', 'bypass', 'of', 'National', 'Highway', '9', ')', 'to', 'the', 'Keiji', 'Bypass', '.']\n",
            "PRED 917: 京都 市 内 の <unk> ・ <unk> <unk> の <unk> <unk> の 必要 性 を 示 す ため 、 <unk> <unk> の 建設 は <unk> <unk> （ 旧 <unk> 9 号 ） を 結 ん で <unk> を <unk> し た 。\n",
            "PRED SCORE: -38.4508\n",
            "\n",
            "[2021-08-14 10:38:22,437 INFO] \n",
            "SENT 918: ['The', 'Kyoto', 'Jukan-Jidoshado', 'Expressway', 'and', 'the', 'Kyoto-daini-soto-kanjo-doro', 'Belt', 'Line', 'were', 'designated', 'as', 'National', 'Highway', '478', ',', 'and', 'their', 'construction', 'has', 'been', 'continuously', 'promoted', '.']\n",
            "PRED 918: 京都 <unk> <unk> と <unk> <unk> は <unk> <unk> 号 に 指定 さ れ 、 工事 は <unk> し て い る 。\n",
            "PRED SCORE: -16.7974\n",
            "\n",
            "[2021-08-14 10:38:22,437 INFO] \n",
            "SENT 919: ['On', 'traffic', 'signs', ',', 'the', 'section', 'between', 'the', 'Seta-Higashi', 'Junction', 'and', 'the', 'Oyamazaki', 'Junction', 'is', 'identified', 'as', 'the', 'Keiji', 'Bypass', 'so', 'as', 'to', 'make', 'it', 'easier', 'for', 'drivers', 'to', 'understand', 'the', 'signs', '.']\n",
            "PRED 919: <unk> に は 、 <unk> <unk> と <unk> <unk> の 間 の <unk> が <unk> <unk> と し て <unk> さ れ て い る 。\n",
            "PRED SCORE: -23.3159\n",
            "\n",
            "[2021-08-14 10:38:22,438 INFO] \n",
            "SENT 920: ['Whichever', 'route', 'is', 'chosen--the', 'Meishin', 'Expressway', 'or', 'the', 'Keiji', 'Bypass--the', 'same', 'toll', 'and', 'ETC', 'commuter', 'discount', 'service', 'apply', '.']\n",
            "PRED 920: <unk> <unk> は <unk> <unk> また は <unk> <unk> と 同じ <unk> <unk> で あ り 、 <unk> <unk> が <unk> する 。\n",
            "PRED SCORE: -19.7450\n",
            "\n",
            "[2021-08-14 10:38:22,438 INFO] \n",
            "SENT 921: ['The', 'Keiji', 'Bypass', 'here', 'means', 'the', 'service', 'line', 'known', 'as', 'such', '(', 'between', 'Seta-Higashi', 'Interchange', 'and', 'Oyamazaki', 'Junction', ')', 'unless', 'otherwise', 'specified', '.']\n",
            "PRED 921: ここ で い う <unk> と は 、 <unk> を 定め な い 限り 、 この よう な <unk> （ <unk> <unk> と <unk> <unk> ） を 指 す 。\n",
            "PRED SCORE: -19.7178\n",
            "\n",
            "[2021-08-14 10:38:22,438 INFO] \n",
            "SENT 922: ['Origin', ':', 'Seta-oe-cho', ',', 'Otsu', 'City', ',', 'Shiga', 'Prefecture']\n",
            "PRED 922: 起源 ： 滋賀 県 大津 市 <unk>\n",
            "PRED SCORE: -3.2670\n",
            "\n",
            "[2021-08-14 10:38:22,438 INFO] \n",
            "SENT 923: ['Terminal', ':', 'Oyamazaki-cho', ',', 'Otokuni-gun', ',', 'Kyoto', 'Prefecture']\n",
            "PRED 923: <unk> 年 京都 府 乙訓 郡 <unk> 町\n",
            "PRED SCORE: -2.6560\n",
            "\n",
            "[2021-08-14 10:38:22,438 INFO] \n",
            "SENT 924: ['Total', 'length', ':', '18.9', 'km']\n",
            "PRED 924: <unk> <unk> m 。\n",
            "PRED SCORE: -3.5611\n",
            "\n",
            "[2021-08-14 10:38:22,439 INFO] \n",
            "SENT 925: ['Number', 'of', 'lines', ':', 'four']\n",
            "PRED 925: <unk> 4 人\n",
            "PRED SCORE: -3.9887\n",
            "\n",
            "[2021-08-14 10:38:22,439 INFO] \n",
            "SENT 926: ['Speed', 'limit', ':', '80', 'km', '/', 'h']\n",
            "PRED 926: <unk> <unk> ： 80 <unk> / <unk>\n",
            "PRED SCORE: -4.4826\n",
            "\n",
            "[2021-08-14 10:38:22,439 INFO] \n",
            "SENT 927: ['Redemption', 'date', ':', 'April', '15', ',', '2050']\n",
            "PRED 927: <unk> 年 4 月 15 日\n",
            "PRED SCORE: -2.0212\n",
            "\n",
            "[2021-08-14 10:38:22,439 INFO] \n",
            "SENT 928: ['Shiga', 'Prefecture']\n",
            "PRED 928: 滋賀 県\n",
            "PRED SCORE: -0.3193\n",
            "\n",
            "[2021-08-14 10:38:22,440 INFO] \n",
            "SENT 929: ['Kyoto', 'Prefecture']\n",
            "PRED 929: 京都 府\n",
            "PRED SCORE: -0.4847\n",
            "\n",
            "[2021-08-14 10:38:22,440 INFO] \n",
            "SENT 930: ['Uji', 'City', '-', 'Kumiyama', 'Ｔown', ',', 'Kuse-gun', '-', 'Yawata', 'City', '-', 'Fushimi-ku', ',', 'Kyoto', 'City', '-', 'Oyamazaki-cho', 'Otokuni-gun']\n",
            "PRED 930: 宇治 市 - <unk> 郡 <unk> 町 - 京都 市 伏見 区\n",
            "PRED SCORE: -5.2794\n",
            "\n",
            "[2021-08-14 10:38:23,412 INFO] \n",
            "SENT 931: ['National', 'Highway', '1', 'Keiji', 'Bypass', ',', 'Seta-Higashi', 'IC', '-', 'Kumiyamayodo', 'IC']\n",
            "PRED 931: <unk> 1 号 - <unk> <unk> - <unk>\n",
            "PRED SCORE: -6.2328\n",
            "\n",
            "[2021-08-14 10:38:23,412 INFO] \n",
            "SENT 932: ['National', 'Highway', '478', ',', 'Kyoto-daini-soto-kanjo-doro', 'Belt', 'Line', ',', 'Kumiyamayodo', 'IC', '-', 'Oyamazaki', 'JCT']\n",
            "PRED 932: <unk> <unk> 号 - <unk> <unk> - <unk> <unk>\n",
            "PRED SCORE: -7.5795\n",
            "\n",
            "[2021-08-14 10:38:23,412 INFO] \n",
            "SENT 933: ['Chuo-Jidosha-do', 'National', 'Highway', ',', 'Oyamazaki', 'JCT', '-', 'Kumiyamayodo', 'IC', '(', 'revised', 'name', ')']\n",
            "PRED 933: <unk> <unk> 号 - <unk> <unk> 号 （ 改訂 ）\n",
            "PRED SCORE: -7.2222\n",
            "\n",
            "[2021-08-14 10:38:23,413 INFO] \n",
            "SENT 934: ['Sections', 'of', 'the', 'interchange', 'number', 'column', 'that', 'are', 'highlighted', 'in', 'green', 'indicate', 'that', 'the', 'roads', 'are', 'already', 'in', 'service', '.']\n",
            "PRED 934: <unk> の <unk> の <unk> は 、 <unk> の <unk> が <unk> で あ る こと を 示 す 。\n",
            "PRED SCORE: -17.6028\n",
            "\n",
            "[2021-08-14 10:38:23,413 INFO] \n",
            "SENT 935: ['The', 'facilities', 'with', 'a', 'highlight', 'in', 'ash', 'have', 'not', 'been', 'established', '.']\n",
            "PRED 935: 灰 の <unk> を 持 つ 施設 は 設置 さ れ て い な い 。\n",
            "PRED SCORE: -8.1611\n",
            "\n",
            "[2021-08-14 10:38:23,413 INFO] \n",
            "SENT 936: ['Roads', 'are', 'operated', 'by', 'local', 'municipalities', 'unless', 'otherwise', 'specified', '.']\n",
            "PRED 936: <unk> は 指定 さ れ て い な い 限り 、 地方 自治 体 に よ る <unk> で あ る 。\n",
            "PRED SCORE: -15.0416\n",
            "\n",
            "[2021-08-14 10:38:23,413 INFO] \n",
            "SENT 937: ['West', 'Nippon', 'Expressway', 'Company', 'Limited', ',', 'Kansai', 'Branch', ',', 'Ibaraki', 'office']\n",
            "PRED 937: 西 日本 <unk> <unk> <unk>\n",
            "PRED SCORE: -4.3912\n",
            "\n",
            "[2021-08-14 10:38:23,414 INFO] \n",
            "SENT 938: ['(', 'Roadways', 'managed', 'by', 'West', 'Nippon', 'Expressway', 'Company', 'Limited', ',', 'Kansai', 'Branch', ',', 'Ibaraki', 'Office', ',', 'include', 'the', 'Kyoto', 'Higashi', 'Interchange', '-', 'Suita', 'Junction', 'section', 'of', 'the', 'Meishin', 'Highway', ',', 'the', 'Daini-Keihan-Doro', 'Bypass', ',', 'and', 'Kyoto', 'areas', 'of', 'the', 'Keinawa', 'Jidoshado', 'Expressway', '.', ')']\n",
            "PRED 938: （ 西 日本 <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> <unk> ）\n",
            "PRED SCORE: -18.6055\n",
            "\n",
            "[2021-08-14 10:38:23,414 INFO] \n",
            "SENT 939: ['August', '29', ',', '1988', ':', 'The', 'opening', 'of', 'Seta-higashi', 'IC', '/', 'JCT', '-', 'Ogura', 'IC', 'took', 'place', '.']\n",
            "PRED 939: <unk> 年 （ <unk> 2 年 ） 8 月 29 日 <unk> <unk> ・ 小倉 <unk> の <unk>\n",
            "PRED SCORE: -13.9297\n",
            "\n",
            "[2021-08-14 10:38:23,414 INFO] \n",
            "SENT 940: ['March', '30', ',', '2003', ':', 'The', 'opening', 'of', 'Ogura', 'IC', '-', 'Kumiyama', 'JCT', 'took', 'place', '.']\n",
            "PRED 940: <unk> 年 3 月 30 日 小倉 藩 <unk> - <unk> <unk>\n",
            "PRED SCORE: -7.5437\n",
            "\n",
            "[2021-08-14 10:38:23,414 INFO] \n",
            "SENT 941: ['The', 'toll', 'system', 'was', 'integrated', 'into', 'that', 'of', 'the', 'Japan', 'Highway', 'Public', 'Corporation', '(', 'the', 'present', 'NEXCO', ')', '.']\n",
            "PRED 941: <unk> 制 は 日本 <unk> <unk> （ 現在 の <unk> <unk> ） に <unk> さ れ た 。\n",
            "PRED SCORE: -11.6888\n",
            "\n",
            "[2021-08-14 10:38:23,415 INFO] \n",
            "SENT 942: ['August', '10', ',', '2003', ':', 'The', 'opening', 'of', 'Kumiyama', 'JCT', '-', 'Oyamazaki', 'JCT', 'made', 'the', 'entire', 'line', 'available', '.']\n",
            "PRED 942: <unk> 年 8 月 10 日 <unk> <unk> - <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -8.6495\n",
            "\n",
            "[2021-08-14 10:38:23,416 INFO] \n",
            "SENT 943: ['December', '24', ',', '2003', ':', 'The', 'Oyamazaki', 'IC', 'opened', '.']\n",
            "PRED 943: <unk> 年 12 月 24 日 <unk> <unk> <unk> 。\n",
            "PRED SCORE: -5.2220\n",
            "\n",
            "[2021-08-14 10:38:23,416 INFO] \n",
            "SENT 944: ['Fiscal', 'year', '2005', 'average', 'weekday', '24-hour', 'traffic', 'volume', '(', 'numbers', ')', '(', 'road', 'traffic', 'census', ')']\n",
            "PRED 944: 2005 <unk> <unk> <unk> <unk> （ <unk> <unk> ）\n",
            "PRED SCORE: -7.9091\n",
            "\n",
            "[2021-08-14 10:38:23,416 INFO] \n",
            "SENT 945: ['Oyamazaki', 'IC', '/', 'JCT', '-', 'Kumiyamayodo', 'IC', ':', '29,136']\n",
            "PRED 945: <unk> <unk> ・ <unk> <unk> - <unk>\n",
            "PRED SCORE: -6.4748\n",
            "\n",
            "[2021-08-14 10:38:23,417 INFO] \n",
            "SENT 946: ['The', 'Uji', 'Tunnel', 'of', 'this', 'section', 'is', ',', 'at', '4,313', 'meters', ',', 'the', 'longest', 'on', 'the', 'National', 'Highway', ';', 'lane', 'changes', 'are', 'prohibited', 'in', 'the', 'tunnel', 'except', 'between', 'the', 'area', '500', 'meters', 'short', 'of', 'the', 'Kasatori', 'Interchange', 'and', 'the', 'Ujihigashi', 'Interchange', '.']\n",
            "PRED 946: この <unk> の 宇治 <unk> は 、 <unk> <unk> m の <unk> で あ り 、 <unk> <unk> と <unk> <unk> と の 間 に 500 m の <unk> を 除 い て <unk> 変更 は 禁止 さ れ て い る 。\n",
            "PRED SCORE: -31.7466\n",
            "\n",
            "[2021-08-14 10:38:23,417 INFO] \n",
            "SENT 947: ['A', 'well-known', 'Japanese', 'movie', 'called', '\"', 'Odoru', 'Daisosasen', 'The', 'MOVIE', '2', ':', 'Block', 'up', 'the', 'Rainbow', 'Bridge', '\"', 'was', 'filmed', 'around', 'the', 'Kumiyama', 'Junction', 'before', 'it', 'was', 'opened', '.']\n",
            "PRED 947: 『 <unk> <unk> 』 と 呼 ば れ る 日本 の 映画 で 有名 な の は 、 <unk> <unk> の <unk> 付近 で あ る 。\n",
            "PRED SCORE: -23.8755\n",
            "\n",
            "[2021-08-14 10:38:23,417 INFO] \n",
            "SENT 948: ['Because', 'less', 'distance', 'is', 'traveled', 'between', 'the', 'Seta-higashi', 'Junction', 'and', 'the', 'Oyamazaki', 'Interchange', '/', 'Junction', 'if', 'drivers', 'take', 'the', 'Keiji', 'Bypass', 'instead', 'of', 'the', 'Meishin', 'Highway', ',', 'a', 'driver', 'driving', 'at', 'the', 'speed', 'limit', 'on', 'the', 'Keiji', 'Bypass', 'will', 'arrive', 'at', 'their', 'destination', 'more', 'quickly', 'than', 'a', 'driver', 'driving', 'at', 'the', 'speed', 'limit', 'on', 'the', 'Meishin', 'Highway', '.']\n",
            "PRED 948: <unk> <unk> は <unk> <unk> と <unk> <unk> の 間 で <unk> が 少な く な い ため 、 <unk> <unk> で の <unk> <unk> は 、 <unk> <unk> の <unk> <unk> より も <unk> より も 早 く <unk> し て い る 。\n",
            "PRED SCORE: -42.1234\n",
            "\n",
            "[2021-08-14 10:38:23,417 INFO] \n",
            "SENT 949: ['The', 'Keiji', 'Bypass', 'has', 'no', 'rest', 'service', 'areas', 'or', 'other', 'such', 'facilities', ',', 'so', 'it', \"'s\", 'less', 'congested', 'than', 'the', 'Meishin', 'Expressway', '(', 'which', 'has', 'two', 'rest', 'areas', ':', 'Otsu', 'Rest', 'Area', 'and', 'Katsuragawa', 'Rest', 'Area', 'between', 'Setahigashi', 'and', 'Oyamazaki', '.', ')']\n",
            "PRED 949: <unk> <unk> に は <unk> が な い ため 、 <unk> <unk> より も <unk> が 少な い 。\n",
            "PRED SCORE: -18.0691\n",
            "\n",
            "[2021-08-14 10:38:23,418 INFO] \n",
            "SENT 950: ['However', ',', 'due', 'to', 'the', 'design', 'of', 'both', 'the', 'Seto-higashia', 'and', 'Oyamazaki', 'junctions', ',', 'which', 'require', 'ramps', '(', 'in', 'the', 'highway', 'lanes', ')', 'to', 'connect', 'them', 'to', 'the', 'Meishin', 'Highway', '(', 'in', 'particular', 'the', 'very', 'complicated', 'design', 'of', 'the', 'Oyamazaki', 'junction', ')', ',', 'drivers', 'have', 'to', 'reduce', 'their', 'speed', '.']\n",
            "PRED 950: しかし ながら 、 <unk> <unk> と <unk> <unk> の 両方 に よ っ て 、 <unk> <unk> を 結 ぶ 必要 が あ る <unk> <unk> （ 特に <unk> <unk> の <unk> は 非常 に 複雑 な もの で あ る ） と の <unk> が あ る 。\n",
            "PRED SCORE: -43.7010\n",
            "\n",
            "[2021-08-14 10:38:23,418 INFO] \n",
            "SENT 951: ['Another', 'disadvantage', 'is', 'that', 'drivers', 'often', 'encounter', 'congestion', 'as', 'they', 'attempt', 'to', 'merge', 'into', 'the', 'left', 'lane', 'of', 'the', 'Meishin', 'Highway', 'from', 'the', 'Oyamazaki', 'Junction', 'toward', 'Suita', 'or', 'Osaka', '.']\n",
            "PRED 951: また 、 <unk> <unk> の <unk> を <unk> や 大坂 へ 向け て <unk> し よ う と し た ため 、 <unk> <unk> を <unk> し た と する 説 も あ る 。\n",
            "PRED SCORE: -32.0885\n",
            "\n",
            "[2021-08-14 10:38:23,418 INFO] \n",
            "SENT 952: ['Moreover', ',', 'many', 'drivers', 'dislike', 'the', 'winding', 'areas', 'and', 'slopes', 'along', 'the', 'Keiji', 'Bypass', ',', 'so', 'the', 'Keiji', 'Bypass', 'doesn', \"'t\", 'fully', 'perform', 'its', 'function', 'as', 'a', 'bypass', '.']\n",
            "PRED 952: また 、 <unk> <unk> の <unk> や <unk> の <unk> を 嫌 う 者 も 多 く 、 <unk> <unk> は <unk> と し て の 性格 を 持 た な い 。\n",
            "PRED SCORE: -26.6196\n",
            "\n",
            "[2021-08-14 10:38:23,418 INFO] \n",
            "SENT 953: ['Furthermore', ',', 'it', \"'s\", 'a', 'bypass', 'of', 'National', 'Highway', '1', '(', 'a', 'general', 'national', 'highway', ')', ',', 'which', 'means', 'it', 'isn', \"'t\", 'a', 'expressway', 'but', 'a', 'motor', 'highway', '.']\n",
            "PRED 953: また <unk> 1 号 の <unk> で あ り 、 <unk> で は な く <unk> <unk> で あ る 。\n",
            "PRED SCORE: -13.5679\n",
            "\n",
            "[2021-08-14 10:38:23,419 INFO] \n",
            "SENT 954: ['When', 'drivers', 'want', 'to', 'get', 'on', 'the', 'Keiji', 'Bypass', 'toward', 'Suita', 'or', 'Osaka', 'from', 'the', 'east', 'side', 'of', 'the', 'Uji-gawa', 'River', '(', 'near', 'the', 'Ujihigashi', 'Interchange', ')', ',', 'they', 'must', 'go', 'to', 'the', 'Ujinishi', 'Interchange', '.']\n",
            "PRED 954: <unk> が <unk> 川 <unk> （ <unk> <unk> 付近 ） の <unk> から <unk> や 大阪 へ の <unk> を 求め る と 、 <unk> は <unk> <unk> に 向か う 。\n",
            "PRED SCORE: -28.7103\n",
            "\n",
            "[2021-08-14 10:38:23,419 INFO] \n",
            "SENT 955: ['This', 'is', 'because', 'the', 'Ujihigashi', 'Interchange', 'is', 'a', 'half-interchange', '.']\n",
            "PRED 955: これ は <unk> が <unk> で あ る ため で あ る 。\n",
            "PRED SCORE: -6.8581\n",
            "\n",
            "[2021-08-14 10:38:23,419 INFO] \n",
            "SENT 956: ['As', 'a', 'result', ',', 'local', 'roads', 'linking', 'the', 'Ujihigashi', 'and', 'Ujinishi', 'interchanges', 'are', 'commonly', 'congested', 'during', 'the', 'rush', 'hours', '.']\n",
            "PRED 956: これ に よ り 、 地方 の <unk> は <unk> <unk> と <unk> <unk> を <unk> する の が 一般 的 で あ る 。\n",
            "PRED SCORE: -20.6867\n",
            "\n",
            "[2021-08-14 10:38:23,419 INFO] \n",
            "SENT 957: ['This', 'area', 'is', 'outside', 'the', 'VICS', '(', 'Vehicle', 'Information', 'and', 'Communication', 'System', ')', 'link', 'zone', ',', 'which', 'makes', 'it', 'difficult', 'for', 'drivers', 'to', 'use', 'their', 'congestion-avoidance', 'schemes', '.']\n",
            "PRED 957: これ は <unk> <unk> <unk> の <unk> <unk> で あ り 、 <unk> <unk> を 利用 する こと は 困難 で あ る 。\n",
            "PRED SCORE: -18.7462\n",
            "\n",
            "[2021-08-14 10:38:23,420 INFO] \n",
            "SENT 958: ['Uji', 'City', ',', 'Kyoto', 'Prefecture', '(', 'Ujinishi', 'Interchange', ')', '-', 'Kumiyama-cho', ',', 'Kuse-gun', '(', 'terminus', ')']\n",
            "PRED 958: 京都 府 宇治 市 （ <unk> <unk> ） - <unk> 町 、 <unk> 町\n",
            "PRED SCORE: -6.1318\n",
            "\n",
            "[2021-08-14 10:38:23,420 INFO] \n",
            "SENT 959: ['See', '\"', 'Kyoto-Daini-soto-kanjo-doro', '\"', 'for', 'descriptions', 'of', 'the', 'sections', 'west', 'of', 'Kumiyama-cho', '.']\n",
            "PRED 959: <unk> の <unk> を 参照 。\n",
            "PRED SCORE: -5.8385\n",
            "\n",
            "[2021-08-14 10:38:23,420 INFO] \n",
            "SENT 960: ['The', 'upper', 'is', 'nearer', 'to', 'the', 'origin', ',', 'while', 'the', 'lower', 'is', 'nearer', 'to', 'the', 'termination', 'point', '.']\n",
            "PRED 960: <unk> が <unk> で あ る の に 対 し 、 <unk> は <unk> <unk> で あ る 。\n",
            "PRED SCORE: -14.9701\n",
            "\n",
            "[2021-08-14 10:38:24,009 INFO] \n",
            "SENT 961: ['The', 'left', 'is', 'nearer', 'to', 'Tokyo', ',', 'while', 'the', 'right', 'is', 'farther', 'from', 'Tokyo', '.']\n",
            "PRED 961: 左 は 東京 、 右 は 東京 から <unk> 。\n",
            "PRED SCORE: -7.9596\n",
            "\n",
            "[2021-08-14 10:38:24,009 INFO] \n",
            "SENT 962: ['Fiscal', 'year', '2005', 'average', 'weekday', '24-hour', 'traffic', 'volume', '(', 'numbers', ')', '(', 'road', 'traffic', 'census', ')']\n",
            "PRED 962: 2005 <unk> <unk> <unk> <unk> （ <unk> <unk> ）\n",
            "PRED SCORE: -7.9091\n",
            "\n",
            "[2021-08-14 10:38:24,009 INFO] \n",
            "SENT 963: ['Higashi-yagura', '3-chome', ',', 'Kusatsu', 'City', ':', '41,137']\n",
            "PRED 963: <unk> 市 <unk> <unk>\n",
            "PRED SCORE: -3.8737\n",
            "\n",
            "[2021-08-14 10:38:24,009 INFO] \n",
            "SENT 964: ['Mori', 'Aza-ouchi', ',', 'Kumiyama', 'Town', ',', 'Kuse-gun', ':', '35,493']\n",
            "PRED 964: 毛利 <unk> 、 <unk> 町 、 <unk> 町\n",
            "PRED SCORE: -6.4979\n",
            "\n",
            "[2021-08-14 10:38:24,010 INFO] \n",
            "SENT 965: ['Ministry', 'of', 'Land', ',', 'Infrastructure', ',', 'Transport', 'and', 'Tourism', ',', 'Shiga', 'National', 'Highway', 'Office', ',', 'Kusatsu', 'Maintenance', 'Branch', 'Office']\n",
            "PRED 965: <unk> 省 <unk> ・ <unk> ・ <unk> ・ <unk> 事務 所\n",
            "PRED SCORE: -10.4868\n",
            "\n",
            "[2021-08-14 10:38:24,010 INFO] \n",
            "SENT 966: ['Ministry', 'of', 'Land', ',', 'Infrastructure', ',', 'Transport', 'and', 'Tourism', ',', 'Kyoto', 'National', 'Highway', 'Office', ',', 'Kyoto', 'First', 'Maintenance', 'Branch', 'Office', '(', 'National', 'Highway', '24', ',', 'National', 'Highway', '1', 'within', 'Kyoto', 'City', ')']\n",
            "PRED 966: 国土 <unk> 省 京都 <unk> 第 1 <unk> <unk> 事務 所 （ <unk> 24 号 京都 市 内 1 号 ）\n",
            "PRED SCORE: -12.2807\n",
            "\n",
            "[2021-08-14 10:38:24,010 INFO] \n",
            "SENT 967: ['Ministry', 'of', 'Land', ',', 'Infrastructure', ',', 'Transport', 'and', 'Tourism', ',', 'Kyoto', 'National', 'Highway', 'Office', ',', 'Kyoto', 'Second', 'Maintenance', 'Branch', 'Office', '(', 'National', 'Highway', '478', ')']\n",
            "PRED 967: 国土 <unk> 省 <unk> 省 京都 <unk> 事務 所 （ <unk> <unk> 号 ）\n",
            "PRED SCORE: -9.9589\n",
            "\n",
            "[2021-08-14 10:38:24,010 INFO] \n",
            "SENT 968: ['Higashi', 'Hongan-ji', 'temple', 'is', 'a', 'Shin', 'Buddhist', 'temple', 'in', 'Shimogyo', 'Ward', ',', 'Kyoto', 'City', ',', 'Kyoto', '.']\n",
            "PRED 968: 東 本願 寺 （ <unk> <unk> ） は 、 京都 市 下京 区 に あ る 新 仏教 寺院 。\n",
            "PRED SCORE: -6.7235\n",
            "\n",
            "[2021-08-14 10:38:24,011 INFO] \n",
            "SENT 969: ['It', 'is', 'the', 'head', 'temple', 'of', 'the', 'Otani', 'sect', ',', 'which', 'is', 'part', 'of', 'the', 'Shinshu', 'Kyodan', 'Rengo', '(', 'Ten', 'Schools', 'of', 'Shin', 'Buddhism', ')', ',', 'and', 'also', 'joins', 'Nishi', 'Hongan-ji', 'temple', '(', 'officially', 'Hongan-ji', 'temple', ',', 'head', 'temple', 'of', 'the', 'Hongan-ji', 'sect', 'of', 'Shin', 'Buddhism', ')', ',', 'as', 'one', 'of', 'the', 'main', 'temples', 'of', 'Shin', 'Buddhism', '.']\n",
            "PRED 969: 真宗 大谷 派 の 総 本山 で あ り 、 新 仏教 寺院 の 主要 寺院 と し て 西 本願 寺 （ 真宗 本願 寺 派 総 本山 ） に 合流 する 。\n",
            "PRED SCORE: -17.5922\n",
            "\n",
            "[2021-08-14 10:38:24,011 INFO] \n",
            "SENT 970: ['The', 'official', 'name', 'of', 'the', 'temple', 'was', '\"', 'Hongan-ji', '\"', 'until', '1987', ',', 'since', 'which', 'time', 'it', 'has', 'been', '\"', 'Shinshu', 'Honbyo', 'Temple', '\"', '.']\n",
            "PRED 970: 正式 名称 は 1987 年 まで 「 真宗 本廟 」 で あ る 。\n",
            "PRED SCORE: -8.3509\n",
            "\n",
            "[2021-08-14 10:38:24,011 INFO] \n",
            "SENT 971: ['To', 'distinguish', 'it', 'from', 'Nishi', 'Hongan-ji', 'temple', ',', 'also', 'in', 'Shimogyo', 'Ward', ',', 'it', 'is', 'often', 'called', '\"', 'O-Higashi-san', '\"', '.']\n",
            "PRED 971: 西 本願 寺 と 区別 する ため 、 下京 区 で も <unk> と 呼 ば れ る こと が 多 い 。\n",
            "PRED SCORE: -8.9876\n",
            "\n",
            "[2021-08-14 10:38:24,011 INFO] \n",
            "SENT 972: ['(', 'For', 'history', 'before', 'the', 'east-west', 'split', ',', 'refer', 'to', 'the', 'article', 'on', 'The', 'History', 'of', 'Hongan-ji', 'Temple', '.', ')']\n",
            "PRED 972: （ 東西 方向 に つ い て は 本願 寺 の 歴史 を 参照 ）\n",
            "PRED SCORE: -7.3909\n",
            "\n",
            "[2021-08-14 10:38:24,012 INFO] \n",
            "SENT 973: ['Kyounyo', '(', 'Kouju', ')', ',', 'the', '12th', 'master', 'of', 'Hongan-ji', 'Temple', ',', 'was', 'given', 'a', 'domain', 'for', 'a', 'temple', 'to', 'the', 'east', 'of', 'Hongan-ji', 'by', 'Ieyasu', 'TOKUGAWA', ',', 'and', 'founded', 'Higashi', 'Hongan-ji', 'Temple', 'when', 'Hongan-ji', 'Temple', 'split', 'in', '1602', '.']\n",
            "PRED 973: 本願 寺 12 代 <unk> （ <unk> ） は 、 徳川 家康 に よ っ て 東 本願 寺 の 東 本願 寺 に <unk> を 与え られ 、 1602 年 に 本願 寺 が 分裂 し た 際 に 東 本願 寺 を 開 い た 。\n",
            "PRED SCORE: -22.8857\n",
            "\n",
            "[2021-08-14 10:38:24,012 INFO] \n",
            "SENT 974: ['Located', 'in', 'present', 'day', 'Karasuma', 'Shichijo', ',', 'Shimogyo', 'Ward', ',', 'Kyoto', ',', 'it', 'is', 'called', 'Higashi', 'Temple', '(', 'Eastern', ')', 'Hongan-ji', 'Temple', 'because', 'it', 'is', 'to', 'the', 'east', 'of', 'Nishi', '(', 'Western', ')', 'Hongan-ji', 'Temple', ',', 'which', 'is', 'located', 'at', 'Horikawa', 'Shichijo', '.']\n",
            "PRED 974: 現在 の 京都 市 下京 区 烏丸 七 条 に あ り 、 堀川 七 条 に あ る 西 本願 寺 の 東 に あ る こと から 東 本願 寺 と 呼 ば れ る 。\n",
            "PRED SCORE: -11.9443\n",
            "\n",
            "[2021-08-14 10:38:24,012 INFO] \n",
            "SENT 975: ['It', 'was', 'a', 'religious', 'corporation', 'overseen', 'by', 'the', 'Otani', 'sect', 'until', '1987', ',', 'at', 'which', 'time', 'Hongan-ji', 'Temple', 'was', 'legally', 'dissolved', 'and', 'absorbed', 'by', 'the', 'sect', '.']\n",
            "PRED 975: 1987 年 まで は 大谷 宗 氏 に よ る 宗教 法人 で あ り 、 本願 寺 は <unk> さ れ て 宗派 に 編入 さ れ た 。\n",
            "PRED SCORE: -18.3683\n",
            "\n",
            "[2021-08-14 10:38:24,012 INFO] \n",
            "SENT 976: ['After', 'that', ',', 'Higashi', 'Hongan-ji', 'Temple', \"'s\", 'official', 'name', 'became', '\"', 'Shinshu', 'Honbyo', 'Temple', '\"', '(', '\"', 'Honbyo', '\"', 'means', 'the', 'original', 'sanctuary', 'where', 'followers', 'hear', 'the', 'teaching', 'of', 'the', 'patriarch', 'Shinran', ',', 'the', 'resting', 'place', 'of', 'Shinran', ')', '.']\n",
            "PRED 976: その 後 、 東 本願 寺 の 正式 名称 は 「 真宗 本廟 」 と な っ た （ 『 真宗 本廟 』 ） 。\n",
            "PRED SCORE: -10.6135\n",
            "\n",
            "[2021-08-14 10:38:24,013 INFO] \n",
            "SENT 977: ['It', 'is', 'also', 'to', 'distinguish', 'it', 'from', 'the', 'breakaway', 'Higashi', 'Hongan-ji', 'sect', 'of', 'Shin', 'Buddhism', 'and', 'emphasize', 'its', 'propriety', '.']\n",
            "PRED 977: また 、 新 仏教 東 本願 寺 と 区別 し て <unk> を 強調 する こと も あ る 。\n",
            "PRED SCORE: -10.7044\n",
            "\n",
            "[2021-08-14 10:38:24,013 INFO] \n",
            "SENT 978: ['cf', 'O-Higashi', 'Rebellion']\n",
            "PRED 978: <unk> の 乱\n",
            "PRED SCORE: -1.3539\n",
            "\n",
            "[2021-08-14 10:38:24,013 INFO] \n",
            "SENT 979: ['Having', 'had', '4', 'fires', 'in', 'the', 'Edo', 'period', ',', 'so', 'many', 'that', 'it', 'acquired', 'the', 'nickname', ',', '\"', 'Flaming', 'Hongan-ji', 'Temple', '\"', ',', 'the', 'current', 'buildings', ',', 'though', 'many', 'burned', 'and', 'were', 'rebuilt', 'in', 'the', 'Meiji', 'period', ',', 'maintain', 'the', 'style', 'of', 'the', 'time', 'in', 'their', 'construction', 'and', 'the', 'paintings', 'on', 'the', 'walls', '.']\n",
            "PRED 979: 江戸 時代 に は 4 つ の 火災 が あ っ た ため 、 明治 期 に 焼失 し た が 、 現在 の 建築 物 で あ る 『 本願 寺 <unk> 』 を 入手 し て い る こと が 多 く 、 当時 の 様式 と <unk> に 描 か れ て い る 。\n",
            "PRED SCORE: -45.3075\n",
            "\n",
            "[2021-08-14 10:38:24,013 INFO] \n",
            "SENT 980: ['The', 'Goei-do', ',', 'which', 'houses', 'the', 'statue', 'of', 'Shinran', 'Shonin', ',', 'is', 'among', 'the', 'largest', 'wooden', 'buildings', 'in', 'the', 'world', '(', 'currently', 'covered', 'by', 'scaffolding', 'for', 'a', 'major', 'restoration', ')', '.']\n",
            "PRED 980: 親鸞 聖人 像 を 安置 する 御影 堂 は 世界 最大 の 木造 <unk> で あ る 。\n",
            "PRED SCORE: -11.8716\n",
            "\n",
            "[2021-08-14 10:38:24,014 INFO] \n",
            "SENT 981: ['The', 'Goei-do', 'Gate', 'is', 'also', 'one', 'of', 'the', 'three', 'famous', 'gates', 'of', 'Kyoto', '.']\n",
            "PRED 981: 京都 三 <unk> の ひと つ 。\n",
            "PRED SCORE: -5.5175\n",
            "\n",
            "[2021-08-14 10:38:24,014 INFO] \n",
            "SENT 982: ['Shinran', \"'s\", '\"', 'Kyogyo', 'Shinsho', '\"', '(', 'National', 'Treasure', ')', '(', 'Bando', 'Edition', ')', 'is', 'in', 'its', 'possession', '.']\n",
            "PRED 982: 親鸞 の 『 <unk> <unk> 』 （ 国宝 ） は 所蔵 。\n",
            "PRED SCORE: -7.5673\n",
            "\n",
            "[2021-08-14 10:38:24,014 INFO] \n",
            "SENT 983: ['Shosei-en', 'Garden', ',', 'on', 'the', 'neighboring', 'grounds', ',', 'is', 'a', 'national', 'scenic', 'area', '.']\n",
            "PRED 983: <unk> <unk> （ <unk> <unk> ） は 、 近隣 の <unk> 地 に あ る <unk> 。\n",
            "PRED SCORE: -14.2713\n",
            "\n",
            "[2021-08-14 10:38:24,014 INFO] \n",
            "SENT 984: ['The', 'current', 'master', 'of', 'the', 'temple', 'is', 'Choken', 'OTANI', '(', 'Jonyo', ')', '.']\n",
            "PRED 984: 現在 の 寺 の 主人 は 大谷 光 暢 （ <unk> ） で あ る 。\n",
            "PRED SCORE: -13.0726\n",
            "\n",
            "[2021-08-14 10:38:24,015 INFO] \n",
            "SENT 985: ['National', 'Treasures']\n",
            "PRED 985: 国宝\n",
            "PRED SCORE: -0.3490\n",
            "\n",
            "[2021-08-14 10:38:24,015 INFO] \n",
            "SENT 986: ['Important', 'Cultural', 'Assets']\n",
            "PRED 986: 重要 文化 財\n",
            "PRED SCORE: -1.1964\n",
            "\n",
            "[2021-08-14 10:38:24,015 INFO] \n",
            "SENT 987: ['Take', 'the', 'Kyoto', 'City', 'Subway', 'to', 'Gojo', 'Station']\n",
            "PRED 987: 京都 市 営 <unk> → <unk> <unk>\n",
            "PRED SCORE: -5.3810\n",
            "\n",
            "[2021-08-14 10:38:24,015 INFO] \n",
            "SENT 988: ['Universities']\n",
            "PRED 988: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:24,015 INFO] \n",
            "SENT 989: ['Otani', 'University']\n",
            "PRED 989: 大谷 大学\n",
            "PRED SCORE: -0.6706\n",
            "\n",
            "[2021-08-14 10:38:24,016 INFO] \n",
            "SENT 990: ['Kyoto', 'Koka', 'Women', \"'s\", 'University']\n",
            "PRED 990: 京都 <unk> 女子 大学\n",
            "PRED SCORE: -2.1530\n",
            "\n",
            "[2021-08-14 10:38:24,586 INFO] \n",
            "SENT 991: ['Osaka', 'Ohtani', 'University']\n",
            "PRED 991: 大阪 <unk> 大学\n",
            "PRED SCORE: -1.5718\n",
            "\n",
            "[2021-08-14 10:38:24,587 INFO] \n",
            "SENT 992: ['Doho', 'Universiity']\n",
            "PRED 992: <unk>\n",
            "PRED SCORE: -1.9573\n",
            "\n",
            "[2021-08-14 10:38:24,587 INFO] \n",
            "SENT 993: ['Nagoya', 'Zokei', 'University', 'of', 'Art', '&', 'Design']\n",
            "PRED 993: 名古屋 美術 館\n",
            "PRED SCORE: -3.2099\n",
            "\n",
            "[2021-08-14 10:38:24,587 INFO] \n",
            "SENT 994: ['Nagoya', 'College', 'of', 'Music']\n",
            "PRED 994: 名古屋 <unk>\n",
            "PRED SCORE: -3.1485\n",
            "\n",
            "[2021-08-14 10:38:24,588 INFO] \n",
            "SENT 995: ['Aichi', 'Bunkyo', 'University']\n",
            "PRED 995: 愛知 <unk> 大学\n",
            "PRED SCORE: -2.5564\n",
            "\n",
            "[2021-08-14 10:38:24,588 INFO] \n",
            "SENT 996: ['Aichi', 'Shinshiro', 'Otani', 'University']\n",
            "PRED 996: 愛知 新城 大学\n",
            "PRED SCORE: -3.4813\n",
            "\n",
            "[2021-08-14 10:38:24,588 INFO] \n",
            "SENT 997: ['Under', 'the', 'prewar', 'school', 'educational', 'system', ',', 'Third', 'High', 'School', 'was', 'one', 'of', 'the', 'high', 'schools', 'that', 'later', 'became', 'a', 'foundation', 'of', 'the', 'present', 'Kyoto', 'University', '.']\n",
            "PRED 997: 第 三 高等 学校 は 第 三 高等 学校 の 一 つ で あ り 、 後 に 現在 の 京都 大学 の 基礎 と な っ た 。\n",
            "PRED SCORE: -12.4541\n",
            "\n",
            "[2021-08-14 10:38:24,588 INFO] \n",
            "SENT 998: ['The', 'school', 'was', 'commonly', 'called', '\"', 'Sanko', '.', '\"']\n",
            "PRED 998: 通称 は <unk> 。\n",
            "PRED SCORE: -3.0945\n",
            "\n",
            "[2021-08-14 10:38:24,589 INFO] \n",
            "SENT 999: ['Hikoichi', 'ORITA', 'was', 'its', 'first', 'president', '.']\n",
            "PRED 999: 初代 <unk> は <unk> <unk> 。\n",
            "PRED SCORE: -4.6558\n",
            "\n",
            "[2021-08-14 10:38:24,589 INFO] \n",
            "SENT 1000: ['1869', ':', 'Seimi-kyoku', 'was', 'founded', 'in', 'Osaka']\n",
            "PRED 1000: <unk> 年 （ <unk> 2 年 ） ： 大坂 に <unk> が 設置 さ れ る\n",
            "PRED SCORE: -11.1548\n",
            "\n",
            "[2021-08-14 10:38:24,589 INFO] \n",
            "SENT 1001: ['The', 'school', 'underwent', 'continuous', 'changes', 'in', 'structure', 'and', 'nomenclature', '.']\n",
            "PRED 1001: <unk> ・ <unk> に よ っ て <unk> が 変わ っ た 。\n",
            "PRED SCORE: -13.2106\n",
            "\n",
            "[2021-08-14 10:38:24,589 INFO] \n",
            "SENT 1002: ['1870', ':', 'Institute', 'of', 'Chemistry', '(', 'Kagakusho', ')', '→', 'Institute', 'of', 'Science', '(', 'Rigakusho', ')', '→', 'Kaiseijo', '→']\n",
            "PRED 1002: <unk> 年 <unk> <unk> 研究 所 （ <unk> ） <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -11.2311\n",
            "\n",
            "[2021-08-14 10:38:24,590 INFO] \n",
            "SENT 1003: ['1872', ':', 'Fourth', 'University', 'District', 'No.', '1', 'Junior', 'High', 'School', '*', '→']\n",
            "PRED 1003: 1872 年 （ 明治 5 年 ） ： <unk> 社 <unk> 第 1 高等 学校 <unk> 部 ※\n",
            "PRED SCORE: -12.7256\n",
            "\n",
            "[2021-08-14 10:38:24,590 INFO] \n",
            "SENT 1004: ['1873', ':', 'Third', 'University', 'District', 'No.', '1', 'Junior', 'High', 'School', '→', 'Kaimei', 'Gakko', '→']\n",
            "PRED 1004: <unk> 年 （ 昭和 <unk> 年 ） 第 3 高等 学校 令 第 1 号 <unk> 高等 <unk> 学校\n",
            "PRED SCORE: -16.1494\n",
            "\n",
            "[2021-08-14 10:38:24,590 INFO] \n",
            "SENT 1005: ['1874', ':', 'Osaka', 'School', 'of', 'Foreign', 'Languages', '→', 'Osaka', 'English', 'Academy']\n",
            "PRED 1005: 1874 年 （ 明治 7 年 ） ： 大阪 高等 <unk> 学校 大阪 英語 学校\n",
            "PRED SCORE: -11.2216\n",
            "\n",
            "[2021-08-14 10:38:24,590 INFO] \n",
            "SENT 1006: ['1879', ':', 'Osaka', 'Technical', 'College']\n",
            "PRED 1006: <unk> 年 大阪 <unk> <unk>\n",
            "PRED SCORE: -4.0175\n",
            "\n",
            "[2021-08-14 10:38:24,591 INFO] \n",
            "SENT 1007: ['1880', ':', 'Osaka', 'Middle', 'School']\n",
            "PRED 1007: <unk> 年 大阪 中 学校\n",
            "PRED SCORE: -2.8054\n",
            "\n",
            "[2021-08-14 10:38:24,591 INFO] \n",
            "SENT 1008: ['1885', ':', 'It', 'was', 'reorganized', 'as', 'a', 'branch', 'school', 'of', 'a', 'university', ',', 'after', 'which', 'the', 'Third', 'Higher', 'Middle', 'School', '(', 'Dai', 'San', 'Koto', 'Chugakko', ')', 'was', 'established', 'in', '1886', '.']\n",
            "PRED 1008: 1885 年 （ 明治 18 年 ） ： 第 3 次 <unk> 中 学校 （ 第 三 高等 学校 ） が 成立 し た <unk> 学校 の <unk> と し て <unk> 。\n",
            "PRED SCORE: -20.4500\n",
            "\n",
            "[2021-08-14 10:38:24,591 INFO] \n",
            "SENT 1009: ['1887', ':', 'Okayama', 'Prefectural', 'Medical', 'School', 'became', 'the', 'Third', 'Higher', 'Middle', 'School', 'Medical', 'Faculty', '(', 'Sakae-machi', ',', 'Okayama', 'City', ')', '.']\n",
            "PRED 1009: <unk> 年 岡山 県 立 <unk> 中 学校 （ 岡山 市 <unk> 町 ）\n",
            "PRED SCORE: -6.8703\n",
            "\n",
            "[2021-08-14 10:38:24,591 INFO] \n",
            "SENT 1010: ['The', 'main', 'curriculum', '(', 'university', 'preparatory', 'education', ')', 'started', '.']\n",
            "PRED 1010: 主な <unk> （ <unk> 教育 ） が 始ま る 。\n",
            "PRED SCORE: -7.2578\n",
            "\n",
            "[2021-08-14 10:38:24,592 INFO] \n",
            "SENT 1011: ['1889', ':', 'Third', 'Higher', 'Middle', 'School', 'was', 'relocated', 'from', 'Higashi-ku', '(', 'present-day', 'Chuo-ku', ')', ',', 'Osaka', 'City', 'to', 'Kamigyo-ku', '(', 'present-day', 'Sakyo-ku', ')', ',', 'Kyoto', 'City', '.']\n",
            "PRED 1011: 1889 年 （ 明治 22 年 ） ： 大阪 市 北 区 ( 大阪 市 ) から 京都 市 左京 区 （ 現在 の <unk> ） に 移転 。\n",
            "PRED SCORE: -15.5695\n",
            "\n",
            "[2021-08-14 10:38:24,592 INFO] \n",
            "SENT 1012: ['The', 'College', 'of', 'Law', 'was', 'also', 'founded', 'in', 'addition', 'to', 'the', 'already', 'established', 'College', 'of', 'Medicine', '.']\n",
            "PRED 1012: また 、 すでに <unk> 医学 の <unk> に 加え て 、 <unk> 法 も 制定 さ れ た 。\n",
            "PRED SCORE: -14.3357\n",
            "\n",
            "[2021-08-14 10:38:24,592 INFO] \n",
            "SENT 1013: ['1893', ':', 'The', 'Third', 'Higher', 'Middle', 'School', 'was', 'elevated', 'to', 'status', 'as', 'the', 'Third', 'High', 'School', '.']\n",
            "PRED 1013: <unk> 年 （ <unk> 2 年 ） 第 三 高等 学校 が 第 三 高等 学校 に <unk> 。\n",
            "PRED SCORE: -12.0856\n",
            "\n",
            "[2021-08-14 10:38:24,592 INFO] \n",
            "SENT 1014: ['The', 'main', 'curriculum', '(', 'university', 'preparatory', 'education', ')', 'and', 'preparatory', 'course', 'were', 'abolished', '.']\n",
            "PRED 1014: 主要 <unk> （ <unk> 教育 ） と <unk> <unk> が 廃止 さ れ た 。\n",
            "PRED SCORE: -9.5328\n",
            "\n",
            "[2021-08-14 10:38:24,593 INFO] \n",
            "SENT 1015: ['The', 'College', 'of', 'Engineering', 'was', 'established', '.']\n",
            "PRED 1015: <unk> <unk> の 制定 。\n",
            "PRED SCORE: -6.2655\n",
            "\n",
            "[2021-08-14 10:38:24,593 INFO] \n",
            "SENT 1016: ['A', 'preparatory', 'course', 'was', 're-established', 'for', 'the', 'Kyoto', 'Imperial', 'University', ',', 'which', 'was', 'to', 'be', 'founded', 'in', '1897', '(', 'thus', 'restoring', 'university', 'preparatory', 'education', ')', '.']\n",
            "PRED 1016: <unk> は <unk> 年 に 設立 さ れ た 京都 <unk> 大学 の <unk> で あ る 。\n",
            "PRED SCORE: -13.8309\n",
            "\n",
            "[2021-08-14 10:38:24,593 INFO] \n",
            "SENT 1017: ['The', 'colleges', 'of', 'Law', 'and', 'Engineering', 'closed', '.', '(', 'The', 'ordinance', 'was', 'issued', 'in', '1901', '.', ')']\n",
            "PRED 1017: <unk> 令 と <unk> 令 （ <unk> 年 ）\n",
            "PRED SCORE: -8.4660\n",
            "\n",
            "[2021-08-14 10:38:24,593 INFO] \n",
            "SENT 1018: ['1901', ':', 'College', 'of', 'Medicine', 'was', 'transformed', 'into', 'Okayama', 'University', '.']\n",
            "PRED 1018: <unk> 年 （ 昭和 4 年 ） ： <unk> 医学 部 が 岡山 大学 に <unk> 。\n",
            "PRED SCORE: -11.0065\n",
            "\n",
            "[2021-08-14 10:38:24,594 INFO] \n",
            "SENT 1019: ['1949', ':', 'Along', 'with', 'the', 'former', 'Kyoto', 'University', '(', 'called', 'Kyoto', 'Imperial', 'University', 'until', '1947', ')', 'and', 'the', 'Medical', 'Specialization', 'Division', 'of', 'Kyoto', 'University', ',', 'Third', 'High', 'School', 'came', 'to', 'be', 'included', 'in', 'the', 'present', 'Kyoto', 'University', 'as', 'its', 'branch', 'school', '(', 'bunko', ')', 'and', 'provided', 'education', 'in', 'the', 'liberal', 'arts', '.']\n",
            "PRED 1019: 1949 年 （ 昭和 24 年 ） ： 旧 京都 大学 （ <unk> 年 まで は 京都 <unk> 大学 ） と 京都 大学 医学 部 （ 第 三 高等 学校 ） と とも に 、 現在 の <unk> 学校 （ <unk> ） と し て 京都 大学 に 編入 さ れ 、 <unk> 教育 に 当た っ た 。\n",
            "PRED SCORE: -37.8514\n",
            "\n",
            "[2021-08-14 10:38:24,594 INFO] \n",
            "SENT 1020: ['1950', ':', 'The', 'Third', 'High', 'School', 'was', 'abolished', 'once', 'the', 'last', 'of', 'its', 'students', 'had', 'graduated', '.']\n",
            "PRED 1020: <unk> 年 （ 明治 2 年 ） 第 三 高等 学校 が <unk> し た 際 に <unk> し た 。\n",
            "PRED SCORE: -16.9125\n",
            "\n",
            "[2021-08-14 10:38:25,202 INFO] \n",
            "SENT 1021: ['1954', ':', 'The', 'branch', 'school', 'was', 'renamed', 'the', 'College', 'of', 'Liberal', 'Arts', 'and', 'Sciences', '.']\n",
            "PRED 1021: 1954 年 （ 昭和 29 年 ） ： <unk> を <unk> ・ <unk> と 改称 。\n",
            "PRED SCORE: -11.3119\n",
            "\n",
            "[2021-08-14 10:38:25,202 INFO] \n",
            "SENT 1022: ['1991', ':', 'In', 'the', 'course', 'of', 'reforming', 'the', 'College', 'of', 'Liberal', 'Arts', 'and', 'Sciences', ',', 'the', 'Graduate', 'School', 'of', 'Human', 'and', 'Environmental', 'Studies', 'was', 'established', '.']\n",
            "PRED 1022: 1991 年 （ 平成 3 年 ） ： <unk> <unk> ・ <unk> <unk> の <unk> に よ り 、 人間 <unk> ・ <unk> <unk> が 成立 。\n",
            "PRED SCORE: -24.1958\n",
            "\n",
            "[2021-08-14 10:38:25,203 INFO] \n",
            "SENT 1023: ['1992', ':', 'The', 'College', 'of', 'Liberal', 'Arts', 'and', 'Sciences', 'was', 'reorganized', 'as', 'the', 'Faculty', 'of', 'Integrated', 'Human', 'Studies', '.']\n",
            "PRED 1023: 1992 年 （ 平成 4 年 ） ： <unk> <unk> <unk> と <unk> <unk> が 総合 人間 <unk> と し て <unk> 。\n",
            "PRED SCORE: -17.6717\n",
            "\n",
            "[2021-08-14 10:38:25,203 INFO] \n",
            "SENT 1024: ['The', 'College', 'of', 'Liberal', 'Arts', 'and', 'Sciences', 'was', 'abolished', '.']\n",
            "PRED 1024: <unk> ・ <unk> は 廃止 さ れ た 。\n",
            "PRED SCORE: -5.6362\n",
            "\n",
            "[2021-08-14 10:38:25,203 INFO] \n",
            "SENT 1025: ['2003', ':', 'The', 'faculties', 'of', 'Integrated', 'Human', 'Studies', 'and', 'Human', 'and', 'Environmental', 'Studies', 'were', 'merged', '.']\n",
            "PRED 1025: <unk> 年 （ <unk> 2 年 ） ： 総合 人間 ・ <unk> 研究 <unk> を <unk> 。\n",
            "PRED SCORE: -16.9237\n",
            "\n",
            "[2021-08-14 10:38:25,203 INFO] \n",
            "SENT 1026: ['*', 'See', 'Education', 'System', 'Order']\n",
            "PRED 1026: ※ 教育 制度\n",
            "PRED SCORE: -3.1490\n",
            "\n",
            "[2021-08-14 10:38:25,204 INFO] \n",
            "SENT 1027: ['Amaterasu', 'omikami', '(', 'Tensho', 'daijin', ')', 'is', 'a', 'humanized', 'Shinto', 'god', 'in', 'Japanese', '.']\n",
            "PRED 1027: <unk> <unk> （ <unk> <unk> ） は 日本 の 神 。\n",
            "PRED SCORE: -7.9259\n",
            "\n",
            "[2021-08-14 10:38:25,204 INFO] \n",
            "SENT 1028: ['In', '\"', 'Engishiki', '(', 'List', 'of', 'Official', 'Shrines', ')', ',', '\"', '\"', 'Amaterasu', '\"', 'of', 'Amaterasu', 'Omikami', 'is', 'cited', 'as', '\"', 'Amateru', '\"', 'when', 'worshipped', 'as', 'the', 'god', 'of', 'nature', '.']\n",
            "PRED 1028: 『 延喜 式 』 に は 、 自然 の 神 と し て 祀 ら れ た 際 に 「 <unk> 」 と 表記 さ れ る 。\n",
            "PRED SCORE: -18.4437\n",
            "\n",
            "[2021-08-14 10:38:25,204 INFO] \n",
            "SENT 1029: ['Amaterasu', 'Omikami', 'is', 'the', 'god', 'of', 'the', 'sun', 'and', 'one', 'of', 'the', 'Oyagami', '(', 'parent', 'deities', ')', 'of', 'the', 'Imperial', 'Family', '(', 'the', 'Kososhin', '(', 'imperial', 'ancestor', ')', ')', '.']\n",
            "PRED 1029: <unk> <unk> （ <unk> <unk> ） は 、 皇族 （ <unk> ） の <unk> の 一 つ 。\n",
            "PRED SCORE: -13.9778\n",
            "\n",
            "[2021-08-14 10:38:25,204 INFO] \n",
            "SENT 1030: ['In', '\"', 'Kojiki', '(', 'Records', 'of', 'Ancient', 'Matters', ')', ',', '\"', 'Amaterasu', 'Omikami', 'is', 'referred', 'to', 'as', '天照大御神', 'whereas', 'in', '\"', 'Nihonshoki', '(', 'Chronicles', 'of', 'Japan', ')', '\"', 'the', 'god', 'is', 'cited', 'as', '天照大神', '.']\n",
            "PRED 1030: 『 古事 記 』 で は <unk> <unk> を <unk> 、 『 日本 書紀 』 で は <unk> を <unk> 神 と し て い る 。\n",
            "PRED SCORE: -13.2716\n",
            "\n",
            "[2021-08-14 10:38:25,204 INFO] \n",
            "SENT 1031: ['Another', 'name', 'given', 'to', 'her', 'is', 'Ohirumenomuchi', 'no', 'kami', '.']\n",
            "PRED 1031: 別名 <unk> 守 。\n",
            "PRED SCORE: -3.4833\n",
            "\n",
            "[2021-08-14 10:38:25,205 INFO] \n",
            "SENT 1032: ['In', '\"', 'Nihonshoki', '(', 'Chronicles', 'of', 'Japan', ')', ',', '\"', 'Amaterasu', 'Omikami', 'is', 'referred', 'to', 'under', 'different', 'names', ',', 'whereas', 'in', '\"', 'Kojiki', '(', 'Records', 'of', 'Ancient', 'Matters', ')', '\"', 'she', 'is', 'consistently', 'cited', 'as', '\"', '天照大御神', '.', '\"']\n",
            "PRED 1032: 『 日本 書紀 』 に よ れ ば 、 <unk> <unk> は 別 の 名 で 記 さ れ て お り 、 『 古事 記 』 で は 「 <unk> 」 と 表記 さ れ て い る 。\n",
            "PRED SCORE: -22.8950\n",
            "\n",
            "[2021-08-14 10:38:25,205 INFO] \n",
            "SENT 1033: ['Amaterasu', 'Omikami', 'is', 'considered', 'to', 'be', 'female', ',', 'but', 'some', 'say', 'the', 'god', 'is', 'male', '.']\n",
            "PRED 1033: <unk> <unk> は 女性 と さ れ る が 、 一説 に は 男性 で あ る と する 説 も あ る 。\n",
            "PRED SCORE: -13.1444\n",
            "\n",
            "[2021-08-14 10:38:25,205 INFO] \n",
            "SENT 1034: ['Because', 'the', 'name', 'of', 'Amaterasu', 'Omikami', 'was', 'used', 'in', 'the', 'political', 'scene', 'as', 'shown', 'in', '\"', 'Kotai', 'jingu', 'gishikisho', ',', '\"', 'Shoei', 'MISHIMA', 'and', 'Tsutomu', 'SAIJO', 'even', 'argue', 'that', 'Takamimusubi', 'was', 'the', 'Kososhin', '(', 'imperial', 'ancestor', ')', ';', ',', 'and', 'that', 'Hirume', 'was', 'deified', 'and', 'became', 'Amaterasu', 'Omikami', '.']\n",
            "PRED 1034: <unk> <unk> の 名称 は 『 <unk> <unk> 』 に 見 られ る よう な 政治 場面 で 使用 さ れ て い た ため 、 <unk> <unk> と <unk> <unk> は <unk> （ <unk> ） で あ り 、 <unk> は <unk> で あ る と する 説 も あ り 、 <unk> が <unk> <unk> と な っ た 。\n",
            "PRED SCORE: -46.5617\n",
            "\n",
            "[2021-08-14 10:38:25,205 INFO] \n",
            "SENT 1035: ['At', 'Ise', 'Jingu', 'Shrine', ',', 'Amaterasu', 'Omikami', 'is', 'typically', 'referred', 'to', 'as', 'Amaterasu', 'sume', 'Omikami', ',', 'Sume', 'Omikami', 'or', 'Amaterasimasu', 'Sume', 'Omikami', ',', 'particularly', 'when', 'the', 'name', 'is', 'uttered', 'before', 'the', 'altar', 'in', 'ceremonies', '.']\n",
            "PRED 1035: <unk> 八幡 宮 で は <unk> <unk> 、 <unk> <unk> 、 <unk> <unk> 、 <unk> <unk> など と 呼 ば れ 、 特に 儀式 の 際 に <unk> さ れ る 。\n",
            "PRED SCORE: -27.4786\n",
            "\n",
            "[2021-08-14 10:38:25,206 INFO] \n",
            "SENT 1036: ['In', 'academic', 'documents', 'she', 'is', 'now', 'customarily', 'spelled', '\"', 'アマテラス', '\"', 'in', 'katakana', '.']\n",
            "PRED 1036: 現在 で は <unk> で 「 <unk> 」 と 書 か れ る こと が 多 い 。\n",
            "PRED SCORE: -13.1277\n",
            "\n",
            "[2021-08-14 10:38:25,206 INFO] \n",
            "SENT 1037: ['Some', 'say', 'that', 'in', 'old', 'days', 'she', 'was', 'cited', 'as', '天照太神', '.']\n",
            "PRED 1037: 古く は <unk> と さ れ た と する 説 も あ る 。\n",
            "PRED SCORE: -7.8885\n",
            "\n",
            "[2021-08-14 10:38:25,206 INFO] \n",
            "SENT 1038: ['How', 'Amaterasu', 'omikami', 'is', 'described', 'in', 'myths']\n",
            "PRED 1038: 神話 に おけ る <unk>\n",
            "PRED SCORE: -4.9934\n",
            "\n",
            "[2021-08-14 10:38:25,206 INFO] \n",
            "SENT 1039: ['According', 'to', '\"', 'Kojiki', '(', 'Records', 'of', 'Ancient', 'Matters', ')', ',', '\"', 'Amaterasu', 'Omikami', 'was', 'born', 'from', 'Izanagi', 'as', 'she', 'rinsed', 'her', 'left', 'eye', 'when', 'safely', 'returning', 'from', 'Yomi', '(', 'the', 'world', 'after', 'death', ')', 'where', 'Izanami', 'lived', ',', 'in', 'order', 'to', 'remove', 'the', 'dirt', '.']\n",
            "PRED 1039: 『 古事 記 』 に よ れ ば 、 <unk> が 住 ん で い た <unk> の <unk> を <unk> する ため 、 <unk> が <unk> し た とき に <unk> を <unk> し た と い う 。\n",
            "PRED SCORE: -31.2371\n",
            "\n",
            "[2021-08-14 10:38:25,207 INFO] \n",
            "SENT 1040: ['At', 'this', 'time', ',', 'Tsukuyomi', 'was', 'born', 'from', 'her', 'right', 'eye', 'and', 'Susanoo', 'from', 'her', 'nose', ',', 'and', 'the', 'three', 'together', 'have', 'come', 'to', 'be', 'called', 'Mihashira', 'no', 'uzuno', 'miko', '(', 'three', 'noble', 'children', ')', '.']\n",
            "PRED 1040: この とき 、 <unk> は 右 の 目 から <unk> と スサノオ の <unk> から 生まれ 、 三 人 の <unk> を 三 人 <unk> と 呼 ぶ よう に な っ た 。\n",
            "PRED SCORE: -24.7402\n",
            "\n",
            "[2021-08-14 10:38:25,207 INFO] \n",
            "SENT 1041: ['Izanagi', 'then', 'instructed', 'Amaterasu', 'Omikami', 'to', 'rule', 'Takamanohara', '.']\n",
            "PRED 1041: その 後 、 <unk> は <unk> を <unk> し て <unk> を 行 っ た 。\n",
            "PRED SCORE: -14.1474\n",
            "\n",
            "[2021-08-14 10:38:25,207 INFO] \n",
            "SENT 1042: ['Because', 'Susanoo', '—', 'who', 'had', 'been', 'instructed', 'to', 'rule', 'Unabara', '(', 'the', 'sea', ')', '—', 'kept', 'crying', ',', 'saying', 'he', 'wanted', 'to', 'go', 'to', 'the', 'land', 'of', 'the', 'roots', '(', 'the', 'land', 'of', 'Izanami', ')', ',', 'he', 'was', 'finally', 'expelled', 'by', 'Izanagi', '.']\n",
            "PRED 1042: <unk> を 支配 する ため に <unk> さ れ て い た スサノオ は 、 <unk> を <unk> し よ う と し た の で 、 <unk> から 追放 さ れ た 。\n",
            "PRED SCORE: -26.6604\n",
            "\n",
            "[2021-08-14 10:38:25,207 INFO] \n",
            "SENT 1043: ['Although', 'Susanao', 'ascended', 'to', 'Takamanohara', 'to', 'meet', 'Amaterasu', 'Omikami', ',', 'his', 'elder', 'sister', ',', 'on', 'the', 'way', 'to', 'the', 'land', 'of', 'the', 'roots', ',', 'Amaterasu', 'Omikami', ',', 'who', 'assumed', 'her', 'brother', 'was', 'coming', 'to', 'deprive', 'her', 'of', 'Takamanohara', ',', 'armed', 'herself', 'and', 'waited', 'for', 'him', '.']\n",
            "PRED 1043: <unk> <unk> は <unk> <unk> に <unk> し よ う と し た が 、 <unk> の <unk> に あた る <unk> <unk> は <unk> の <unk> に あた り 、 <unk> の <unk> に 当た っ た 。\n",
            "PRED SCORE: -33.4871\n",
            "\n",
            "[2021-08-14 10:38:25,208 INFO] \n",
            "SENT 1044: ['After', 'Susanoo', 'made', 'a', 'pledge', 'to', 'prove', 'that', 'he', 'had', 'no', 'such', 'intention', ',', 'five', 'male', 'gods', 'were', 'born', 'from', 'Amaterasu', 'Omikami', \"'s\", 'Monozane', '(', 'the', 'media', 'from', 'which', 'gods', 'are', 'given', 'birth', ')', 'and', 'three', 'female', 'gods', 'from', 'that', 'of', 'Susanoo', ',', 'and', 'Susanoo', 'declared', 'victory', '.']\n",
            "PRED 1044: スサノオ は この よう な 意図 を 持 た な い こと を 証明 し た が 、 <unk> <unk> の <unk> から 生まれ た 5 人 の <unk> が スサノオ の 三 神 で あ り 、 <unk> <unk> を <unk> し た 。\n",
            "PRED SCORE: -35.0988\n",
            "\n",
            "[2021-08-14 10:38:25,208 INFO] \n",
            "SENT 1045: ['The', 'following', 'are', 'the', 'five', 'gods', 'considered', 'to', 'be', 'born', 'from', 'Amaterasu', 'Omikami', \"'s\", 'monozane', 'and', 'are', 'therefore', 'her', 'children', ':']\n",
            "PRED 1045: 以下 は <unk> <unk> の <unk> から 生まれ た と さ れ る 5 神 で あ る 。\n",
            "PRED SCORE: -13.5737\n",
            "\n",
            "[2021-08-14 10:38:25,208 INFO] \n",
            "SENT 1046: ['Amenooshihomimi']\n",
            "PRED 1046: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:25,208 INFO] \n",
            "SENT 1047: ['Amenohohi']\n",
            "PRED 1047: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:25,208 INFO] \n",
            "SENT 1048: ['Amatsuhikone']\n",
            "PRED 1048: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:25,209 INFO] \n",
            "SENT 1049: ['Ikutsuhikone']\n",
            "PRED 1049: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:25,209 INFO] \n",
            "SENT 1050: ['Kumanokusubi']\n",
            "PRED 1050: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:26,156 INFO] \n",
            "SENT 1051: ['Susanoo', ',', 'swept', 'up', 'by', 'the', 'event', ',', 'became', 'wild', 'and', 'violent', 'at', 'Takamanohara', ',', 'causing', 'his', 'sister', 'to', 'hide', 'herself', 'in', 'Ama', 'no', 'iwato', '(', 'the', 'cave', 'of', 'heaven', ')', '.']\n",
            "PRED 1051: これ に <unk> し た スサノオ は <unk> に <unk> し 、 妹 を 天 岩戸 に <unk> し た 。\n",
            "PRED SCORE: -18.2186\n",
            "\n",
            "[2021-08-14 10:38:26,156 INFO] \n",
            "SENT 1052: ['This', 'threw', 'the', 'entire', 'world', 'into', 'darkness', ',', 'and', 'various', 'problems', 'occurred', '.']\n",
            "PRED 1052: これ に よ り 世界 は <unk> 化 し 、 様々 な 問題 が 生 じ た 。\n",
            "PRED SCORE: -10.2601\n",
            "\n",
            "[2021-08-14 10:38:26,156 INFO] \n",
            "SENT 1053: ['Yao', 'yorozu', 'no', 'kami-like', 'Chichibu', 'no', 'kami', '(', 'the', 'god', 'of', 'wisdom', ')', ',', 'Ameno', 'yagokoroomoikane', 'no', 'mikoto', 'and', 'Ameno', 'koyane', 'no', 'mikoto-eventually', 'became', 'successful', 'in', 'getting', 'her', 'out', 'of', 'Ama', 'no', 'iwato', ',', 'but', 'she', 'drove', 'him', 'out', 'of', 'Takamanohara', '.']\n",
            "PRED 1053: 八尾 <unk> ・ <unk> <unk> ・ <unk> <unk> は 天 <unk> から <unk> し た が 、 <unk> を <unk> し た 。\n",
            "PRED SCORE: -19.1646\n",
            "\n",
            "[2021-08-14 10:38:26,157 INFO] \n",
            "SENT 1054: ['Amaterasu', 'Omikami', '—', 'who', 'had', 'decided', 'that', 'she', 'would', 'have', 'one', 'of', 'her', 'sons', ',', 'Amenooshihomimi', ',', 'descend', 'to', 'Ashihara', 'no', 'nakatsukuni', '—', 'dispatched', 'Amatsu', 'kami', '(', 'the', 'god', 'of', 'heaven', ')', 'there', '.']\n",
            "PRED 1054: <unk> <unk> は <unk> の 一人 で あ る こと を 決意 し 、 <unk> <unk> に 従 っ て <unk> <unk> に 向か っ た 。\n",
            "PRED SCORE: -21.2870\n",
            "\n",
            "[2021-08-14 10:38:26,157 INFO] \n",
            "SENT 1055: ['By', 'the', 'time', 'Amenooshihomimi', 'was', 'ready', 'to', 'descend', 'to', 'Ashihara', 'no', 'nakatsukuni', ',', 'where', 'peace', 'and', 'order', 'had', 'been', 'established', ',', 'Ninigi', '—', 'the', 'grandchild', 'of', 'Amaterasu', 'Omikami', '—', 'was', 'born', 'and', 'ordered', 'to', 'go', 'down', 'there', 'by', 'Amaterasu', 'Omikami', '.']\n",
            "PRED 1055: <unk> が 成立 し た <unk> の 君 へ の <unk> は 、 <unk> <unk> の 孫 で あ る <unk> <unk> の 孫 に あた る <unk> <unk> が 生まれ 、 <unk> <unk> に 命 じ られ た 。\n",
            "PRED SCORE: -31.7623\n",
            "\n",
            "[2021-08-14 10:38:26,157 INFO] \n",
            "SENT 1056: ['Interpretations']\n",
            "PRED 1056: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:26,157 INFO] \n",
            "SENT 1057: ['Because', 'some', 'myths', 'say', 'that', 'Amaterasu', 'Omikami', 'sought', 'opinions', 'from', 'her', 'elder', 'Amatsu', 'Kami', '(', 'the', 'god', 'of', 'heaven', ')', 'about', 'her', 'specific', 'acts-whether', 'they', 'were', 'good', 'or', 'not-and', 'even', 'followed', 'his', 'instructions', ',', 'some', 'consider', 'that', 'Amaterasu', 'Omikami', 'was', 'a', 'deified', 'Emperor', 'who', 'ruled', 'the', 'country', 'by', 'conducting', 'religious', 'services', '.']\n",
            "PRED 1057: 一説 に は 、 <unk> <unk> が 自ら の <unk> に つ い て の 具体 的 な <unk> に つ い て の <unk> に つ い て の <unk> を <unk> し た と する 説 も あ る ため 、 <unk> <unk> は 祭祀 を 行 う 天皇 で あ る と する 意見 も あ る 。\n",
            "PRED SCORE: -51.2790\n",
            "\n",
            "[2021-08-14 10:38:26,158 INFO] \n",
            "SENT 1058: ['Others', 'have', 'viewed', 'her', 'as', 'a', 'deified', 'miko', '(', 'female', 'Shinto', 'attendant', ')', '.']\n",
            "PRED 1058: その 他 に も <unk> を 神格 化 し た もの と し て 見 られ る 。\n",
            "PRED SCORE: -10.5792\n",
            "\n",
            "[2021-08-14 10:38:26,158 INFO] \n",
            "SENT 1059: ['Her', 'alias', 'name', ',', '\"', 'Hirume', ',', '\"', 'literally', 'means', '\"', 'the', 'woman', 'of', 'the', 'sun', ',', '\"', 'as', 'a', 'miko', ',', 'an', 'attendant', 'of', 'the', 'sun', 'god', '.']\n",
            "PRED 1059: <unk> 名 の 「 <unk> 」 は 太陽 神 の <unk> で あ る 。\n",
            "PRED SCORE: -13.6504\n",
            "\n",
            "[2021-08-14 10:38:26,158 INFO] \n",
            "SENT 1060: ['According', 'to', 'a', 'theory', ',', 'a', 'miko', 'who', 'had', 'served', 'the', 'god', 'of', 'the', 'sun', 'came', 'to', 'be', 'regarded', 'as', 'identical', 'to', 'the', 'god', 'himself', ';', 'this', 'caused', 'the', 'god', 'to', 'be', 'thought', 'of', 'as', 'female', ',', 'although', 'the', 'god', 'of', 'the', 'sun', 'is', 'typically', 'male', '.']\n",
            "PRED 1060: 一説 に よ れ ば 、 太陽 神 に 仕え た <unk> は 神 と 同一 視 さ れ る よう に な り 、 太陽 の 神 は <unk> で あ る が 女神 と さ れ て い る 。\n",
            "PRED SCORE: -23.9511\n",
            "\n",
            "[2021-08-14 10:38:26,158 INFO] \n",
            "SENT 1061: ['Other', 'theories', 'consider', 'that', 'Amaterasu', 'Omikami', 'is', 'female', 'because', 'her', 'myth', 'was', 'established', 'during', 'the', 'era', 'of', 'Empress', 'Jito', ',', 'or', 'because', 'Himiko', 'was', 'her', 'model', '.']\n",
            "PRED 1061: その 他 の 説 に よ れ ば 、 <unk> 皇后 の 時代 に 成立 し た と する 説 や 、 卑弥呼 の モデル で あ る と する 説 が あ る 。\n",
            "PRED SCORE: -21.7707\n",
            "\n",
            "[2021-08-14 10:38:26,159 INFO] \n",
            "SENT 1062: ['The', 'idea', 'that', 'the', 'god', 'of', 'the', 'sun', '(', 'Amaterasu', 'Omikami', ')', 'and', 'the', 'god', 'of', 'the', 'moon', '(', 'Tsukuyomi', ')', 'were', 'born', 'from', 'the', 'eyes', 'of', 'Izanagi', 'shows', 'a', 'strong', 'influence', 'of', 'Taoism', ',', 'whose', 'canons', '\"', 'Reiho', 'gobujo', '\"', '(', 'completed', 'by', 'the', 'sixth', 'century', ')', 'and', '\"', 'Goho', 'innenkyo', '\"', '(', 'written', 'at', 'the', 'beginning', 'of', 'the', 'seventh', 'century', ')', 'respectively', 'contain', 'descriptions', 'of', '\"', 'turning', 'his', 'eyes', 'into', 'the', 'sun', 'and', 'the', 'moon', '\"', 'and', '\"', 'turning', 'his', 'left', 'eye', 'into', 'the', 'sun', 'and', 'his', 'right', 'eye', 'into', 'the', 'moon', '.', '\"']\n",
            "PRED 1062: 太陽 神 と 月 神 （ <unk> ） の 神 が <unk> の 目 から 生まれ た と い う の は 、 『 <unk> <unk> 』 （ 6 世紀 初頭 ） と 『 <unk> <unk> 』 （ 7 世紀 初頭 ） の 『 <unk> <unk> 』 （ 7 世紀 初頭 ） の 影響 を 受け て お り 、 『 太陽 』 と 『 月 』 （ 7 世紀 初頭 ） の 『 <unk> 』 の <unk> を 太陽 と 月 に <unk> し た もの で あ る 。\n",
            "PRED SCORE: -69.8608\n",
            "\n",
            "[2021-08-14 10:38:26,159 INFO] \n",
            "SENT 1063: ['Some', 'say', 'there', 'is', 'a', 'parallelism', 'between', 'Shinto', 'and', 'Taoism', 'in', 'some', 'of', 'the', 'terms', 'used', 'for', 'Ise', 'Jingu', 'Shrine', ',', 'which', 'worships', 'Amaterasu', 'Omikami', '—', 'such', 'as', 'okami', '(', 'great', 'god', ')', ',', 'Jingu', ',', 'itsuki', 'no', 'miya', ',', 'itsuki', 'no', 'yakata', ',', 'murasaki', 'no', 'mizo', ',', 'kiyoginu', ',', 'mitegura', 'and', 'usukinu', '—', 'and', 'in', 'the', 'idea', 'behind', 'dividing', 'its', 'shrine', 'into', 'Kotai', 'jingu', 'and', 'Toyouke', 'daijingu', '.']\n",
            "PRED 1063: <unk> 神社 と の 間 に は 、 <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> ・ <unk> など の <unk> を 祀 る <unk> 神社 と の 間 に 、 神社 の 境内 を <unk> ・ <unk> ・ <unk> に 分け る 考え が あ る 。\n",
            "PRED SCORE: -37.7467\n",
            "\n",
            "[2021-08-14 10:38:26,159 INFO] \n",
            "SENT 1064: ['In', 'comparative', 'mythology', ',', 'the', 'myth', 'of', 'the', 'birth', 'of', 'Amaterasu', 'Omikami', 'is', 'nearly', 'identical', 'to', 'that', 'of', 'Pangu', ',', 'as', 'recorded', 'earlier', '(', 'somewhere', 'during', 'the', 'third', 'or', 'fourth', 'century', ')', '.']\n",
            "PRED 1064: <unk> 神話 に お い て は 、 <unk> <unk> の 出生 に つ い て は 、 3 世紀 ～ 4 世紀 に かけ て の 記述 と ほぼ 一致 する 。\n",
            "PRED SCORE: -23.9808\n",
            "\n",
            "[2021-08-14 10:38:26,159 INFO] \n",
            "SENT 1065: ['Because', 'the', 'story', 'of', 'turning', 'the', 'eyes', 'into', 'the', 'sun', 'and', 'the', 'moon', 'is', 'a', 'common', 'analogy', 'found', 'across', 'Asia', ',', 'some', 'consider', 'that', 'the', 'myth', 'was', 'propagated', 'as', 'peoples', 'migrated', 'around', 'the', 'region', 'during', 'prehistory', '.']\n",
            "PRED 1065: <unk> が 太陽 に <unk> し て 月 が <unk> の <unk> と な っ て い る こと から 、 <unk> を 中心 と し た 地域 の <unk> 民族 と し て <unk> さ れ た と する 見 方 も あ る 。\n",
            "PRED SCORE: -36.2589\n",
            "\n",
            "[2021-08-14 10:38:26,160 INFO] \n",
            "SENT 1066: ['Some', 'scholars', 'point', 'out', 'that', 'in', '\"', 'Nihon', 'Shoki', '\"', '(', 'Chronicles', 'of', 'Japan', ')', ',', 'the', 'divinity', 'of', 'Amaterasu', 'Omikami', ',', 'was', 'changed', 'in', 'three', 'stages', '.']\n",
            "PRED 1066: 『 日本 書紀 』 に よ れ ば 、 <unk> <unk> の <unk> が 三 段階 で 変化 し た と する 説 も あ る 。\n",
            "PRED SCORE: -16.0307\n",
            "\n",
            "[2021-08-14 10:38:26,160 INFO] \n",
            "SENT 1067: ['The', 'following', 'describes', 'the', 'historical', 'events', 'and', 'their', 'details', 'that', 'triggered', 'the', 'changes', ':']\n",
            "PRED 1067: 以下 の よう な 歴史 的 経緯 と 内容 に つ い て は 、 その 後 の 変遷 を 記 す 。\n",
            "PRED SCORE: -21.7704\n",
            "\n",
            "[2021-08-14 10:38:26,160 INFO] \n",
            "SENT 1068: ['645', ':', 'The', 'Taika', 'era', 'reforms', 'took', 'place', '.']\n",
            "PRED 1068: <unk> 年 （ <unk> 2 年 ） ： <unk> <unk> が 行 わ れ る 。\n",
            "PRED SCORE: -11.6400\n",
            "\n",
            "[2021-08-14 10:38:26,160 INFO] \n",
            "SENT 1069: ['It', 'was', 'after', 'these', 'reforms', 'that', 'the', 'Imperial', 'Family', 'began', 'to', 'worship', 'Amaterasu', 'Omikami', '.']\n",
            "PRED 1069: これ に よ り 、 天皇 家 が <unk> <unk> を 祀 る よう に な っ た 。\n",
            "PRED SCORE: -12.4858\n",
            "\n",
            "[2021-08-14 10:38:26,160 INFO] \n",
            "SENT 1070: ['Hi', 'no', 'kami', '(', 'the', 'god', 'of', 'the', 'sun', ')', 'or', 'the', 'sun', 'itself', '.']\n",
            "PRED 1070: 太陽 神 また は 太陽 神 自体\n",
            "PRED SCORE: -6.0603\n",
            "\n",
            "[2021-08-14 10:38:26,161 INFO] \n",
            "SENT 1071: ['A', 'male', 'god', 'called', '\"', 'Amateru', '\"', 'was', 'widely', 'worshipped', '.']\n",
            "PRED 1071: <unk> と 呼 ば れ る 男性 神 が 広 く 信仰 さ れ た 。\n",
            "PRED SCORE: -8.1670\n",
            "\n",
            "[2021-08-14 10:38:26,161 INFO] \n",
            "SENT 1072: ['\"', 'Engishiki', '(', 'List', 'of', 'Official', 'Shrines', ')', '\"', 'lists', 'the', 'shrines', 'that', 'contained', 'within', 'their', 'names', 'the', 'word', '\"', 'Amateru', '\"', '—', 'like', 'the', 'Amateru', 'Jinja', 'Shrine', 'of', 'Tsushima', ',', 'the', 'Iiboniamateru', 'Jinja', 'Shrine', 'of', 'Harima', 'and', 'the', 'Amateru', 'mitama', 'no', 'mikoto', 'Jinja', 'Shrine', 'of', 'Tanba', '.']\n",
            "PRED 1072: 『 <unk> 』 に は 、 <unk> の <unk> 神社 、 <unk> の <unk> 神社 、 播磨 の <unk> 神社 、 <unk> の <unk> 神社 など が あ る 。\n",
            "PRED SCORE: -22.2489\n",
            "\n",
            "[2021-08-14 10:38:26,161 INFO] \n",
            "SENT 1073: ['In', 'fact', ',', 'Amateru', '(', 'as', 'the', 'name', 'of', 'the', 'male', 'god', ')', 'is', 'the', 'alias', 'name', 'of', 'Amaterasu', 'Omikami', \"'s\", 'grandson', 'Amenohoakari', ',', 'who', 'is', 'the', 'first', 'ancestor', 'of', 'the', 'Owari', ',', 'Tsumori', 'and', 'Kaifu', 'clans', '.']\n",
            "PRED 1073: 実際 に <unk> （ <unk> ） と は 、 <unk> の 孫 で あ る <unk> <unk> の 孫 で あ る <unk> <unk> の 子孫 で あ る 。\n",
            "PRED SCORE: -22.5815\n",
            "\n",
            "[2021-08-14 10:38:26,161 INFO] \n",
            "SENT 1074: ['Additionally', ',', 'Amenohoakari', \"'s\", 'younger', 'brother', 'was', 'Ninigi', ',', 'the', 'great-grandfather', 'of', 'Emperor', 'Jimmu', '.']\n",
            "PRED 1074: また 、 <unk> の 弟 の <unk> は <unk> 天皇 の <unk> と な っ た 。\n",
            "PRED SCORE: -9.7391\n",
            "\n",
            "[2021-08-14 10:38:26,162 INFO] \n",
            "SENT 1075: ['672', ':', 'The', 'Jinsin', 'War', 'broke', 'out', '.']\n",
            "PRED 1075: <unk> 年 （ <unk> 元年 ） ： <unk> の 乱 が <unk> 。\n",
            "PRED SCORE: -4.1822\n",
            "\n",
            "[2021-08-14 10:38:26,162 INFO] \n",
            "SENT 1076: ['\"', 'Ohirumenomuchi', '(', 'a', 'woman', 'who', 'worships', 'the', 'god', 'of', 'the', 'sun', ')', '\"', 'or', '\"', 'Tanabatatsume', '.', '\"']\n",
            "PRED 1076: <unk> 、 <unk> 。\n",
            "PRED SCORE: -5.0038\n",
            "\n",
            "[2021-08-14 10:38:26,162 INFO] \n",
            "SENT 1077: ['Two', 'interpretations', 'exist', ':', 'first', ',', 'to', 'consider', 'that', 'the', 'god', 'worshipped', 'was', 'Ohirumenomuchi', '(', 'a', 'female', 'god', ')', ',', 'and', 'secondly', ',', 'to', 'think', 'that', 'the', 'god', 'honored', 'was', 'Amateru', ',', 'the', 'male', 'god', 'in', 'the', 'form', 'of', 'a', 'snake', '.']\n",
            "PRED 1077: 解釈 と し て は 、 神 を <unk> 神 と し て 信仰 し て い た と する 説 と 、 <unk> 神 は 蛇 の 姿 を し た <unk> で あ る と する 説 が あ る 。\n",
            "PRED SCORE: -32.8615\n",
            "\n",
            "[2021-08-14 10:38:26,163 INFO] \n",
            "SENT 1078: ['698', ':', 'Kodai', 'Jingu', 'was', 'elected', '.']\n",
            "PRED 1078: <unk> 2 年 （ 698 年 ） ： <unk> <unk> が <unk> 。\n",
            "PRED SCORE: -8.2219\n",
            "\n",
            "[2021-08-14 10:38:26,163 INFO] \n",
            "SENT 1079: ['\"', 'Amateras', ',', '\"', 'or', 'the', 'ancestor', 'god', 'of', 'the', 'Imperial', 'Family']\n",
            "PRED 1079: <unk> （ <unk> ）\n",
            "PRED SCORE: -4.2557\n",
            "\n",
            "[2021-08-14 10:38:26,163 INFO] \n",
            "SENT 1080: ['A', 'female', 'god', '.']\n",
            "PRED 1080: 女性 神 。\n",
            "PRED SCORE: -2.0330\n",
            "\n",
            "[2021-08-14 10:38:26,930 INFO] \n",
            "SENT 1081: ['Using', 'Empress', 'Jito', 'as', 'a', 'model', ',', 'Amaterasu', 'Omikami', 'was', 'changed', 'from', 'the', 'god', 'of', 'nature', 'into', 'a', 'humanized', 'god', '.']\n",
            "PRED 1081: <unk> 皇太后 は モデル と な り 、 自然 の 神 から <unk> 神 へ と 変化 し た 。\n",
            "PRED SCORE: -13.2761\n",
            "\n",
            "[2021-08-14 10:38:26,930 INFO] \n",
            "SENT 1082: ['Since', 'then', ',', 'the', '\"', 'Amaterasu', '\"', 'portion', 'of', 'Amaterasu', 'Omikami', ',', 'if', 'not', 'meant', 'to', 'be', 'the', 'Kososhin', '(', 'the', 'ancestor', 'of', 'the', 'Imperial', 'Family', ')', ',', 'has', 'been', 'pronounced', '\"', 'Amateru', '.', '\"']\n",
            "PRED 1082: 以後 、 <unk> <unk> の 一部 を 「 <unk> 」 と 発音 し て い る 。\n",
            "PRED SCORE: -13.8219\n",
            "\n",
            "[2021-08-14 10:38:26,931 INFO] \n",
            "SENT 1083: ['For', 'example', ',', 'in', '\"', 'Sarashina', 'Nikki', '(', 'Sarashina', 'Diary', ')', ',', '\"', 'written', 'around', '1060', ',', 'the', 'Amaterasu', 'Omikami', 'was', 'cited', 'as', '\"', '天照御神', '\"', 'and', 'the', 'portion', 'of', '\"', '天照', '\"', 'was', 'pronounced', '\"', 'amateru', ',', '\"', 'while', 'in', '\"', 'Sendai', 'kujihongi', ',', '\"', '\"', '天照孁', '\"', 'is', 'provided', 'with', 'the', 'furigana', 'readings', '\"', 'アマテルヒルメノムチ', '\"', '(', '\"', 'amateru', 'hirumenomuchi', '\"', ')', '.']\n",
            "PRED 1083: 例えば 、 <unk> 年 頃 に 書 か れ た 『 <unk> <unk> 』 に お い て は 「 <unk> 」 、 『 <unk> 』 で は 「 <unk> 」 、 『 <unk> 』 で は 「 <unk> 」 と 発音 さ れ て い る 。\n",
            "PRED SCORE: -30.4914\n",
            "\n",
            "[2021-08-14 10:38:26,932 INFO] \n",
            "SENT 1084: ['From', '1880', 'to', '1881', ',', 'a', 'fierce', 'debate', 'took', 'place', 'over', 'the', 'Shinto', 'doctrine', 'concerning', 'which', 'gods', 'should', 'be', 'enshrined', 'in', 'the', 'temple', 'of', 'Shinto', 'Jimukyoku', '(', 'office', ')', 'in', 'Hibiya', ',', 'Tokyo', '.']\n",
            "PRED 1084: <unk> 年 から <unk> 年 に かけ て 、 東京 <unk> の 神道 寺院 に 祀 ら れ る べ き 神仏 <unk> を 巡 っ て 激し い 議論 が 行 わ れ た 。\n",
            "PRED SCORE: -22.7557\n",
            "\n",
            "[2021-08-14 10:38:26,932 INFO] \n",
            "SENT 1085: ['Shito', 'Jimukyoku', ',', 'which', 'had', 'decided', 'to', 'enshrine', 'in', 'its', 'temple', 'four', 'gods', 'and', 'Zokasanshin', '(', 'the', 'three', 'gods', 'of', 'creation', ')', '-Ameno', 'minakanushi', 'no', 'kami', ',', 'Takamimusubi', 'no', 'kami', 'and', 'Kamimusubi', 'no', 'kami-and', 'Amaterasu', 'Omikami', 'met', 'with', 'opposition', 'from', 'the', 'Izumo', 'group', ',', 'which', 'stressed', 'the', 'idea', 'of', 'Yuken', 'ichinyo', '(', 'the', 'unity', 'of', 'this', 'world', 'and', 'the', 'world', 'after', 'death', ')', 'and', 'insisted', 'on', 'worshipping', 'five', 'gods', ',', 'including', 'Okuni', 'nushi', 'no', 'okami', ',', 'the', 'ruling', 'god', 'of', 'Yukai', '(', 'the', 'world', 'after', 'death', ')', '.']\n",
            "PRED 1085: <unk> <unk> は 、 神仏 に 祀 ら れ る こと を 決意 し て い た <unk> <unk> ・ <unk> <unk> ・ <unk> <unk> 神 ・ <unk> <unk> ら の 反対 派 の 反対 を 受け て 、 <unk> <unk> の 思想 を <unk> し た <unk> <unk> ら 五 神 を 祀 っ た 。\n",
            "PRED SCORE: -54.8515\n",
            "\n",
            "[2021-08-14 10:38:26,933 INFO] \n",
            "SENT 1086: ['However', ',', 'the', 'Ise', 'group', ',', 'which', 'had', 'played', 'the', 'central', 'role', 'in', 'Shito', 'Jimukyoku', ',', 'argued', 'that', 'Amaterasu', 'Omikami', 'was', 'the', 'Great', 'God', 'of', 'Heaven', 'and', 'Earth', ',', 'which', 'ruled', 'Kenrei', '(', 'this', 'world', 'and', 'the', 'world', 'after', 'death', ')', 'and', 'that', 'other', 'gods', 'were', 'simply', 'her', 'subordinates', ',', 'thus', 'creating', 'a', 'full-scale', 'confrontation', 'between', 'the', 'two', '.']\n",
            "PRED 1086: しかし 、 <unk> <unk> に お い て 中心 的 な 役割 を 果た し て い た <unk> 集団 は 、 <unk> <unk> は あくまで も <unk> の 神 で あ る と 論 じ て お り 、 <unk> ら は あくまで <unk> で あ る と し て い る ため 、 両者 の 対立 は <unk> し て い た 。\n",
            "PRED SCORE: -56.8889\n",
            "\n",
            "[2021-08-14 10:38:26,933 INFO] \n",
            "SENT 1087: ['This', 'confrontation', 'escalated', 'to', 'the', 'point', 'where', 'various', 'rumors', 'circulated', 'that', 'the', 'Izumo', 'group', 'might', 'be', 'trying', 'to', 'settle', 'a', 'deep-seated', 'grudge', 'against', 'the', 'Ise', 'group', ',', 'which', 'had', 'accumulated', 'since', 'the', 'era', 'of', 'gods', ',', 'and', 'that', 'Takatomi', 'SENGE', ',', 'who', 'had', 'been', 'disloyal', 'to', 'the', 'Imperial', 'Family', ',', 'had', 'to', 'be', 'killed', 'as', 'punishment', '.']\n",
            "PRED 1087: これ に よ り 、 各地 の <unk> 集団 は 、 神々 時代 以来 <unk> し て い た <unk> 集団 に 対 する <unk> <unk> を <unk> する こと が 可能 と な り 、 皇室 に <unk> さ れ た <unk> <unk> が <unk> と し て 殺害 さ れ る こと と な っ た 。\n",
            "PRED SCORE: -46.2232\n",
            "\n",
            "[2021-08-14 10:38:26,933 INFO] \n",
            "SENT 1088: ['This', 'debate', 'was', 'eventually', 'brought', 'to', 'an', 'end', 'by', 'the', 'decision', 'of', 'Emperor', 'Meiji', ',', 'resulting', 'in', 'the', 'defeat', 'of', 'the', 'Izumo', 'group', ',', 'and', 'Amaterasu', 'Omikami', 'was', 'ranked', 'at', 'the', 'highest', 'level', 'of', 'all', 'the', 'gods', '.']\n",
            "PRED 1088: これ は 明治 天皇 の <unk> に よ っ て 決着 し 、 <unk> 派 の 敗戦 に よ っ て <unk> さ れ 、 全て の 神 の 最高 位 に あ っ た 。\n",
            "PRED SCORE: -25.3217\n",
            "\n",
            "[2021-08-14 10:38:26,933 INFO] \n",
            "SENT 1089: ['The', 'government', 'is', 'said', 'to', 'have', 'learned', 'from', 'this', 'debate', 'that', 'it', 'was', 'impossible', 'to', 'establish', 'a', 'common', 'Shinto', 'doctrine', 'and', 'to', 'rule', 'the', 'people', 'of', 'the', 'modern', 'state', 'directly', 'through', 'its', 'restoration', '.']\n",
            "PRED 1089: これ に よ り 政府 は 神道 の 教義 を 確立 する こと が 不 可能 と な り 、 近代 国家 の 支配 を <unk> し た と さ れ る 。\n",
            "PRED SCORE: -24.6930\n",
            "\n",
            "[2021-08-14 10:38:26,934 INFO] \n",
            "SENT 1090: ['For', 'more', 'information', ',', 'see', '\"', 'Debate', 'Regarding', 'the', 'Gods', 'to', 'Be', 'Enshrined', ',', '\"', 'by', 'Shinto', 'Jimukyoku', ',', 'Kokka', 'Shinto', '(', 'State', 'Shinto', ')', '.']\n",
            "PRED 1090: 詳細 は <unk> 神道 、 <unk> 神道 、 <unk> 神道 を 参照 。\n",
            "PRED SCORE: -10.8414\n",
            "\n",
            "[2021-08-14 10:38:26,934 INFO] \n",
            "SENT 1091: ['In', 'depicting', 'Amaterasu', 'Omikami', 'in', 'his', 'novel', ',', 'Ryunosuke', 'AKUTAGAWA', 'used', 'the', 'alias', '\"', 'Ohirumemuchi', '.', '\"']\n",
            "PRED 1091: 小説 で の <unk> <unk> を 描 い た <unk> <unk> は <unk> を 用い た 。\n",
            "PRED SCORE: -13.0721\n",
            "\n",
            "[2021-08-14 10:38:26,934 INFO] \n",
            "SENT 1092: ['This', 'is', 'because', 'he', 'wanted', 'to', 'depict', 'Amaterasu', 'Omikami', 'as', 'the', 'god', 'of', 'the', 'sun', 'or', 'nature', ',', 'not', 'the', 'Kososhin', '(', 'imperial', 'ancestor', ')', 'associated', 'with', 'the', 'name', '\"', 'Amaterasu', 'Omikami', '.', '\"']\n",
            "PRED 1092: これ は 「 <unk> <unk> 」 と い う 名称 で は な く 、 太陽 や 自然 の 神 と し て の 性格 を 示 す ため で あ る 。\n",
            "PRED SCORE: -23.5654\n",
            "\n",
            "[2021-08-14 10:38:26,934 INFO] \n",
            "SENT 1093: ['In', 'fact', ',', 'AKUTAGAWA', 'had', 'to', 'make', 'many', 'revisions', ',', 'additions', 'and', 'deletions', 'to', 'his', 'novels', 'due', 'to', 'the', 'inspection', 'conducted', 'by', 'the', 'army', '.']\n",
            "PRED 1093: 実際 、 <unk> は <unk> に よ る <unk> に よ っ て <unk> ・ <unk> ・ <unk> ・ <unk> の <unk> が 多 かっ た 。\n",
            "PRED SCORE: -20.1766\n",
            "\n",
            "[2021-08-14 10:38:26,934 INFO] \n",
            "SENT 1094: ['Masahiro', 'YASUOKA', '(', '1898-1983', ')', ',', 'the', 'founder', 'of', 'Kinkei', 'Gakuin', '(', '1926', ')', ',', 'said', 'that', 'the', 'Japanese', 'people', 'worshipped', 'Amaterasu', 'Omikami', '.']\n",
            "PRED 1094: <unk> 学院 の 初代 <unk> <unk> （ <unk> ） は 日本 人 が <unk> を 祀 っ た と い う 。\n",
            "PRED SCORE: -16.1032\n",
            "\n",
            "[2021-08-14 10:38:26,935 INFO] \n",
            "SENT 1095: ['Amaterasu', 'omikami', 'represents', 'the', 'ideal', 'of', 'the', 'Japanese', 'spirit', 'to', 'cover', 'the', 'world', 'with', 'the', 'rays', 'of', 'the', 'sun', '.']\n",
            "PRED 1095: <unk> （ <unk> ） と は 、 日本 の 精神 の 理想 を 表 し 、 太陽 の <unk> に 合わせ て 世界 を 覆 う こと を 意味 する 。\n",
            "PRED SCORE: -20.8166\n",
            "\n",
            "[2021-08-14 10:38:26,935 INFO] \n",
            "SENT 1096: ['The', '\"', 'Izana', '\"', 'of', '\"', 'Izanami', '\"', 'and', '\"', 'Izanagi', ',', '\"', 'which', 'means', '\"', 'to', 'lead', ',', '\"', 'also', 'represents', 'an', 'ideal', 'of', 'the', 'Japanese', 'people', 'who', 'set', 'an', 'example', 'for', 'other', 'peoples', 'in', 'the', 'world', 'as', 'leaders', ',', 'forerunners', 'and', 'originators', '.']\n",
            "PRED 1096: 「 <unk> 」 と は 「 <unk> 」 を 意味 する 日本 人 の 理想 的 な <unk> で あ り 、 <unk> ・ <unk> と し て 世界 の 他 の 民族 を 指導 する こと を 意味 する 。\n",
            "PRED SCORE: -31.0882\n",
            "\n",
            "[2021-08-14 10:38:26,935 INFO] \n",
            "SENT 1097: ['Shrines', 'that', 'honor', 'Amaterasu', 'omikami']\n",
            "PRED 1097: <unk> を 祀 る 神社\n",
            "PRED SCORE: -4.3955\n",
            "\n",
            "[2021-08-14 10:38:26,935 INFO] \n",
            "SENT 1098: ['Shrines', 'that', 'worship', 'Amaterasu', 'Omikami', 'are', 'called', 'Shinmei', 'shrines', 'and', 'are', 'scattered', 'across', 'the', 'country', ',', 'but', 'their', 'chief', 'shrine', 'is', 'the', 'Naiku', '(', 'inner', 'shrine', ')', 'of', 'Ise', 'Jingu', 'Shrine', '.']\n",
            "PRED 1098: <unk> を 祀 る 神社 は <unk> 神社 と 呼 ば れ 、 全国 に 点在 し て い る が 、 <unk> 神社 の <unk> で あ る 。\n",
            "PRED SCORE: -16.3073\n",
            "\n",
            "[2021-08-14 10:38:26,936 INFO] \n",
            "SENT 1099: ['Kotai', 'jingu', 'is', 'a', 'shrine', 'that', 'houses', 'Yataka', 'no', 'kagami', '(', 'Mirror', 'of', 'Yataka', ')', ',', 'one', 'of', 'the', 'Sanshu', 'no', 'jingi', '(', 'three', 'kinds', 'of', 'treasures', ')', ',', 'as', 'the', 'object', 'of', 'worship', '.']\n",
            "PRED 1099: <unk> <unk> （ <unk> <unk> ） と は 、 <unk> <unk> の 一 つ で あ る <unk> <unk> を 祀 る 神社 。\n",
            "PRED SCORE: -16.5271\n",
            "\n",
            "[2021-08-14 10:38:26,936 INFO] \n",
            "SENT 1100: ['Nearly', 'all', 'the', 'shrines', 'in', 'Japan', 'distribute', 'the', 'Shinsatsu', '(', 'talisman', ')', '(', 'Jingu', 'taima', '(', 'shrine', 'amulet', ')', ')', 'of', 'Kotai', 'Jingu', 'Shrine', '(', 'Tensyo', 'kotai', 'jingu', 'Shrine', ')', '.']\n",
            "PRED 1100: 日本 の 神社 は 全て <unk> 神社 の <unk> （ <unk> <unk> ） を <unk> 神社 の <unk> （ <unk> <unk> ） に <unk> し た 。\n",
            "PRED SCORE: -21.7140\n",
            "\n",
            "[2021-08-14 10:38:26,936 INFO] \n",
            "SENT 1101: ['Daimyo', 'is', 'an', 'expression', 'that', 'came', 'from', 'Daimyoshu', '.']\n",
            "PRED 1101: 大名 （ <unk> ） と は 、 <unk> に 由来 する 表現 。\n",
            "PRED SCORE: -8.0291\n",
            "\n",
            "[2021-08-14 10:38:26,936 INFO] \n",
            "SENT 1102: ['It', 'signifies', 'a', 'person', 'whose', 'name', 'is', 'very', 'famous', '.']\n",
            "PRED 1102: 有名 な 人物 を 指 す 。\n",
            "PRED SCORE: -5.8198\n",
            "\n",
            "[2021-08-14 10:38:26,937 INFO] \n",
            "SENT 1103: ['As', 'opposed', 'to', 'a', 'Shomyo', '.']\n",
            "PRED 1103: <unk> に 対 し て は <unk> と は 反対 し た 。\n",
            "PRED SCORE: -11.1570\n",
            "\n",
            "[2021-08-14 10:38:26,937 INFO] \n",
            "SENT 1104: ['It', 'originally', 'meant', 'a', 'person', 'who', 'wields', 'influence', 'in', 'a', 'region', '.']\n",
            "PRED 1104: 元来 は 、 地域 に おけ る 影響 力 を 持 つ 者 を 指 す 。\n",
            "PRED SCORE: -11.0718\n",
            "\n",
            "[2021-08-14 10:38:26,937 INFO] \n",
            "SENT 1105: ['Later', ',', 'in', 'samurai', 'society', ',', 'it', 'came', 'to', 'mean', 'a', 'warrior', 'who', 'has', 'a', 'lot', 'of', 'territory', 'or', 'subordinates', '.']\n",
            "PRED 1105: 後 に 武士 社会 に お い て は 、 多く の <unk> や <unk> を 持 つ 武士 を 指 す よう に な っ た 。\n",
            "PRED SCORE: -12.5527\n",
            "\n",
            "[2021-08-14 10:38:26,937 INFO] \n",
            "SENT 1106: ['In', 'the', 'Muromachi', 'period', 'the', 'Shugo', 'strengthened', 'their', 'control', 'over', 'their', 'assigned', 'territories', 'and', 'became', 'Shugo', 'Daimyo', '.']\n",
            "PRED 1106: 室町 時代 に な る と 、 守護 は 守護 の 領国 支配 を 強化 し 、 守護 大名 と な っ た 。\n",
            "PRED SCORE: -11.3787\n",
            "\n",
            "[2021-08-14 10:38:26,938 INFO] \n",
            "SENT 1107: ['In', 'the', 'Warring', 'States', 'period', ',', 'Taishin', 'Ryoshu', '(', 'noble', 'land', 'owners', ')', 'appeared', 'who', 'established', 'even', 'stronger', 'control', 'over', 'their', 'territories', ',', 'and', 'were', 'called', 'Daimyobun', 'no', 'Kokujin', 'or', 'Sengoku', 'Daimyo', '.']\n",
            "PRED 1107: 戦国 時代 ( 日本 ) に な る と 、 <unk> <unk> は 、 自ら の 支配 力 を 持 っ て い た に も 関わ ら ず 、 <unk> や 戦国 大名 と 呼 ば れ た 。\n",
            "PRED SCORE: -26.4492\n",
            "\n",
            "[2021-08-14 10:38:26,938 INFO] \n",
            "SENT 1108: ['In', 'the', 'Edo', 'period', 'the', 'word', 'specified', 'a', 'lord', 'who', 'was', 'granted', 'a', 'territory', 'of', '10,000', 'koku', 'or', 'more', 'from', 'the', 'Edo', 'Shogunate', '.']\n",
            "PRED 1108: 江戸 時代 に は 、 1 万 石 以上 の <unk> を 与え られ た 領主 を 指 す 。\n",
            "PRED SCORE: -12.9323\n",
            "\n",
            "[2021-08-14 10:38:26,938 INFO] \n",
            "SENT 1109: ['Among', 'warriors', 'with', 'less', 'than', '10,000', 'koku', ',', 'those', 'who', 'belonged', 'to', 'the', 'Shogunate', 'were', 'called', 'Jikisan', '.']\n",
            "PRED 1109: 1 万 石 以下 の 武士 の うち 、 <unk> に 属 する 者 を <unk> と い う 。\n",
            "PRED SCORE: -13.8014\n",
            "\n",
            "[2021-08-14 10:38:26,938 INFO] \n",
            "SENT 1110: ['In', 'fact', ',', 'because', 'the', 'feudal', 'lords', 'that', 'were', 'the', 'Daimyo', 'shared', 'characteristics', 'with', 'Chinese', 'lords', '(', 'shoko', ')', ',', 'they', 'were', 'also', 'called', 'Daimyo', 'Shoko', '.']\n",
            "PRED 1110: 実際 、 中国 の 大名 と の 性格 を 持 つ 大名 を 大名 大名 と 呼 ぶ こと も あ っ た 。\n",
            "PRED SCORE: -16.0440\n",
            "\n",
            "[2021-08-14 10:38:28,020 INFO] \n",
            "SENT 1111: ['This', 'section', 'describes', 'the', 'details', 'of', 'the', 'Edo', 'period', ',', 'recent', 'Daimyo', '.']\n",
            "PRED 1111: 本項 で は 江戸 時代 の 大名 に つ い て 詳述 する 。\n",
            "PRED SCORE: -8.9150\n",
            "\n",
            "[2021-08-14 10:38:28,021 INFO] \n",
            "SENT 1112: ['For', 'Shugo', 'Daimyo', 'or', 'Sengoku', 'Daimyo', ',', 'refer', 'to', 'the', 'relevant', 'articles', '.']\n",
            "PRED 1112: 守護 大名 や 戦国 大名 に つ い て は 、 関連 項目 を 参照 。\n",
            "PRED SCORE: -7.4168\n",
            "\n",
            "[2021-08-14 10:38:28,021 INFO] \n",
            "SENT 1113: ['Edo', 'Period', 'Daimyo']\n",
            "PRED 1113: 江戸 時代\n",
            "PRED SCORE: -0.7934\n",
            "\n",
            "[2021-08-14 10:38:28,021 INFO] \n",
            "SENT 1114: ['The', 'rank', 'of', 'Edo', 'period', 'Daimyo', 'was', 'determined', 'by', 'family', 'status', ',', 'official', 'rank', ',', 'size', 'of', 'stipend', ',', 'office', ',', 'and', 'service', '.']\n",
            "PRED 1114: 江戸 時代 の 大名 は 、 <unk> ・ <unk> ・ <unk> ・ <unk> に よ っ て <unk> さ れ た 。\n",
            "PRED SCORE: -11.7411\n",
            "\n",
            "[2021-08-14 10:38:28,021 INFO] \n",
            "SENT 1115: ['First', ',', 'depending', 'on', 'his', 'connection', 'to', 'the', 'Tokugawa', 'Shogun', 'family', ',', 'related', 'families', '(', 'Shinpan', ',', 'Shinpan', 'Daimyo', ')', 'were', 'classified', 'mainly', 'as', 'Fudai', 'Daimyo', '(', 'hereditary', 'Daimyo', ')', 'that', 'were', 'vassals', 'of', 'the', 'Tokugawa', 'family', 'before', 'the', 'Battle', 'of', 'Sekigahara', ',', 'and', 'Tozama', 'Daimyo', '(', 'non-hereditary', 'Daimyo', ')', 'that', 'became', 'vassals', 'around', 'the', 'time', 'of', 'the', 'Battle', 'of', 'Sekigahara', '.']\n",
            "PRED 1115: まず 、 徳川 将軍 家 と の 関係 に よ っ て 、 関ヶ原 の 戦い 以前 の 徳川 家 家臣 で あ る <unk> 大名 や 関ヶ原 の 戦い 前後 に 家臣 と な っ た <unk> 大名 に 分類 さ れ た 。\n",
            "PRED SCORE: -23.7896\n",
            "\n",
            "[2021-08-14 10:38:28,022 INFO] \n",
            "SENT 1116: ['The', 'first', 'Shogun', ',', 'Ieyasu', ',', 'in', 'order', 'to', 'maintain', 'the', 'bloodline', 'in', 'the', 'event', 'that', 'the', 'Shogun', 'household', 'died', 'out', ',', 'for', 'supervision', 'and', 'control', 'of', 'the', 'Daimyo', 'nationwide', ',', 'and', 'for', 'support', 'of', 'the', 'Shogunate', ',', 'established', 'three', 'branch', 'households', 'of', 'the', 'Tokugawa', 'family', 'that', 'were', 'allowed', 'to', 'use', 'the', 'Tokugawa', 'name', ',', 'and', 'sent', 'the', 'ninth', 'son', ',', 'Yoshinao', 'TOKUGAWA', ',', 'to', 'the', 'Owari', 'domain', ',', 'the', '10th', 'son', 'Yorinobu', 'TOKUGAWA', 'to', 'the', 'Kishu', 'domain', ',', 'and', 'the', '11th', 'son', 'Yorifusa', 'TOKUGAWA', 'to', 'the', 'Mito', 'domain', '.']\n",
            "PRED 1116: 第 1 代 将軍 徳川 家康 は 、 全国 大名 の <unk> ・ 統制 の ため に 将軍 家 が <unk> し た こと を <unk> し 、 幕府 の 支援 に よ っ て 徳川 姓 を 許 さ れ た 徳川 家 の 3 <unk> を 尾張 藩 に 、 第 9 皇子 の 徳川 <unk> を 紀州 藩 、 第 11 皇子 徳川 <unk> を 紀州 藩 に 派遣 し た 。\n",
            "PRED SCORE: -55.7386\n",
            "\n",
            "[2021-08-14 10:38:28,022 INFO] \n",
            "SENT 1117: ['Beginning', 'with', 'the', 'elder', 'brother', 'of', 'the', 'second', 'Shogun', ',', 'Hidetada', 'TOKUGAWA', ',', 'and', 'second', 'son', 'of', 'Ieyasu', ',', 'Hideyasu', 'YUKI', ',', 'was', 'sent', 'to', 'the', 'Echizen', 'domain', ',', 'he', 'placed', 'Tokugawa', 'family', 'members', 'as', 'Daimyo', 'all', 'of', 'the', 'country', '.']\n",
            "PRED 1117: 2 代 将軍 徳川 秀忠 と <unk> <unk> の 次男 ・ <unk> <unk> が 越前 藩 に 派遣 さ れ 、 全国 大名 と し て 徳川 家 を <unk> し た 。\n",
            "PRED SCORE: -19.1075\n",
            "\n",
            "[2021-08-14 10:38:28,022 INFO] \n",
            "SENT 1118: ['Moreover', ',', 'over', 'the', 'generations', 'the', 'hereditary', 'vassals', 'that', 'supported', 'the', 'beginning', 'of', 'the', 'Tokugawa', 'Shogun', 'family', 'were', 'placed', 'as', 'Fudai', 'Daimyo', ',', 'who', 'secured', 'the', 'Shogunate', \"'s\", 'military', 'power', 'while', 'serving', 'as', 'important', 'officials', 'from', 'the', 'Shogunate', \"'s\", 'chief', 'minister', 'to', 'members', 'of', 'the', 'council', 'of', 'elders', ',', 'supported', 'the', 'Shogunate', \"'s\", 'government', '.']\n",
            "PRED 1118: また 、 徳川 将軍 家 の <unk> を 支え る <unk> は 代々 大名 と し て 幕府 の 軍事 力 を 担 っ て い た が 、 幕府 の <unk> を 担 っ て い た <unk> <unk> は <unk> を 支え た 。\n",
            "PRED SCORE: -41.2784\n",
            "\n",
            "[2021-08-14 10:38:28,023 INFO] \n",
            "SENT 1119: ['The', 'Fudai', 'Daimyo', 'had', 'relatively', 'small', 'stipends', ',', 'and', 'aside', 'from', 'the', 'prominent', 'Fudai', 'Hitto', 'in', 'the', 'Ii', 'clan', 'who', 'received', 'an', 'unusual', '350,000', 'koku', 'in', 'the', 'Hikone', 'domain', ',', 'the', 'Torii', ',', 'Sakakibara', ',', 'Honda', 'and', 'Ogasawara', 'clans', 'received', 'relatively', 'large', 'stipends', ',', 'but', 'throughout', 'the', 'Edo', 'period', 'only', 'a', 'few', 'Fudai', 'Daimyo', 'maintained', 'more', 'than', '100.000', 'koku', ',', 'starting', 'with', 'the', 'Sakai', ',', 'Abe', ',', 'Hotta', ',', 'Yanagisawa', ',', 'and', 'Toda', 'clans', '.']\n",
            "PRED 1119: <unk> 大名 は 比較 的 小さな <unk> で あ り 、 <unk> 藩 で は <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 、 <unk> 藩 など の <unk> を 受け て い た が 、 江戸 時代 を 通 じ て 、 <unk> 大名 は <unk> ・ <unk> ・ <unk> 氏 ・ <unk> 氏 ・ <unk> 氏 など に よ っ て <unk> さ れ た 。\n",
            "PRED SCORE: -51.1498\n",
            "\n",
            "[2021-08-14 10:38:28,023 INFO] \n",
            "SENT 1120: ['This', 'was', 'for', 'the', 'separation', 'of', 'influence', 'and', 'military', 'power', '.']\n",
            "PRED 1120: これ は 軍事 力 の 分離 と 軍事 力 の <unk> で あ る 。\n",
            "PRED SCORE: -9.6758\n",
            "\n",
            "[2021-08-14 10:38:28,023 INFO] \n",
            "SENT 1121: ['The', 'Tozama', 'Daimyo', 'were', 'the', 'Daimyo', 'that', 'joined', 'after', 'the', 'Battle', 'of', 'Sekigahara', ',', 'and', 'many', 'had', 'opposed', 'the', 'Tokugawa', 'at', 'Sekigahara', '.']\n",
            "PRED 1121: <unk> 大名 と は 、 関ヶ原 の 戦い の 後 に 参加 し た 大名 で あ り 、 多く は 関ヶ原 の 戦い に <unk> し た 。\n",
            "PRED SCORE: -17.5017\n",
            "\n",
            "[2021-08-14 10:38:28,023 INFO] \n",
            "SENT 1122: ['The', 'Shogunate', 'was', 'very', 'careful', 'about', 'that', ',', 'actively', 'carried', 'out', 'intelligence', 'gathering', 'activities', 'using', 'spies', ',', 'and', 'when', 'they', 'feared', 'impropriety', 'or', 'insurrection', ',', 'did', 'not', 'hesitate', 'to', 'revoke', 'rank', '.']\n",
            "PRED 1122: 幕府 は <unk> を 積極 的 に 行 っ て お り 、 <unk> ・ <unk> を <unk> する 際 に は <unk> を <unk> さ な かっ た 。\n",
            "PRED SCORE: -25.2154\n",
            "\n",
            "[2021-08-14 10:38:28,024 INFO] \n",
            "SENT 1123: ['Representative', 'of', 'the', 'Tozama', 'Daimyo', 'were', 'the', 'Kaga', 'Domain', 'of', 'the', 'Maeda', 'clan', ',', 'famous', 'for', 'the', 'million', 'koku', 'of', 'Kaga', ',', 'the', 'Satsuma', 'Domain', 'of', 'the', 'Shimazu', 'clan', ',', 'a', 'family', 'famous', 'from', 'the', 'Kamakura', 'period', ',', 'the', 'Sendai', 'Domain', 'of', 'the', 'Date', 'clan', ',', 'the', 'Fukuoka', 'Domain', 'of', 'the', 'Kuroda', 'clan', ',', 'the', 'Hiroshima', 'Domain', 'of', 'the', 'Asano', 'clan', ',', 'the', 'Choshu', 'Domain', 'of', 'the', 'Mori', 'clan', ',', 'the', 'Yonezawa', 'Domain', 'of', 'the', 'Uesugi', 'clan', ',', 'the', 'Saga', 'Domain', 'of', 'the', 'Nabeshima', 'clan', ',', 'the', 'Kumamoto', 'Domain', 'of', 'the', 'Hosokawa', 'clan', ',', 'the', 'Okayama', 'and', 'Tottori', 'Domains', 'of', 'the', 'Ikeda', 'clan', ',', 'the', 'Tokushima', 'Domain', 'of', 'the', 'Hachisuka', 'clan', ',', 'the', 'Tosa', 'Domain', 'of', 'the', 'Tosa', 'Yamauchi', 'clan', ',', 'and', 'the', 'Akita', 'Domain', 'of', 'the', 'Satake', 'clan', '.']\n",
            "PRED 1123: 代表 的 な もの と し て は 、 鎌倉 時代 から 有名 な 加賀 藩 、 島津 氏 の 薩摩 藩 、 伊達 氏 の <unk> 藩 、 伊達 氏 の <unk> 藩 、 <unk> 藩 の 広島 藩 、 <unk> 藩 の 広島 藩 、 <unk> 藩 の <unk> 藩 、 毛利 氏 の <unk> 藩 、 鳥取 藩 の <unk> 藩 、 鳥取 藩 の 池田 氏 、 <unk> 藩 の 土佐 藩 、 <unk> 藩 の 土佐 藩 、 <unk> 藩 の 土佐 藩 、 <unk> 藩 、 鳥取 藩 の 池田 氏 、 土佐 藩\n",
            "PRED SCORE: -67.9219\n",
            "\n",
            "[2021-08-14 10:38:28,024 INFO] \n",
            "SENT 1124: ['The', 'status', 'of', 'a', 'Daimyo', 'was', 'defined', 'as', 'Kokushu', 'if', 'their', 'territory', 'was', 'one', 'province', 'or', 'more', ',', 'or', 'an', 'equivalent', 'number', 'of', 'koku', ',', 'as', 'Joshu', 'Daimyo', '(', 'joshu', 'class', ')', 'if', 'they', 'had', 'a', 'castle', ',', 'those', 'without', 'a', 'castle', 'were', 'distinguished', 'as', 'Jinya', ',', 'and', 'the', 'rooms', 'that', 'they', 'occupied', 'at', 'Edo', 'castle', 'during', 'their', 'service', 'there', 'were', 'differentiated', 'based', 'on', 'the', 'Daimyo', \"'s\", 'status', '.']\n",
            "PRED 1124: 大名 の 地位 は 、 <unk> が 一 国 以上 に 及 ぶ 場合 に は 、 城 を 持 た な い 場合 に は <unk> （ <unk> ） と し て 、 城 を 持 た な い 者 は <unk> と し て 区別 さ れ 、 江戸 城 で の <unk> は 大名 の 身分 に よ っ て 区別 さ れ た 。\n",
            "PRED SCORE: -59.3620\n",
            "\n",
            "[2021-08-14 10:38:28,024 INFO] \n",
            "SENT 1125: ['Refer', 'to', 'Shikoseki', 'for', 'details', '.']\n",
            "PRED 1125: 詳細 は <unk> を 参照 。\n",
            "PRED SCORE: -2.6909\n",
            "\n",
            "[2021-08-14 10:38:28,024 INFO] \n",
            "SENT 1126: ['Aside', 'from', 'Daimyo', 'in', 'charge', 'of', 'provinces', ',', 'those', 'with', '100,000', 'koku', 'were', 'generally', 'not', 'allowed', 'possession', 'of', 'a', 'whole', 'district', ',', 'and', 'usually', 'held', 'territory', 'around', 'the', 'castle', 'and', 'in', 'patches', '.']\n",
            "PRED 1126: 守護 大名 の 出自 と し て は 、 <unk> <unk> の <unk> は 、 一 国 一 つ の <unk> を 持 た な い の が 一般 的 で あ り 、 <unk> や <unk> を 中心 と し て い た 。\n",
            "PRED SCORE: -40.2025\n",
            "\n",
            "[2021-08-14 10:38:28,025 INFO] \n",
            "SENT 1127: ['In', 'extreme', 'cases', ',', 'rule', 'of', 'a', 'single', 'village', 'was', 'divided', 'between', 'two', 'land', 'holders', '(', 'aikyu', ')', '.']\n",
            "PRED 1127: <unk> な 場合 に は 、 一 つ の <unk> を 二 つ の 土地 （ <unk> ） に 分け る こと が でき た 。\n",
            "PRED SCORE: -18.4792\n",
            "\n",
            "[2021-08-14 10:38:28,025 INFO] \n",
            "SENT 1128: ['Daimyo', ',', 'as', 'a', 'rule', ',', 'had', '10,000', 'koku', 'or', 'more', ',', 'but', 'the', 'Kitsuregawa', 'clan', \"'s\", 'Kitsuregawa', 'domain', 'was', '5,000', 'koku', '.']\n",
            "PRED 1128: 大名 は 原則 と し て 1 万 石 以上 で あ っ た が 、 <unk> 藩 <unk> は <unk> 石 で あ っ た 。\n",
            "PRED SCORE: -11.9501\n",
            "\n",
            "[2021-08-14 10:38:28,025 INFO] \n",
            "SENT 1129: ['That', 'was', 'because', 'the', 'Kitsuregawa', 'clan', 'were', 'descendants', 'of', 'the', 'Ashikaga', 'clan', '.']\n",
            "PRED 1129: これ は <unk> 氏 が 足利 氏 の 末裔 で あ る ため で あ る 。\n",
            "PRED SCORE: -7.7777\n",
            "\n",
            "[2021-08-14 10:38:28,025 INFO] \n",
            "SENT 1130: ['Daimyo', 'were', 'subject', 'to', 'control', 'by', 'the', 'Shogunate', 'through', 'the', 'Laws', 'for', 'the', 'Military', 'Houses', 'and', 'the', 'sankin', 'kotai', '(', 'alternate', 'attendance', ')', 'system', '.']\n",
            "PRED 1130: 大名 は 武家 <unk> と <unk> <unk> 制 を 通 じ て 幕府 の 支配 を 受け た 。\n",
            "PRED SCORE: -14.8128\n",
            "\n",
            "[2021-08-14 10:38:28,026 INFO] \n",
            "SENT 1131: ['Other', 'than', 'that', ',', 'there', 'was', 'a', 'system', 'of', 'assignments', 'called', 'otetsudai', ',', 'and', 'at', 'the', 'end', 'of', 'the', 'Edo', 'period', 'some', 'were', 'ordered', 'to', 'defend', 'the', 'coast', ',', 'so', 'the', 'Daimyo', 'were', 'always', 'in', 'a', 'difficult', 'position', 'financially', '.']\n",
            "PRED 1131: その 他 に も <unk> と 呼 ば れ る <unk> の 制度 が あ り 、 幕末 に は 大名 に よ っ て <unk> の <unk> を 命 じ られ る 者 も い た 。\n",
            "PRED SCORE: -24.7415\n",
            "\n",
            "[2021-08-14 10:38:28,026 INFO] \n",
            "SENT 1132: ['Words', 'Associated', 'with', 'Daimyo']\n",
            "PRED 1132: 大名 と の <unk>\n",
            "PRED SCORE: -2.8464\n",
            "\n",
            "[2021-08-14 10:38:28,026 INFO] \n",
            "SENT 1133: ['Daimyo', 'Kazoku', '-', 'Among', 'the', 'nobility', ',', 'those', 'who', 'had', 'formerly', 'been', 'Daimyo', '.']\n",
            "PRED 1133: 大名 <unk> - 公家 の うち 、 旧 大名 で あ っ た 。\n",
            "PRED SCORE: -11.2804\n",
            "\n",
            "[2021-08-14 10:38:28,026 INFO] \n",
            "SENT 1134: ['Daimyo', 'Yashiki', '-', 'A', 'Daimyo', \"'s\", 'mansion', '.']\n",
            "PRED 1134: 大名 <unk> - 大名 <unk> 。\n",
            "PRED SCORE: -3.1030\n",
            "\n",
            "[2021-08-14 10:38:28,027 INFO] \n",
            "SENT 1135: ['Out', 'of', 'several', ',', 'the', 'principle', 'residence', 'in', 'Edo', 'was', 'called', 'kamiyashiki', ',', 'and', 'the', 'others', 'shimoyashiki', '.']\n",
            "PRED 1135: 数 人 の うち 、 江戸 の <unk> を <unk> と い い 、 その 他 を <unk> と 呼 ぶ 。\n",
            "PRED SCORE: -15.8575\n",
            "\n",
            "[2021-08-14 10:38:28,027 INFO] \n",
            "SENT 1136: ['Daimyozen', '-', 'Generous', 'like', 'a', 'Daimyo', '.']\n",
            "PRED 1136: <unk> - 大名 の よう な <unk> 。\n",
            "PRED SCORE: -5.4435\n",
            "\n",
            "[2021-08-14 10:38:28,027 INFO] \n",
            "SENT 1137: ['Daimyo', 'Gyoretsu', '(', 'Daimyo', 'Procession', ')', '-', 'The', 'Daimyo', 'moving', 'in', 'a', 'file', 'when', 'changing', 'beginning', 'a', 'term', 'in', 'Edo', '.']\n",
            "PRED 1137: 大名 <unk> （ 大名 <unk> ） - 江戸 で の 用語 変更 に 際 し て 、 <unk> に <unk> する 大名 。\n",
            "PRED SCORE: -19.4566\n",
            "\n",
            "[2021-08-14 10:38:28,027 INFO] \n",
            "SENT 1138: ['Also', 'used', 'to', 'refer', 'jokingly', 'to', 'a', 'group', 'moving', 'in', 'a', 'cluster', 'around', 'an', 'important', 'person', '.']\n",
            "PRED 1138: また 、 重要 な 人物 を 中心 と し た <unk> 集団 を 指 す こと も あ っ た 。\n",
            "PRED SCORE: -12.4532\n",
            "\n",
            "[2021-08-14 10:38:28,027 INFO] \n",
            "SENT 1139: ['Daimyo', 'Hikeshi', '-', 'Edo', 'firefighter', 'brigades', 'that', 'the', 'Edo', 'Shogunate', 'ordered', 'each', 'Daimyo', 'to', 'create', '.']\n",
            "PRED 1139: 大名 <unk> - 江戸 幕府 が 諸 大名 に 命 じ て <unk> を 作 ら せ た 。\n",
            "PRED SCORE: -12.3978\n",
            "\n",
            "[2021-08-14 10:38:28,028 INFO] \n",
            "SENT 1140: ['Made', 'up', 'of', 'samurai', 'from', 'each', 'domain', '.']\n",
            "PRED 1140: 各 藩 の 武士 の <unk> 。\n",
            "PRED SCORE: -8.9741\n",
            "\n",
            "[2021-08-14 10:38:28,461 INFO] \n",
            "SENT 1141: ['Daimyogashi', '-', 'When', 'a', 'major', 'merchant', 'lent', 'money', 'to', 'a', 'Daimyo', 'at', 'high', 'interest', 'with', 'rice', 'as', 'collateral', '.']\n",
            "PRED 1141: <unk> 年 （ <unk> 2 年 ） - 有力 商人 が <unk> を <unk> と し て 高 い 大名 に <unk> する 。\n",
            "PRED SCORE: -19.2179\n",
            "\n",
            "[2021-08-14 10:38:28,461 INFO] \n",
            "SENT 1142: ['Daimyoazuke', '-', 'When', 'the', 'Shogunate', 'entrusted', 'management', 'of', 'criminals', 'to', 'a', 'Daimyo', '.']\n",
            "PRED 1142: <unk> 年 （ <unk> 2 年 ） 幕府 が 大名 に 対 する <unk> を <unk> する 。\n",
            "PRED SCORE: -13.2556\n",
            "\n",
            "[2021-08-14 10:38:28,462 INFO] \n",
            "SENT 1143: ['Daimyo', 'Bushin', '-', 'Extravagant', 'construction', '.']\n",
            "PRED 1143: 大名 <unk> - <unk> 建築\n",
            "PRED SCORE: -3.6297\n",
            "\n",
            "[2021-08-14 10:38:28,462 INFO] \n",
            "SENT 1144: ['Daimyo', 'Ryoko', '-', 'Extravagant', 'travel', '.']\n",
            "PRED 1144: 大名 <unk> - <unk> 。\n",
            "PRED SCORE: -3.3524\n",
            "\n",
            "[2021-08-14 10:38:28,462 INFO] \n",
            "SENT 1145: ['Daimyo', 'Hikyaku', '-', 'A', 'messenger', 'that', 'a', 'Daimyo', 'employed', 'to', 'communicate', 'between', 'Edo', 'and', 'the', 'province', '.']\n",
            "PRED 1145: 大名 <unk> - 大名 が 江戸 と <unk> を 結 ぶ 使者 。\n",
            "PRED SCORE: -9.1312\n",
            "\n",
            "[2021-08-14 10:38:28,462 INFO] \n",
            "SENT 1146: ['Daimyo', 'Oroshi', '-', 'Cutting', 'a', 'fish', 'into', 'three', 'slices', 'so', 'that', 'a', 'lot', 'of', 'meat', 'stays', 'around', 'the', 'spine', '.']\n",
            "PRED 1146: 大名 <unk> - 魚 を 3 <unk> に <unk> し 、 <unk> の 中 に は <unk> が 多 い 。\n",
            "PRED SCORE: -16.8563\n",
            "\n",
            "[2021-08-14 10:38:28,463 INFO] \n",
            "SENT 1147: ['Comes', 'from', 'the', 'fact', 'that', 'the', 'practice', 'is', 'extravagant', '.']\n",
            "PRED 1147: <unk> は <unk> で あ る 。\n",
            "PRED SCORE: -7.7619\n",
            "\n",
            "[2021-08-14 10:38:28,463 INFO] \n",
            "SENT 1148: ['Daimyogiri', '-', 'Cutting', 'meat', 'or', 'fish', 'into', 'rough', 'chunks', '.']\n",
            "PRED 1148: <unk> - <unk> や 魚 を <unk> に <unk> る 。\n",
            "PRED SCORE: -9.6625\n",
            "\n",
            "[2021-08-14 10:38:28,463 INFO] \n",
            "SENT 1149: ['Daimyogai', '-', 'Purchasing', 'something', 'just', 'as', 'the', 'seller', 'asks', 'for', '.']\n",
            "PRED 1149: <unk> 年 （ <unk> 2 年 ） - <unk> <unk> と し て の <unk> を <unk> 。\n",
            "PRED SCORE: -15.6931\n",
            "\n",
            "[2021-08-14 10:38:28,463 INFO] \n",
            "SENT 1150: ['Daimyo', 'Wan', '-', 'A', 'big', 'bowl', '.']\n",
            "PRED 1150: 大名 <unk> - 大きな <unk> 。\n",
            "PRED SCORE: -3.6136\n",
            "\n",
            "[2021-08-14 10:38:28,464 INFO] \n",
            "SENT 1151: ['Daimyo', 'Kendon', '-', 'Refers', 'to', 'a', 'Kendon', 'that', 'was', 'served', 'in', 'a', 'container', 'that', 'has', 'a', 'lacquer', 'painting', 'of', 'a', 'Daimyo', \"'s\", 'family', 'crest', 'or', 'boat', '.']\n",
            "PRED 1151: 大名 <unk> - <unk> の <unk> や 船 の <unk> を 持 つ <unk> に <unk> する 。\n",
            "PRED SCORE: -15.8556\n",
            "\n",
            "[2021-08-14 10:38:28,464 INFO] \n",
            "SENT 1152: ['Daimyojima', '-', 'A', 'design', 'of', 'thin', ',', 'vertical', 'pinstripes', '.']\n",
            "PRED 1152: <unk> - 薄 い <unk> の <unk> 。\n",
            "PRED SCORE: -7.0487\n",
            "\n",
            "[2021-08-14 10:38:28,464 INFO] \n",
            "SENT 1153: ['The', 'Muromachi', 'period', 'dictionary', '\"', 'Setsuyoshu', '\"', 'listed', 'the', 'two', 'pronunciations', \"'\", 'taimei', \"'\", 'and', \"'\", 'daimyo', ',', \"'\", 'the', 'former', 'meaning', 'a', 'Shugo', '(', 'a', 'major', 'feudal', 'lord', ')', ',', 'and', 'the', 'latter', 'meaning', 'a', 'wealthy', 'person', '(', 'the', 'wealthy', 'class', ')', '.']\n",
            "PRED 1153: 室町 時代 に な る と 、 「 <unk> 」 と 「 大名 」 の 2 つ の <unk> が 、 前者 は 守護 大名 、 後者 は <unk> （ 富豪 層 ） を 意味 する 。\n",
            "PRED SCORE: -24.0285\n",
            "\n",
            "[2021-08-14 10:38:28,464 INFO] \n",
            "SENT 1154: ['In', 'the', 'Warring', 'States', 'period', ',', 'the', 'distinction', 'by', 'pronunciation', 'weakened', ',', 'and', 'it', 'is', 'thought', 'that', \"'\", 'taimei', \"'\", 'was', 'common', '.']\n",
            "PRED 1154: 戦国 時代 ( 日本 ) に お い て は 、 発音 に よ る 区別 が あ り 、 「 <unk> 」 が 一般 的 で あ っ た と 考え られ て い る 。\n",
            "PRED SCORE: -19.3518\n",
            "\n",
            "[2021-08-14 10:38:28,465 INFO] \n",
            "SENT 1155: ['The', 'Nippo', 'Jisho', '(', 'Japanese-Portuguese', 'dictionary', ')', 'from', 'the', 'beginning', 'of', 'the', '17th', 'century', 'also', 'listed', 'the', 'two', 'pronunciations', ',', \"'\", 'daimyo', \"'\", 'and', \"'\", 'taimei', ',', \"'\", 'but', 'there', 'was', 'no', 'clear', 'distinction', 'in', 'meaning', ',', 'and', 'both', 'were', 'used', 'for', 'major', 'feudal', 'lords', '.']\n",
            "PRED 1155: 13 世紀 初頭 の <unk> <unk> に は 、 「 大名 」 と 「 大名 」 の 2 つ の <unk> が 記 さ れ て い る が 、 いずれ も 主 と し て の 明確 な 区別 は な かっ た 。\n",
            "PRED SCORE: -27.1169\n",
            "\n",
            "[2021-08-14 10:38:28,465 INFO] \n",
            "SENT 1156: ['The', 'pronunciation', 'settled', 'on', \"'\", 'Daimyo', \"'\", 'after', 'the', 'beginning', 'of', 'the', 'Edo', 'period', ',', 'and', 'by', 'the', 'Kansei', 'era', 'they', 'were', 'solely', 'called', \"'\", 'Daimyo', '.', \"'\"]\n",
            "PRED 1156: 江戸 時代 初期 以降 は 「 大名 」 に <unk> する 発音 は 「 大名 」 と 呼 ば れ る よう に な っ た 。\n",
            "PRED SCORE: -15.7517\n",
            "\n",
            "[2021-08-14 10:38:28,465 INFO] \n",
            "SENT 1157: ['Shugo', 'Daimyo', ',', 'Sengoku', 'Daimyo']\n",
            "PRED 1157: 守護 大名 ・ 戦国 大名\n",
            "PRED SCORE: -2.0949\n",
            "\n",
            "[2021-08-14 10:38:28,465 INFO] \n",
            "SENT 1158: ['Shinpan', ',', 'Fudai', 'Daimyo', ',', 'Tozama', 'Daimyo']\n",
            "PRED 1158: <unk> 、 <unk> 大名 、 <unk> 大名\n",
            "PRED SCORE: -4.4676\n",
            "\n",
            "[2021-08-14 10:38:28,466 INFO] \n",
            "SENT 1159: ['Domains']\n",
            "PRED 1159: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:28,466 INFO] \n",
            "SENT 1160: ['Lords']\n",
            "PRED 1160: <unk>\n",
            "PRED SCORE: -1.4220\n",
            "\n",
            "[2021-08-14 10:38:28,466 INFO] PRED AVG SCORE: -0.6990, PRED PPL: 2.0117\n"
          ]
        }
      ],
      "source": [
        "!onmt_translate -model data/kftt-data-1.0/run/model_step_15000.pt -src data/kftt-data-1.0/data/tok/kyoto-test.en -output data/kftt-data-1.0/out.txt -gpu 0 -verbose"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "uElwfETnAX8n",
        "outputId": "1bb8c8b5-aedf-4115-be31-1189852337af"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "[2021-09-21 12:44:50,574 INFO] Translating shard 0.\n",
            "/usr/local/lib/python3.7/dist-packages/torch/_tensor.py:575: UserWarning: floor_divide is deprecated, and will be removed in a future version of pytorch. It currently rounds toward 0 (like the 'trunc' function NOT 'floor'). This results in incorrect rounding for negative values.\n",
            "To keep the current behavior, use torch.div(a, b, rounding_mode='trunc'), or for actual floor division, use torch.div(a, b, rounding_mode='floor'). (Triggered internally at  /pytorch/aten/src/ATen/native/BinaryOps.cpp:467.)\n",
            "  return torch.floor_divide(self, other)\n",
            "[2021-09-21 12:44:50,915 INFO] \n",
            "SENT 1: ['Tom', 'wants', 'a', 'cat', '.']\n",
            "PRED 1: <unk> は <unk> を 求め た 。\n",
            "PRED SCORE: -5.6415\n",
            "\n",
            "[2021-09-21 12:44:50,915 INFO]                   Tom      wants          a        cat          . \n",
            "     <unk>  0.0810000  0.1024836  0.2358939 *0.3071590  0.2734635 \n",
            "         は  0.0732654  0.2247686  0.1639529  0.1544977 *0.3835154 \n",
            "     <unk>  0.0123236  0.0434102  0.2558489 *0.5182258  0.1701913 \n",
            "         を  0.0581807  0.1314416  0.1406689  0.1174425 *0.5522663 \n",
            "        求め  0.0094350  0.0870037  0.1193641  0.1103888 *0.6738083 \n",
            "         た  0.0225705  0.0063565  0.0122755  0.0420761 *0.9167213 \n",
            "         。  0.0304229  0.0092131  0.0123016  0.0236017 *0.9244607 \n",
            "      </s>  0.0484912  0.0379364  0.0628432  0.0896175 *0.7611117 \n",
            "\n",
            "[2021-09-21 12:44:50,916 INFO] PRED AVG SCORE: -0.8059, PRED PPL: 2.2388\n"
          ]
        }
      ],
      "source": [
        "!onmt_translate -model data/kftt-data-1.0/run/model_step_15000.pt -src data/en_sample.txt -gpu 0 -verbose -attn_debug -output data/kftt-data-1.0/out_attn.txt"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {
        "colab": {
          "base_uri": "https://localhost:8080/"
        },
        "id": "1aN3vuHpKBFJ",
        "outputId": "731b6348-27f6-410b-d290-646812f0b6d6"
      },
      "outputs": [
        {
          "name": "stdout",
          "output_type": "stream",
          "text": [
            "[2021-09-21 07:40:05,957 INFO] Translating shard 0.\n",
            "/usr/local/lib/python3.7/dist-packages/torch/_tensor.py:575: UserWarning: floor_divide is deprecated, and will be removed in a future version of pytorch. It currently rounds toward 0 (like the 'trunc' function NOT 'floor'). This results in incorrect rounding for negative values.\n",
            "To keep the current behavior, use torch.div(a, b, rounding_mode='trunc'), or for actual floor division, use torch.div(a, b, rounding_mode='floor'). (Triggered internally at  /pytorch/aten/src/ATen/native/BinaryOps.cpp:467.)\n",
            "  return torch.floor_divide(self, other)\n",
            "[2021-09-21 07:40:06,071 INFO] PRED AVG SCORE: -0.8059, PRED PPL: 2.2388\n"
          ]
        }
      ],
      "source": [
        "!onmt_translate -model data/kftt-data-1.0/run/model_step_15000.pt -src data/en_sample.txt -gpu 0"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": 3,
      "metadata": {},
      "outputs": [
        {
          "name": "stderr",
          "output_type": "stream",
          "text": [
            "[2022-01-15 13:28:23,401 INFO] Translating shard 0.\n",
            "c:\\users\\aikot\\anaconda3\\lib\\site-packages\\onmt\\translate\\beam_search.py:282: UserWarning: __floordiv__ is deprecated, and its behavior will change in a future version of pytorch. It currently rounds toward 0 (like the 'trunc' function NOT 'floor'). This results in incorrect rounding for negative values. To keep the current behavior, use torch.div(a, b, rounding_mode='trunc'), or for actual floor division, use torch.div(a, b, rounding_mode='floor').\n",
            "  self._batch_index = self.topk_ids // vocab_size\n",
            "[2022-01-15 13:28:24,841 INFO] \n",
            "SENT 1: ['トム', 'は', '猫', 'が', 'ほしい', 'のよ', '。']\n",
            "PRED 1: <unk> <unk> <unk> <unk> <unk> <unk> <unk>\n",
            "PRED SCORE: -4.2252\n",
            "\n",
            "[2022-01-15 13:28:24,841 INFO]                    トム          は          猫          が        ほしい         のよ          。 \n",
            "     <unk> *0.5318663  0.2242770  0.0728489  0.0532581  0.0444993  0.0386153  0.0346352 \n",
            "     <unk> *0.3765089  0.3407379  0.1150520  0.0545359  0.0406057  0.0358241  0.0367354 \n",
            "     <unk>  0.1978796 *0.3156957  0.2264422  0.1156855  0.0688283  0.0438201  0.0316486 \n",
            "     <unk>  0.0586065  0.1240434  0.2270643 *0.2355762  0.1775913  0.1112508  0.0658674 \n",
            "     <unk>  0.0245394  0.0460385  0.1199759  0.2215558 *0.2483335  0.2038339  0.1357229 \n",
            "     <unk>  0.0181563  0.0268320  0.0640747  0.1512890  0.2330960 *0.2680363  0.2385156 \n",
            "     <unk>  0.0303378  0.0382466  0.0610347  0.1161510  0.1857962  0.2588435 *0.3095902 \n",
            "      </s>  0.0513149  0.0640529  0.0792495  0.1146920  0.1635502  0.2270141 *0.3001265 \n",
            "\n",
            "[2022-01-15 13:28:24,841 INFO] PRED AVG SCORE: -0.6036, PRED PPL: 1.8287\n"
          ]
        }
      ],
      "source": [
        "!onmt_translate -model data/JParaCrawl/run/model_step_200000.pt -src data/ja_sample.txt -gpu 0 -verbose -attn_debug -output data/JParaCrawl/out_attn_ja_en.txt"
      ]
    },
    {
      "cell_type": "code",
      "execution_count": null,
      "metadata": {},
      "outputs": [],
      "source": [
        "!onmt_translate -model data/JParaCrawl/run/model_step_200000.pt -src data/JParaCrawl/kyoto-test.ja.atok -gpu 0 -verbose -output data/JParaCrawl/out_kyoto_ja_atok.txt"
      ]
    }
  ],
  "metadata": {
    "accelerator": "GPU",
    "colab": {
      "collapsed_sections": [],
      "include_colab_link": true,
      "name": "transformer_kyoto_ja_en.ipynb",
      "provenance": [],
      "toc_visible": true
    },
    "kernelspec": {
      "display_name": "Python 3",
      "name": "python3"
    },
    "language_info": {
      "codemirror_mode": {
        "name": "ipython",
        "version": 3
      },
      "file_extension": ".py",
      "mimetype": "text/x-python",
      "name": "python",
      "nbconvert_exporter": "python",
      "pygments_lexer": "ipython3",
      "version": "3.8.8"
    }
  },
  "nbformat": 4,
  "nbformat_minor": 0
}