ニコニコ動画の再生回数が多い動画について

• 東京電機大学　工学部　情報通信工学科
• ネットワークシステム研究室
• 指導教員　坂本　直志
• 14EC078　玉利　健一郎

目次

• 0.研究背景
• 1.実行環境
• 2.準備
  • 2.1.ニコニコ動画
  • 2.2.マイリスト数
  • 2.3.コメント
  • 2.4.動画ID
  • 2.5.コメント表示量
  • 2.6.弾幕
  • 2.7.vpos
  • 2.8.Rapidminer
• 3.実験方法
  • 3.1．データの収集
    • 3.1.1．対象動画IDを取得
    • 3.1.2．コメントデータの取得
    • 3.1.3．動画情報データの取得
  • 3.2.入力データの準備
  • 3.3.コメント表示量の算出
  • 3.4.弾幕の抽出
  • 3.5.弾幕面積
• 4.実験結果
• 5.考察
  • 5.1.実験結果について
  • 5.2.弾幕面積について
  • 5.3.弾幕面積と動画の内容の関係性について
  • 5.4.今後の課題
    • 5.4.1.対象とする動画について
    • 5.4.2.分析データについて
• 6.まとめ
• 7.参考文献
• 8.資料
  • 8.1.005_videoInfoAndCommentJsonToCommentDetail.py
  • 8.2.RapidMiner　Process「010Create_vpos_list」
  • 8.3.015_vposToCommentcounter.py
  • 8.4.RapidMiner　Process「020CreateDesplayCounter」
  • 8.5.RapidMiner　Process「040AllRemake」

０．研究背景

　今年日本では映像分野のエンターテイメントはYoutubeやニコニコ動画を代表とした動画共有サイトが躍進しており、広告収入などによって収入を得られるなど動画投稿者にとって、再生数を多く得る動画は非常に価値があり、再生回数が多い動画の特徴がわかれば動画制作者にとって非常に役にたつと思われる。 　そこで、本研究では、ニコニコ動画の再生回数がとても多い動画と、そこそこ再生回数とマイリスト数が多い動画のコメントデータから動画再生時間ごとのコメントの表示量の増減を抽出し、それぞれの特徴を比較する。

１．実行環境

本研究で使用したパソコンについて表１、使用ソフトウェアについて表２に示す。

２．準備

本文中の用語や基礎知識について述べる。

２．１． ニコニコ動画

　ニコニコ動画は、日本最大級の動画共有サイトである。再生中の動画上にコメントを付加し共有できるという特徴がある。

２．２．マイリスト数

　マイリストとはニコニコ動画内にあるお気に入りの動画をブックマークとして保存することができる機能のことである[1]。 　マイリスト数は各動画にある情報の一つでその動画がいくつマイリストされているかを表す数のことである。有料会員では25500件登録でき、無料会員では200件である[1]。 　マイリストはフォルダのように名前を付けて分別することができる。しかし一つのマイリストには有料会員であっても500件までしか登録できない。マイリスト一覧を開いている様子を図3に示す。

　無料会員の登録上限と、マイリストは視聴者の気に入ったというサインの側面からマイリスト数が多い動画は面白い動画であることが多い。

２．３．コメント

　コメントは視聴者が動画につける文字列のことである。コメントは通常5秒間動画上に図4のように表示される。

コメントの打たれた動画再生時間の位置を本文ではコメント表示位置と呼ぶ。

２．４．動画ID

　ニコニコ動画では各動画に一意のアルファベットと数字から成るIDが振られている。 　本文ではこのIDのことを動画IDと呼ぶ。

２．５．コメント表示量

　本文では動画のある再生時間で動画画面に表示されているコメントの数のことをコメント表示量と呼ぶ。本研究では、ある時刻tのコメント表示量をt-5からtの間のコメント数とする。

２．６．弾幕

　同じようなコメント表示位置にコメントが集中することをニコニコ動画では弾幕と呼ぶ。

２．７．vpos

　コメントデータに含まれている、コメント表示位置を1/100[秒]単位で表すデータである。

２．８．Rapidminer

　Rapidminerはデータを前処理、加工、評価、運用を一つのプラットフォームで行うことができるソフトウェアである[3]。プロセスと呼ばれる単位で実行をして結果を出し、プロセス上にオペレータを配置し、いくつかの種類のオペレータを組み合わせることで複雑なデータ処理を行える。

３．実験方法

３．１．データの収集

　本実験では2018/12/22 00:00から2019/12/21 23:59の期間に投稿された，ニコニコ動画が定めているジャンルごとの再生回数がとても多い動画と，そこそこ再生回数とマイリスト数の多い動画のコメントデータと動画情報データを対象に解析を行う．なおここでいうそこそこ再生回数とマイリスト数の多い動画とはジャンルごとの再生回数が3万以下かつマイリスト数が300以下の動画の中で再生回数が10位以上の動画のことである．

３．１．１．対象動画IDを取得

　対象の動画IDの収集方法について述べる。動画IDを取得するために https://api.search.nicovideo.jp/api/v2/video/contents/searchへリクエストをする。 Advanced REST clientを起動して図6のようパラメータを入力する[4]。

　ParametersのBodyのqにはニコニコ動画の各ジャンル名を記入する。各ジャンルの数だけ入力を繰り返し、SENDボタンを押す。入力する各ジャンル名は表３に示す。

　正しくパラメータが入力された状態でSENDボタンを押すと図７のような動画IDのリストが返る。

３．１．２．コメントデータの取得

　コメントデータの収集方法について述べる。コメントデータはブラウザのディベロッパーツールを用いて取り出す。ニコニコ動画で動画を開いたとき、通信データの中にコメントデータが「api.json」として存在するのでそれを見つける。ここではGoogleChoromeを用いる。 まず、GoogleChoromeのディベロッパーツールを開き、Networkを選択したうえで、「Disable cache」にチェックをつけ、コメントを取得したい動画を開く。 有料動画等でなければ「api.json」が読まれているので「Filter」にapi.jsonと入力するとコメントデータがjson形式で取得可能な状態のファイルを見つけることができる。この様子を図３に示す。 api.jsonをクリックし、Responseをクリックすると内容が表示されるので、コピーし、テキストエディタなどにペーストして保存をすれば一つの動画のコメントデータを取得できる。この作業を必要な取得したい動画の数だけ繰り返す。

３．１．３．動画情報データの取得

　動画情報データの取得方法について述べる。動画情報データとは動画時間やタイトル、再生回数やタグ情報などのデータを指す。 動画情報データは３．１．１.で取得した動画IDを{動画ID}へあてはめて https://ext.nicovideo.jp/api/getthumbinfo/{動画ID}へアクセスすればxmlファイル形式のデータが表示される[5]ので、４．２．と同じようにテキストエディタにコピーアンドペーストをして保存する。

３．２．入力データの準備

　３．１．２．と３．１．３を調べたい動画の数繰り返して取得した、複数の動画情報のxmlファイルと複数のコメント情報のjsonファイルをPythonコードで一つのcsvファイルにする。csvファイルの内容は表４に示す。

このcsvを作成するプログラムは８．１．に示す。

３．３．コメント表示量の算出

３．２．で作成したcsvファイルをRapidminerに読み込み、各動画の1秒ごとのコメント表示量をPythonのコードで求める。具体的には下記の方法で求める。

　・列を追加し、コメント一つ一つに1から始まる一意のidを振る。この列名を「comment_address」とする。

　・comment_addressとvpos以外の列を取り除く。

　・動画IDごとに表を分け、vposを基準に昇順に並び替える。

　・それぞれのvposから500足し算した値の間にvposの値があるデータの個数を数える。これがコメント表示量である。数えた結果を「display_comment_count」とする。

　・ふたたび元のcsvから読み込んだデータに1から始まる一意のidを振り、comment_addressをもとにdisplay_comment_countを結合し、「001data.csv」として出力する。

　これらの処理を行うRapidminerのオペレータの配置等は８．２．と８．４．に示し、 Pythonのソースコードは８．３．に示す。

３．４．弾幕の抽出

　本実験では弾幕をコメント表示量がある値a超えたときの部分とする。 　弾幕とみなすコメント表示量は図11から25を超えていればだいたい弾幕とみなせる。

　よってaを25と定めたいが、コメントデータはコメント数が十分のとき0.6秒に1コメントとなるはずだが、今回のコメント取得方法では動画の長さにきちんと比例した個数が取得できない。そのためaを定数とすると他の動画の弾幕と単純に比較できなくなってしまう。そこでaを次のように定義する．

ただし，

　　　　コメント数=取得コメント数

となっている場合はa=25とする．

３．５．弾幕面積

　判別値aを超えたコメント表示量の合計値を弾幕面積とする。また判別値aをコメント表示量が超した回数を弾幕の個数とする。図２のデータから抽出する例を図12に示す。

各動画のコメントについて弾幕の個数と弾幕面積を求め、再生回数がとても多い動画と、そこそこ再生回数とマイリスト数の多い動画とで比較をする。 ３．４．と３．５．の処理を行うRapidminerのオペレータの配置等は８．５．に示す。

４．実験結果

　弾幕の個数を横軸、弾幕面積を縦軸とした結果を以下に示す。

５．考察

まず４．の実験の結果について考察し、つぎに今後の課題について述べる。

５．１．実験結果について

　再生回数がとても多い動画は確かに弾幕の個数と弾幕面積が大きく出たところがあるが、再生数別にみると再生回数が多ければ必ず弾幕が発生するというわけではないという結果であった。 弾幕が発生しない動画はコメントしづらいような動画内容である場合が多く、ジャンルによって弾幕個数と弾幕面積の結果の特性が異なっている。例えば音楽・サウンドの動画はどれほど動画や音楽の内容が素晴らしくても、サビや動画の始まり、動画の終わりなどの区切り以外はコメントが少なく分散する傾向であった。一方アニメの配信は初回配信や一定期間最新話が無料なので一定のアニメファンは内容にかかわらずに再生するので、再生回数は他の動画に比べて必ず多い。そのため、コメントしづらい動画であっても再生回数が多くなるのは当然である。

５．２．弾幕面積について

本研究では弾幕の濃さを抽出するため、弾幕面積を定義し、結果を得た。つまり本研究ではこの弾幕面積の定義によってはより深い分析ができる可能性がある。 今回の実験では弾幕面積の定義において、25 というパラメータを固定した。これにより、動画に対して、一定の評価ができた。25 という値については議論の余地があるが極端な値にしなければ似たような結果になると思われる。

５．３．弾幕面積と動画の内容の関係性について

弾幕面積と動画の内容の関係性をみるため図 16 の①と②の動画について述べる。 ①の 2 つの動画は、弾幕面積の割合がかなり大きい。この二つの動画はいずれも同じ動画投稿者によるもので「【幕末志士】SAKKACHAN2 前編【実況プレイ】」と「【幕末志士】スーパーボンバーマン【実況プレイ】」である。この二つの動画は共通して笑いどころが多数存在する。コメントもその部分に集中している。単純に笑える部分についてはコメントが付きやすいと考えられ、より多くの視聴者を笑わせることができれば弾幕面積が増えやすいと思われる。つまりレベルの高い投稿者による面白い動画である。 一方②の動画は「けものフレンズ２第 1 話「きおくのかなた」」である。弾幕面積と個数は他動画と同じような比率であり数も多いが、コメントは罵詈雑言であったり、否定的だったり皮肉であるように思われても仕方ないような内容で、それが動画の要所要所で発生している状態である。 つまり質の悪いアニメへの批判が多数書かれている。アニメは再生数が多いので、質が悪いとコメントが多くなる。 よってアニメ以外では質の高さと弾幕面積は関連付けられている。一方必ず一定の再生数が得られるアニメでは、おもしろくなく批判が多くても共に弾幕面積が多くなる。

５．４．今後の課題

５．４．１．対象とする動画について

５．１．でも触れたようにジャンルか何か別の要素によって弾幕個数と弾幕面積の特徴が異なっているため、対象とする動画は再生回数が多い動画ではなく、ジャンルや動画投稿者別あるいは別の何かを対象とした動画を分析するべきである。今回はアニメのみが異なることがわかったが、今後は分析対象を見つけることは今後の課題である。

５．４．２．分析データについて

今回の研究ではコメント表示位置についてしか分析をしていないが、コメント投稿者の数を調べれば、一人でいくつもコメントしている人がいる動画と一人当たりでそれほどコメントを打たない動画で分別をし、今回の実験で得られなかった動画の特徴が得られる可能性がある。 また、コメントの文字列を分析すれば５．３．で触れたような否定的なコメントを抽出して動画を分別することができる可能性がある。 コメント表示位置以外の分析をする手法を見つけることは今後の課題である。

６．まとめ

　本研究ではニコニコ動画のコメントの再生時間のどこにコメントがあるかという部分に着目した。その結果、再生回数が多い動画の特徴の一つにコメントが一部分に密集しやすいということがわかった。 　今回はコメントの再生時間の位置にのみ焦点を当てたが、再生回数がとても多くても弾幕個数と弾幕面積がすくない場合もあり、ジャンルや動画投稿者、あるいは別の何かの要素別に分析をすることや、コメントの文章自体による特徴の抽出することは今後の課題である．

７．参考文献

[1]ニコニコ大百科 マイリスト，

https://dic.nicovideo.jp/a/%E3%83%9E%E3%82%A4%E3%83%AA%E3%82%B9%E3%83%88

[2]ニコニコ動画 「【実況】幕末志士達のスマブラ６４ リベンジ」，

https://www.nicovideo.jp/watch/sm36106202

[3]Rapidminer RapidMiner Studio 製品情報

https://www.rapidminer.jp/rapidminer-studio/

[4] niconico コンテンツ検索 API ガイド

https://site.nicovideo.jp/search-api-docs/search.html

[5] ニコニコ大百科 「ニコニコ動画 API」

https://dic.nicovideo.jp/a/%E3%83%8B%E3%82%B3%E3%83%8B%E3%82%B3%E5%8B%95%E7%94%BBapi

[6]ニコニコ動画 「試作型 windows777 実況説明あり」，

https://www.nicovideo.jp/watch/sm8482514

[7] ニコニコ動画 「【ゆっくり解説】世界の奇人・変人・偉人紹介【リュドミラ・パブリチェンコ】」

https://www.nicovideo.jp/watch/sm35141842

８．資料

　この章では実験に使用したPythonのソースコードや、RapidMinerのオペレータの配置等を示す。

８．１．005_videoInfoAndCommentJsonToCommentDetail.py

　複数の動画情報xmlと複数のコメントjsonを一つのcsvにするPythonのプログラムである。 以下のソースコードを示す。

import os
import re
import datetime
from bs4 import BeautifulSoup
import requests
import json
import glob

def avoid_ng_word(targetStr):

    if type(targetStr) is list:
        tmpstr = '<listcomma>'.join(targetStr)
    else:
        tmpstr=str(targetStr)
    tmpstr = tmpstr.replace('\n','<br />')
    tmpstr = tmpstr.replace('\r','\\r')
    tmpstr = tmpstr.replace('\f','\\f')
    tmpstr = tmpstr.replace('\b','\\b')
    tmpstr = tmpstr.replace('\b','\\b')
    tmpstr = tmpstr.replace('\0','')
    tmpstr = tmpstr.replace('\\','\\\\')
    tmpstr = tmpstr.replace(',','<comma>')
    tmpstr = tmpstr.replace('\\u3000','<zenkaku_space>')
    tmpstr = tmpstr.replace('\u3000','<zenkaku_space>')

    return tmpstr

def avoid_ng_word_json(targetStr):

    tmpstr=str(targetStr)
    tmpstr = tmpstr.replace('(','（')
    tmpstr = tmpstr.replace(')','）')
    tmpstr = tmpstr.replace('\n','<br />')
    tmpstr = tmpstr.replace('\r','\\r')
    tmpstr = tmpstr.replace('\f','\\f')
    tmpstr = tmpstr.replace('\b','\\b')
    tmpstr = tmpstr.replace('\b','\\b')
    tmpstr = tmpstr.replace('\0','')
    tmpstr = tmpstr.replace('\\','\\\\')
    tmpstr = tmpstr.replace(',','<comma>')
    tmpstr = tmpstr.replace('\\u3000','<zenkaku_space>')
    tmpstr = tmpstr.replace('\u3000','<zenkaku_space>')

    return tmpstr

def load_video_info_xml(smId):

    xml_str=''
    with open(video_xml_pass+smId+'.xml', 'r' , encoding='cp932') as f:
        xml_str=f.read()
    
    soup = BeautifulSoup(xml_str,'html.parser')

    res=[]
    
    res.append(smId)
    res.append(soup.find_all('title')[0].string)
    res.append(soup.find_all('description')[0].string)
    res.append(soup.find_all('first_retrieve')[0].string)
    res.append(convert_length_to_vposmax(soup.find_all('length')[0].string))
    res.append(soup.find_all('view_counter')[0].string)
    res.append(soup.find_all('comment_num')[0].string)
    res.append(soup.find_all('mylist_counter')[0].string)

    tmp_tag_result=soup.find_all('tag')

    res.append(10 if len(tmp_tag_result)==11 else len(tmp_tag_result))
    for i in range(10):
        if (i<len(tmp_tag_result)):
            res.append(tmp_tag_result[i].string)
        else:
            res.append('')    
    
    res.append(soup.find_all('genre')[0].string)

    if (soup.find_all('user_id')):
        res.append(soup.find_all('user_id')[0].string)
        res.append(soup.find_all('user_nickname')[0].string)
        res.append('isUserVideo')
    else:
        res.append(soup.find_all('ch_id')[0].string)
        res.append(soup.find_all('ch_name')[0].string)
        res.append('isChVideo')
    res2=''

    for info in res:
        res2+= avoid_ng_word(info)+','

    res2=res2[:-1]

    return res2

def load_comment_json(smId):

    json_dict=None
    
    with open(comment_json_pass +smId+ '.text', 'r' , encoding='cp932') as f:
        tmp=f.read()
    try:
        json_dict=json.loads(tmp,encoding='cp932')
    except json.JSONDecodeError:
        print('エラー:'+smId)
        tmp=avoid_ng_word_json(tmp)
        try:
            json_dict=json.loads(tmp,encoding='cp932')
        except json.JSONDecodeError:
            print('最終エラー:'+smId)
            return []


    

    res=[]
    for l in json_dict:
        for chat in l.keys():
            if (chat=='chat'):
                message   =avoid_ng_word(l['chat'].get('content',''))
                date      =avoid_ng_word(l['chat'].get('date',''))
                command   =avoid_ng_word(l['chat'].get('mail',''))
                vpos      =avoid_ng_word(l['chat'].get('vpos',''))
                no        =avoid_ng_word(l['chat'].get('no',''))
                user_id   =avoid_ng_word(l['chat'].get('user_id','NoData'))
                nicoru    =avoid_ng_word(l['chat'].get('nicoru',''))
                res.append("{},{},{},{},{},{},{}".format(
message,date,command,vpos,no,user_id,nicoru))


    return res
def convert_length_to_vposmax(length_str):
    repatter=re.compile('([0-9]+):([0-9][0-9])')
    result = repatter.search(length_str)
    
    m=-1
    s=-1
    if (result):
        m=int(result.group(1))
        s=int(result.group(2))
    else:
        exit()

    return (m*60+s)*100

def checkExistAlreadyVideoId(smId):
    exist_bool=False
    with open(FILE_DIRECTORY+'UsedByFainalOutput.txt',
 mode='r', encoding='cp932') as f:
        used_video_id_list=f.readlines()
    for video_id in used_video_id_list:
        if (video_id==smId+'\n'):
            exist_bool=True
    
    return exist_bool

def decideNextVideoId(video_info_list_file,commnet_list_file,palus):
    and_list=list(set(video_info_list_file) & set(comment_file_list))

    if (palus<len(and_list)):
        return and_list[palus]
    else:
        return 'End'

FILE_DIRECTORY='C:\\workspace\\python\\niconico_v2\\'

target_directory=input('data\\以下のフォルダ名を入力')

video_xml_pass = "C:\\workspace\\python\\niconico_v2\\data\\"
video_xml_pass+=target_directory 
video_xml_pass+= "\\videoInfoTextList\\"

comment_json_pass='C:\\workspace\\python\\niconico_v2\\data\\' \
+ target_directory + '\\commentJsonTextList\\'

tmp_video_info_file_list=glob.glob(video_xml_pass+'\\*')

video_info_file_list=[]
for info in tmp_video_info_file_list:
    video_info_file_list.append(os.path.splitext(os.path.basename(info))[0])

tmp_comment_file_list=glob.glob(comment_json_pass +'\\*')
comment_file_list=[]
for info in tmp_comment_file_list:
    comment_file_list.append(os.path.splitext(os.path.basename(info))[0])


for i in range(9999999):
    target_video_id=decideNextVideoId(video_info_file_list,comment_file_list,\
palus=i)

    
    if (target_video_id=='End'):
        break#もう実行すべきファイルはない

    if (not checkExistAlreadyVideoId(target_video_id)):
        print('実行:'+target_video_id)
        #データがないVideoIdなので取得
        video_info_str=load_video_info_xml(target_video_id)
        comment_list=load_comment_json(target_video_id)

        final_str=''

        if (comment_list):
            #コメントが正常のとき
            for comment in comment_list:
                final_str+=video_info_str+','+comment+','+target_directory+'\n'

            # RapidMinerStudio用に保存
            with open(FILE_DIRECTORY+'FainalOutput.txt', mode='a') as f:
                f.write(final_str)

            #使ったIdはファイルに保存
            with open(FILE_DIRECTORY+'UsedByFainalOutput.txt', mode='a') as f:
                f.write(target_video_id+'\n')
        else:
            #コメントが正常に読み取れないとき
            pass

８．２．RapidMiner　Process「010Create_vpos_list」

　８．１．で作成したcsvをインポートし、図８．２．A．の4、5、6のようにインポートしたデータを配置し、作りたいCSVからインポートしたデータだけを7につなぐと対応したvpos_list.csvというファイルが出力されるRapidminerのプロセスである。 以下に配置図と構成を表すXMLを示す。

<?xml version="1.0" encoding="UTF-8"?><process version="9.2.001">
  <context>
    <input>
      <location>../../data/FainalOutputs/Year</location>
    </input>
    <output/>
    <macros/>
  </context>
  <operator activated="true" class="process" compatibility="9.2.001" expanded="true" name="Process">
    <parameter key="logverbosity" value="init"/>
    <parameter key="random_seed" value="2001"/>
    <parameter key="send_mail" value="never"/>
    <parameter key="notification_email" value=""/>
    <parameter key="process_duration_for_mail" value="30"/>
    <parameter key="encoding" value="SYSTEM"/>
    <process expanded="true">
      <operator activated="true" class="time_series:generate_data_arima" compatibility="9.2.001" expanded="true" height="68" name="Generate Data (ARIMA)" width="90" x="45" y="34">
        <parameter key="name_of_new_time_series_attribute" value="id"/>
        <enumeration key="coefficients_of_the_auto-regressive_terms"/>
        <enumeration key="coefficients_of_the_moving-average_terms"/>
        <parameter key="constant" value="0.0"/>
        <parameter key="standard_deviation_of_the_innovations" value="0.0"/>
        <parameter key="length" value="10000"/>
        <parameter key="use_local_random_seed" value="false"/>
        <parameter key="local_random_seed" value="1992"/>
      </operator>
      <operator activated="true" class="generate_id" compatibility="9.2.001" expanded="true" height="82" name="Generate ID" width="90" x="179" y="34">
        <parameter key="create_nominal_ids" value="false"/>
        <parameter key="offset" value="0"/>
      </operator>
      <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (2)" width="90" x="313" y="34">
        <parameter key="name" value="allResult"/>
        <parameter key="io_object" value="ExampleSet"/>
        <parameter key="store_which" value="1"/>
        <parameter key="remove_from_process" value="true"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve midorikawa" width="90" x="179" y="391">
        <parameter key="repository_entry" value="../../data/FainalOutputs/midorikawa"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve Year" width="90" x="179" y="289">
        <parameter key="repository_entry" value="../../data/FainalOutputs/Year"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve YearYowai" width="90" x="179" y="187">
        <parameter key="repository_entry" value="../../data/FainalOutputs/YearYowai"/>
      </operator>
      <operator activated="true" class="generate_id" compatibility="9.2.001" expanded="true" height="82" name="Generate ID (3)" width="90" x="313" y="187">
        <parameter key="create_nominal_ids" value="false"/>
        <parameter key="offset" value="0"/>
      </operator>
      <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename (2)" width="90" x="447" y="187">
        <parameter key="old_name" value="id"/>
        <parameter key="new_name" value="comment_address"/>
        <list key="rename_additional_attributes"/>
      </operator>
      <operator activated="true" class="set_role" compatibility="9.2.001" expanded="true" height="82" name="Set Role" width="90" x="581" y="187">
        <parameter key="attribute_name" value="comment_address"/>
        <parameter key="target_role" value="regular"/>
        <list key="set_additional_roles"/>
      </operator>
      <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember" width="90" x="715" y="187">
        <parameter key="name" value="allData"/>
        <parameter key="io_object" value="ExampleSet"/>
        <parameter key="store_which" value="1"/>
        <parameter key="remove_from_process" value="true"/>
      </operator>
      <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes" width="90" x="849" y="187">
        <parameter key="attribute_filter_type" value="single"/>
        <parameter key="attribute" value="video_id"/>
        <parameter key="attributes" value=""/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="false"/>
        <parameter key="include_special_attributes" value="false"/>
      </operator>
      <operator activated="true" class="remove_duplicates" compatibility="9.2.001" expanded="true" height="103" name="Remove Duplicates" width="90" x="983" y="187">
        <parameter key="attribute_filter_type" value="single"/>
        <parameter key="attribute" value="video_id"/>
        <parameter key="attributes" value=""/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="false"/>
        <parameter key="include_special_attributes" value="false"/>
        <parameter key="treat_missing_values_as_duplicates" value="false"/>
      </operator>
      <operator activated="true" class="loop_examples" compatibility="9.2.001" expanded="true" height="82" name="Loop Examples" width="90" x="1318" y="187">
        <parameter key="iteration_macro" value="example"/>
        <process expanded="true">
          <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro" width="90" x="112" y="34">
            <parameter key="macro" value="getVideo_id"/>
            <parameter key="macro_type" value="data_value"/>
            <parameter key="statistics" value="average"/>
            <parameter key="attribute_name" value="video_id"/>
            <parameter key="example_index" value="%{example}"/>
            <list key="additional_macros"/>
          </operator>
          <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall" width="90" x="45" y="187">
            <parameter key="name" value="allData"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="remove_from_store" value="false"/>
          </operator>
          <operator activated="true" class="filter_examples" compatibility="9.2.001" expanded="true" height="103" name="Filter Examples" width="90" x="179" y="187">
            <parameter key="parameter_expression" value=""/>
            <parameter key="condition_class" value="custom_filters"/>
            <parameter key="invert_filter" value="false"/>
            <list key="filters_list">
              <parameter key="filters_entry_key" value="video_id.equals.%{getVideo_id}"/>
            </list>
            <parameter key="filters_logic_and" value="true"/>
            <parameter key="filters_check_metadata" value="true"/>
          </operator>
          <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (2)" width="90" x="715" y="340">
            <parameter key="name" value="allResult"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="remove_from_store" value="false"/>
          </operator>
          <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (2)" width="90" x="313" y="187">
            <parameter key="attribute_filter_type" value="subset"/>
            <parameter key="attribute" value="vpos"/>
            <parameter key="attributes" value="comment_address|vpos"/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="sort" compatibility="9.2.001" expanded="true" height="82" name="Sort" width="90" x="447" y="187">
            <parameter key="attribute_name" value="vpos"/>
            <parameter key="sorting_direction" value="increasing"/>
          </operator>
          <operator activated="true" class="generate_id" compatibility="9.2.001" expanded="true" height="82" name="Generate ID (2)" width="90" x="581" y="187">
            <parameter key="create_nominal_ids" value="false"/>
            <parameter key="offset" value="0"/>
          </operator>
          <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename" width="90" x="715" y="187">
            <parameter key="old_name" value="vpos"/>
            <parameter key="new_name" value="vpos_%{getVideo_id}"/>
            <list key="rename_additional_attributes">
              <parameter key="comment_address" value="comment_address_%{getVideo_id}"/>
            </list>
          </operator>
          <operator activated="true" class="concurrency:join" compatibility="9.2.001" expanded="true" height="82" name="Join" width="90" x="849" y="238">
            <parameter key="remove_double_attributes" value="false"/>
            <parameter key="join_type" value="outer"/>
            <parameter key="use_id_attribute_as_key" value="false"/>
            <list key="key_attributes">
              <parameter key="id" value="id"/>
            </list>
            <parameter key="keep_both_join_attributes" value="false"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (3)" width="90" x="983" y="238">
            <parameter key="name" value="allResult"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <connect from_port="example set" to_op="Extract Macro" to_port="example set"/>
          <connect from_op="Extract Macro" from_port="example set" to_port="example set"/>
          <connect from_op="Recall" from_port="result" to_op="Filter Examples" to_port="example set input"/>
          <connect from_op="Filter Examples" from_port="example set output" to_op="Select Attributes (2)" to_port="example set input"/>
          <connect from_op="Recall (2)" from_port="result" to_op="Join" to_port="right"/>
          <connect from_op="Select Attributes (2)" from_port="example set output" to_op="Sort" to_port="example set input"/>
          <connect from_op="Sort" from_port="example set output" to_op="Generate ID (2)" to_port="example set input"/>
          <connect from_op="Generate ID (2)" from_port="example set output" to_op="Rename" to_port="example set input"/>
          <connect from_op="Rename" from_port="example set output" to_op="Join" to_port="left"/>
          <connect from_op="Join" from_port="join" to_op="Remember (3)" to_port="store"/>
          <portSpacing port="source_example set" spacing="0"/>
          <portSpacing port="sink_example set" spacing="0"/>
          <portSpacing port="sink_output 1" spacing="0"/>
        </process>
      </operator>
      <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (4)" width="90" x="1452" y="187">
        <parameter key="name" value="allResult"/>
        <parameter key="io_object" value="ExampleSet"/>
        <parameter key="remove_from_store" value="false"/>
      </operator>
      <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (3)" width="90" x="1586" y="187">
        <parameter key="attribute_filter_type" value="single"/>
        <parameter key="attribute" value="id"/>
        <parameter key="attributes" value=""/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="true"/>
        <parameter key="include_special_attributes" value="false"/>
      </operator>
      <operator activated="true" class="write_csv" compatibility="9.2.001" expanded="true" height="82" name="Write CSV" width="90" x="1720" y="187">
        <parameter key="csv_file" value="C:\workspace\python\niconico_v2\ToRapidminer\vpos_list.csv"/>
        <parameter key="column_separator" value=","/>
        <parameter key="write_attribute_names" value="true"/>
        <parameter key="quote_nominal_values" value="true"/>
        <parameter key="format_date_attributes" value="true"/>
        <parameter key="append_to_file" value="false"/>
        <parameter key="encoding" value="Shift_JIS"/>
      </operator>
      <connect from_op="Generate Data (ARIMA)" from_port="arima" to_op="Generate ID" to_port="example set input"/>
      <connect from_op="Generate ID" from_port="example set output" to_op="Remember (2)" to_port="store"/>
      <connect from_op="Retrieve midorikawa" from_port="output" to_op="Generate ID (3)" to_port="example set input"/>
      <connect from_op="Generate ID (3)" from_port="example set output" to_op="Rename (2)" to_port="example set input"/>
      <connect from_op="Rename (2)" from_port="example set output" to_op="Set Role" to_port="example set input"/>
      <connect from_op="Set Role" from_port="example set output" to_op="Remember" to_port="store"/>
      <connect from_op="Remember" from_port="stored" to_op="Select Attributes" to_port="example set input"/>
      <connect from_op="Select Attributes" from_port="example set output" to_op="Remove Duplicates" to_port="example set input"/>
      <connect from_op="Remove Duplicates" from_port="example set output" to_op="Loop Examples" to_port="example set"/>
      <connect from_op="Recall (4)" from_port="result" to_op="Select Attributes (3)" to_port="example set input"/>
      <connect from_op="Select Attributes (3)" from_port="example set output" to_op="Write CSV" to_port="input"/>
      <connect from_op="Write CSV" from_port="through" to_port="result 1"/>
      <portSpacing port="source_input 1" spacing="0"/>
      <portSpacing port="sink_result 1" spacing="0"/>
      <portSpacing port="sink_result 2" spacing="0"/>
    </process>
  </operator>
</process>

８．３．015_vposToCommentcounter.py

８．２．で作成したvpos_list.csv からコメントの表示量を求め、結果をcommentCounter.csv に出力するPythonのプログラムである。 以下にソースコードを示す。

import csv
import pprint
import os
import re

def read_vpos_list():
    with open(r'C:\workspace\python\niconico_v2\ToRapidminer\vpos_list.csv') as f:
        reader = csv.reader(f)
        l = [row for row in reader]

    return l

def judgment_data_type(s):

    repatter=re.compile(r'comment_address_.*')
    result = repatter.search(s)
        
    if (result):
        #列の属性名はcomment_address
        return 'comment_address'
    
    repatter=re.compile(r'comment_counter_.*')
    result = repatter.search(s)
        
    if (result):
        #列の属性名はcomment_counter
        return 'comment_counter'

    repatter=re.compile(r'vpos_.*')
    result = repatter.search(s)
    if (result):
        #列の属性名はvpos
       return 'vpos'

    if (s=='id'):
        return 'id'
    return ''


FILE_DIRECTORY=os.getcwd()+'\\'

input_csv=read_vpos_list()

csv_zokusei_name=input_csv[0]

input_csv=input_csv[1:]
csv_hight=len(input_csv)
csv_width=len(input_csv[0])

#属性名作成
output_csv=[[]]
for name in csv_zokusei_name:
    repatter=re.compile(r'comment_address_.*')
    result = repatter.search(name)
    if (result):
        output_csv[0].append(name)
        continue

    if (name=='id'):
        output_csv[0].append(name)
        continue

    

    repatter=re.compile(r'vpos_(.*)')
    result = repatter.search(name)

    video_id=result.group(1)
    if (result):
        output_csv[0].append('comment_counter_'+video_id)
        continue







for i in range(csv_hight):
    output_csv.append([])

for x in range(csv_width):
    branch = judgment_data_type(csv_zokusei_name[x])

    comment_counter=0
    last_vpos=0
    index_last_vpos=0
    index_now=0

    for y in range(csv_hight):
        if (branch=='comment_address'):
            output_csv[y+1].append(input_csv[y][x])
        
        if (branch=='vpos'):
            if (y==0):
                comment_counter=0
                last_vpos=int(input_csv[0][x])
                index_last_vpos=0
                

            tmpLoopBool=True
            while (tmpLoopBool):
                if (input_csv[y][x]==''):
                    output_csv[y+1].append('')
                    break

                now_vpos=int(input_csv[y][x])

                if (last_vpos + 500 < now_vpos):
                    comment_counter-=1
                    index_last_vpos+=1
                    last_vpos=int(input_csv[index_last_vpos][x])
                else:
                    comment_counter+=1
                    output_csv[y+1].append(str(comment_counter))
                    tmpLoopBool=False

    pass
    

output_csv2=[['comment_address','display_comment_count']]

output_csv2_index=0

tmplist=[[]]

for x in range(int((csv_width-1)/2)):
    for y in range(csv_hight):
        if (output_csv[y+1][x*2+1]==''):
            break
        output_csv2.append([output_csv[y+1][x*2+1],output_csv[y+1][x*2]])
        

    

with open(r'C:\workspace\python\niconico_v2\ToRapidminer\commentCounter.csv', 'w') as f:
    writer = csv.writer(f)
    writer.writerows(output_csv2)

passimport csv
import pprint
import os
import re

def read_vpos_list():
    with open(r'C:\workspace\python\niconico_v2\ToRapidminer\vpos_list.csv') as f:
        reader = csv.reader(f)
        l = [row for row in reader]

    return l

def judgment_data_type(s):

    repatter=re.compile(r'comment_address_.*')
    result = repatter.search(s)
        
    if (result):
        #列の属性名はcomment_address
        return 'comment_address'
    
    repatter=re.compile(r'comment_counter_.*')
    result = repatter.search(s)
        
    if (result):
        #列の属性名はcomment_counter
        return 'comment_counter'

    repatter=re.compile(r'vpos_.*')
    result = repatter.search(s)
    if (result):
        #列の属性名はvpos
       return 'vpos'

    if (s=='id'):
        return 'id'
    return ''


FILE_DIRECTORY=os.getcwd()+'\\'

input_csv=read_vpos_list()

csv_zokusei_name=input_csv[0]

input_csv=input_csv[1:]
csv_hight=len(input_csv)
csv_width=len(input_csv[0])

#属性名作成
output_csv=[[]]
for name in csv_zokusei_name:
    repatter=re.compile(r'comment_address_.*')
    result = repatter.search(name)
    if (result):
        output_csv[0].append(name)
        continue

    if (name=='id'):
        output_csv[0].append(name)
        continue

    

    repatter=re.compile(r'vpos_(.*)')
    result = repatter.search(name)

    video_id=result.group(1)
    if (result):
        output_csv[0].append('comment_counter_'+video_id)
        continue







for i in range(csv_hight):
    output_csv.append([])

for x in range(csv_width):
    branch = judgment_data_type(csv_zokusei_name[x])

    comment_counter=0
    last_vpos=0
    index_last_vpos=0
    index_now=0

    for y in range(csv_hight):
        if (branch=='comment_address'):
            output_csv[y+1].append(input_csv[y][x])
        
        if (branch=='vpos'):
            if (y==0):
                comment_counter=0
                last_vpos=int(input_csv[0][x])
                index_last_vpos=0
                

            tmpLoopBool=True
            while (tmpLoopBool):
                if (input_csv[y][x]==''):
                    output_csv[y+1].append('')
                    break

                now_vpos=int(input_csv[y][x])

                if (last_vpos + 500 < now_vpos):
                    comment_counter-=1
                    index_last_vpos+=1
                    last_vpos=int(input_csv[index_last_vpos][x])
                else:
                    comment_counter+=1
                    output_csv[y+1].append(str(comment_counter))
                    tmpLoopBool=False

    pass
    

output_csv2=[['comment_address','display_comment_count']]

output_csv2_index=0

tmplist=[[]]

for x in range(int((csv_width-1)/2)):
    for y in range(csv_hight):
        if (output_csv[y+1][x*2+1]==''):
            break
        output_csv2.append([output_csv[y+1][x*2+1],output_csv[y+1][x*2]])
        

    

with open(r'C:\workspace\python\niconico_v2\ToRapidminer\commentCounter.csv', 'w') as f:
    writer = csv.writer(f)
    writer.writerows(output_csv2)

pass

８．４．RapidMiner　Process「020CreateDesplayCounter」

　８．３．から出力したcommentCounter.csvのコメント表示量のデータを元のデータに追加して結果を001data.csvに出力するRapidminerのプロセスである。 以下に配置図と構成を表すXMLを示す。

<?xml version="1.0" encoding="UTF-8"?><process version="9.2.001">
  <context>
    <input>
      <location>../../data/FainalOutputs/YearYowai</location>
    </input>
    <output/>
    <macros/>
  </context>
  <operator activated="true" class="process" compatibility="9.2.001" expanded="true" name="Process">
    <parameter key="logverbosity" value="init"/>
    <parameter key="random_seed" value="2001"/>
    <parameter key="send_mail" value="never"/>
    <parameter key="notification_email" value=""/>
    <parameter key="process_duration_for_mail" value="30"/>
    <parameter key="encoding" value="SYSTEM"/>
    <process expanded="true">
      <operator activated="true" class="read_csv" compatibility="9.2.001" expanded="true" height="68" name="Read CSV" width="90" x="447" y="34">
        <parameter key="csv_file" value="C:\workspace\python\niconico_v2\ToRapidminer\commentCounter.csv"/>
        <parameter key="column_separators" value=","/>
        <parameter key="trim_lines" value="false"/>
        <parameter key="use_quotes" value="true"/>
        <parameter key="quotes_character" value="&quot;"/>
        <parameter key="escape_character" value="\"/>
        <parameter key="skip_comments" value="false"/>
        <parameter key="comment_characters" value="#"/>
        <parameter key="starting_row" value="1"/>
        <parameter key="parse_numbers" value="true"/>
        <parameter key="decimal_character" value="."/>
        <parameter key="grouped_digits" value="false"/>
        <parameter key="grouping_character" value=","/>
        <parameter key="infinity_representation" value=""/>
        <parameter key="date_format" value=""/>
        <parameter key="first_row_as_names" value="true"/>
        <list key="annotations"/>
        <parameter key="time_zone" value="SYSTEM"/>
        <parameter key="locale" value="English (United States)"/>
        <parameter key="encoding" value="SYSTEM"/>
        <parameter key="read_all_values_as_polynominal" value="false"/>
        <list key="data_set_meta_data_information"/>
        <parameter key="read_not_matching_values_as_missings" value="true"/>
        <parameter key="datamanagement" value="double_array"/>
        <parameter key="data_management" value="auto"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve Year" width="90" x="45" y="238">
        <parameter key="repository_entry" value="../../data/FainalOutputs/Year"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve YearYowai" width="90" x="45" y="136">
        <parameter key="repository_entry" value="../../data/FainalOutputs/YearYowai"/>
      </operator>
      <operator activated="true" class="retrieve" compatibility="9.2.001" expanded="true" height="68" name="Retrieve midorikawa" width="90" x="45" y="340">
        <parameter key="repository_entry" value="../../data/FainalOutputs/midorikawa"/>
      </operator>
      <operator activated="true" class="generate_id" compatibility="9.2.001" expanded="true" height="82" name="Generate ID (3)" width="90" x="179" y="187">
        <parameter key="create_nominal_ids" value="false"/>
        <parameter key="offset" value="0"/>
      </operator>
      <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename (2)" width="90" x="313" y="187">
        <parameter key="old_name" value="id"/>
        <parameter key="new_name" value="comment_address"/>
        <list key="rename_additional_attributes"/>
      </operator>
      <operator activated="true" class="set_role" compatibility="9.2.001" expanded="true" height="82" name="Set Role" width="90" x="447" y="187">
        <parameter key="attribute_name" value="comment_address"/>
        <parameter key="target_role" value="regular"/>
        <list key="set_additional_roles"/>
      </operator>
      <operator activated="true" class="concurrency:join" compatibility="9.2.001" expanded="true" height="82" name="Join" width="90" x="581" y="85">
        <parameter key="remove_double_attributes" value="true"/>
        <parameter key="join_type" value="left"/>
        <parameter key="use_id_attribute_as_key" value="false"/>
        <list key="key_attributes">
          <parameter key="comment_address" value="comment_address"/>
        </list>
        <parameter key="keep_both_join_attributes" value="false"/>
      </operator>
      <operator activated="true" class="multiply" compatibility="9.2.001" expanded="true" height="103" name="Multiply" width="90" x="715" y="85"/>
      <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes" width="90" x="849" y="187">
        <parameter key="attribute_filter_type" value="subset"/>
        <parameter key="attribute" value="video_id"/>
        <parameter key="attributes" value="video_id"/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="false"/>
        <parameter key="include_special_attributes" value="false"/>
      </operator>
      <operator activated="true" class="aggregate" compatibility="9.2.001" expanded="true" height="82" name="Aggregate" width="90" x="983" y="187">
        <parameter key="use_default_aggregation" value="false"/>
        <parameter key="attribute_filter_type" value="all"/>
        <parameter key="attribute" value=""/>
        <parameter key="attributes" value=""/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="false"/>
        <parameter key="include_special_attributes" value="false"/>
        <parameter key="default_aggregation_function" value="average"/>
        <list key="aggregation_attributes">
          <parameter key="video_id" value="count"/>
        </list>
        <parameter key="group_by_attributes" value="video_id"/>
        <parameter key="count_all_combinations" value="false"/>
        <parameter key="only_distinct" value="false"/>
        <parameter key="ignore_missings" value="true"/>
      </operator>
      <operator activated="true" class="concurrency:join" compatibility="9.2.001" expanded="true" height="82" name="Join (2)" width="90" x="1117" y="85">
        <parameter key="remove_double_attributes" value="true"/>
        <parameter key="join_type" value="left"/>
        <parameter key="use_id_attribute_as_key" value="false"/>
        <list key="key_attributes">
          <parameter key="video_id" value="video_id"/>
        </list>
        <parameter key="keep_both_join_attributes" value="false"/>
      </operator>
      <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename" width="90" x="1251" y="85">
        <parameter key="old_name" value="count(video_id)"/>
        <parameter key="new_name" value="got_comment_num"/>
        <list key="rename_additional_attributes"/>
      </operator>
      <operator activated="true" class="generate_attributes" compatibility="9.2.001" expanded="true" height="82" name="Generate Attributes" width="90" x="1385" y="85">
        <list key="function_descriptions">
          <parameter key="margin_comment_by_video_length" value="(5/3)*([length]/100)/[got_comment_num]"/>
        </list>
        <parameter key="keep_all" value="true"/>
      </operator>
      <operator activated="true" class="write_csv" compatibility="9.2.001" expanded="true" height="82" name="Write CSV" width="90" x="1519" y="85">
        <parameter key="csv_file" value="C:\freedomTmp\001data.csv"/>
        <parameter key="column_separator" value=","/>
        <parameter key="write_attribute_names" value="true"/>
        <parameter key="quote_nominal_values" value="true"/>
        <parameter key="format_date_attributes" value="true"/>
        <parameter key="append_to_file" value="false"/>
        <parameter key="encoding" value="SYSTEM"/>
      </operator>
      <connect from_op="Read CSV" from_port="output" to_op="Join" to_port="left"/>
      <connect from_op="Retrieve midorikawa" from_port="output" to_op="Generate ID (3)" to_port="example set input"/>
      <connect from_op="Generate ID (3)" from_port="example set output" to_op="Rename (2)" to_port="example set input"/>
      <connect from_op="Rename (2)" from_port="example set output" to_op="Set Role" to_port="example set input"/>
      <connect from_op="Set Role" from_port="example set output" to_op="Join" to_port="right"/>
      <connect from_op="Join" from_port="join" to_op="Multiply" to_port="input"/>
      <connect from_op="Multiply" from_port="output 1" to_op="Join (2)" to_port="left"/>
      <connect from_op="Multiply" from_port="output 2" to_op="Select Attributes" to_port="example set input"/>
      <connect from_op="Select Attributes" from_port="example set output" to_op="Aggregate" to_port="example set input"/>
      <connect from_op="Aggregate" from_port="example set output" to_op="Join (2)" to_port="right"/>
      <connect from_op="Join (2)" from_port="join" to_op="Rename" to_port="example set input"/>
      <connect from_op="Rename" from_port="example set output" to_op="Generate Attributes" to_port="example set input"/>
      <connect from_op="Generate Attributes" from_port="example set output" to_op="Write CSV" to_port="input"/>
      <connect from_op="Write CSV" from_port="through" to_port="result 1"/>
      <portSpacing port="source_input 1" spacing="0"/>
      <portSpacing port="sink_result 1" spacing="0"/>
      <portSpacing port="sink_result 2" spacing="0"/>
    </process>
  </operator>
</process>

８．５．RapidMiner　Process「040AllRemake」

　８．４．で作成した001data.csvから弾幕個数と弾幕面積を求めるRapidminerのプロセスである。以下にオペレータの配置と構成を表すXMLを示す。

<?xml version="1.0" encoding="UTF-8"?><process version="9.2.001">
  <context>
    <input/>
    <output/>
    <macros/>
  </context>
  <operator activated="true" class="process" compatibility="9.2.001" expanded="true" name="Process">
    <parameter key="logverbosity" value="init"/>
    <parameter key="random_seed" value="2001"/>
    <parameter key="send_mail" value="never"/>
    <parameter key="notification_email" value=""/>
    <parameter key="process_duration_for_mail" value="30"/>
    <parameter key="encoding" value="SYSTEM"/>
    <process expanded="true">
      <operator activated="true" class="subprocess" compatibility="9.2.001" expanded="true" height="82" name="Subprocess" width="90" x="45" y="289">
        <process expanded="true">
          <operator activated="true" breakpoints="after" class="read_csv" compatibility="9.2.001" expanded="true" height="68" name="Read CSV (2)" width="90" x="45" y="34">
            <parameter key="csv_file" value="C:\freedomTmp\001data.csv"/>
            <parameter key="column_separators" value=","/>
            <parameter key="trim_lines" value="false"/>
            <parameter key="use_quotes" value="true"/>
            <parameter key="quotes_character" value="&quot;"/>
            <parameter key="escape_character" value="\"/>
            <parameter key="skip_comments" value="false"/>
            <parameter key="comment_characters" value="#"/>
            <parameter key="starting_row" value="1"/>
            <parameter key="parse_numbers" value="true"/>
            <parameter key="decimal_character" value="."/>
            <parameter key="grouped_digits" value="false"/>
            <parameter key="grouping_character" value=","/>
            <parameter key="infinity_representation" value=""/>
            <parameter key="date_format" value=""/>
            <parameter key="first_row_as_names" value="true"/>
            <list key="annotations"/>
            <parameter key="time_zone" value="SYSTEM"/>
            <parameter key="locale" value="English (United States)"/>
            <parameter key="encoding" value="SYSTEM"/>
            <parameter key="read_all_values_as_polynominal" value="false"/>
            <list key="data_set_meta_data_information"/>
            <parameter key="read_not_matching_values_as_missings" value="true"/>
            <parameter key="datamanagement" value="double_array"/>
            <parameter key="data_management" value="auto"/>
          </operator>
          <operator activated="true" class="multiply" compatibility="9.2.001" expanded="true" height="103" name="Multiply (5)" width="90" x="581" y="34"/>
          <operator activated="true" class="remove_duplicates" compatibility="9.2.001" expanded="true" height="103" name="Remove Duplicates (2)" width="90" x="715" y="238">
            <parameter key="attribute_filter_type" value="single"/>
            <parameter key="attribute" value="video_id"/>
            <parameter key="attributes" value=""/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
            <parameter key="treat_missing_values_as_duplicates" value="false"/>
          </operator>
          <operator activated="true" breakpoints="after" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (6)" width="90" x="849" y="238">
            <parameter key="attribute_filter_type" value="subset"/>
            <parameter key="attribute" value="video_id"/>
            <parameter key="attributes" value="|comment_num|genre|length|mylist_counter|title|video_id|view_counter|got_comment_num|margin_comment_by_video_length"/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (6)" width="90" x="983" y="238">
            <parameter key="name" value="allVideo_info"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (20)" width="90" x="715" y="34">
            <parameter key="name" value="allData"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (11)" width="90" x="849" y="34">
            <parameter key="attribute_filter_type" value="single"/>
            <parameter key="attribute" value="video_id"/>
            <parameter key="attributes" value=""/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="remove_duplicates" compatibility="9.2.001" expanded="true" height="103" name="Remove Duplicates" width="90" x="983" y="34">
            <parameter key="attribute_filter_type" value="single"/>
            <parameter key="attribute" value="video_id"/>
            <parameter key="attributes" value=""/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
            <parameter key="treat_missing_values_as_duplicates" value="false"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (19)" width="90" x="1117" y="34">
            <parameter key="name" value="video_id_list"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <connect from_op="Read CSV (2)" from_port="output" to_op="Multiply (5)" to_port="input"/>
          <connect from_op="Multiply (5)" from_port="output 1" to_op="Remember (20)" to_port="store"/>
          <connect from_op="Multiply (5)" from_port="output 2" to_op="Remove Duplicates (2)" to_port="example set input"/>
          <connect from_op="Remove Duplicates (2)" from_port="example set output" to_op="Select Attributes (6)" to_port="example set input"/>
          <connect from_op="Select Attributes (6)" from_port="example set output" to_op="Remember (6)" to_port="store"/>
          <connect from_op="Remember (20)" from_port="stored" to_op="Select Attributes (11)" to_port="example set input"/>
          <connect from_op="Select Attributes (11)" from_port="example set output" to_op="Remove Duplicates" to_port="example set input"/>
          <connect from_op="Remove Duplicates" from_port="example set output" to_op="Remember (19)" to_port="store"/>
          <connect from_op="Remember (19)" from_port="stored" to_port="out 1"/>
          <portSpacing port="source_in 1" spacing="0"/>
          <portSpacing port="sink_out 1" spacing="0"/>
          <portSpacing port="sink_out 2" spacing="0"/>
        </process>
        <description align="left" color="transparent" colored="false" width="126">&amp;#20840;&amp;#12487;&amp;#12540;&amp;#12479;&amp;#12398;&amp;#35501;&amp;#12415;&amp;#36796;&amp;#12415;&amp;#12392;&lt;br/&gt;&amp;#21205;&amp;#30011;&amp;#12398;id&amp;#25277;&amp;#20986;&amp;#12290;&lt;br/&gt;&amp;#19978;&amp;#35352;&amp;#65298;&amp;#12388;&amp;#12398;&lt;br/&gt;&amp;#12510;&amp;#12463;&amp;#12525;&amp;#12408;&amp;#12398;&amp;#30331;&amp;#37682;</description>
      </operator>
      <operator activated="true" class="subprocess" compatibility="9.2.001" expanded="true" height="82" name="Subprocess (2)" width="90" x="45" y="493">
        <process expanded="true">
          <operator activated="true" class="time_series:generate_data_arima" compatibility="9.2.001" expanded="true" height="68" name="Generate Data (8)" width="90" x="112" y="85">
            <parameter key="name_of_new_time_series_attribute" value="arima"/>
            <enumeration key="coefficients_of_the_auto-regressive_terms"/>
            <enumeration key="coefficients_of_the_moving-average_terms"/>
            <parameter key="constant" value="0.0"/>
            <parameter key="standard_deviation_of_the_innovations" value="0.0"/>
            <parameter key="length" value="20000"/>
            <parameter key="use_local_random_seed" value="false"/>
            <parameter key="local_random_seed" value="1992"/>
          </operator>
          <operator activated="true" class="generate_id" compatibility="9.2.001" expanded="true" height="82" name="Generate ID (7)" width="90" x="246" y="85">
            <parameter key="create_nominal_ids" value="false"/>
            <parameter key="offset" value="0"/>
          </operator>
          <operator activated="true" class="set_role" compatibility="9.2.001" expanded="true" height="82" name="Set Role (6)" width="90" x="380" y="85">
            <parameter key="attribute_name" value="id"/>
            <parameter key="target_role" value="regular"/>
            <list key="set_additional_roles"/>
          </operator>
          <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (12)" width="90" x="514" y="85">
            <parameter key="attribute_filter_type" value="single"/>
            <parameter key="attribute" value="id"/>
            <parameter key="attributes" value=""/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="generate_attributes" compatibility="9.2.001" expanded="true" height="82" name="Generate Attributes (10)" width="90" x="648" y="85">
            <list key="function_descriptions">
              <parameter key="id" value="id-1"/>
            </list>
            <parameter key="keep_all" value="true"/>
          </operator>
          <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename (10)" width="90" x="782" y="85">
            <parameter key="old_name" value="id"/>
            <parameter key="new_name" value="my_vpos"/>
            <list key="rename_additional_attributes"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (5)" width="90" x="916" y="85">
            <parameter key="name" value="result"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <connect from_op="Generate Data (8)" from_port="arima" to_op="Generate ID (7)" to_port="example set input"/>
          <connect from_op="Generate ID (7)" from_port="example set output" to_op="Set Role (6)" to_port="example set input"/>
          <connect from_op="Set Role (6)" from_port="example set output" to_op="Select Attributes (12)" to_port="example set input"/>
          <connect from_op="Select Attributes (12)" from_port="example set output" to_op="Generate Attributes (10)" to_port="example set input"/>
          <connect from_op="Generate Attributes (10)" from_port="example set output" to_op="Rename (10)" to_port="example set input"/>
          <connect from_op="Rename (10)" from_port="example set output" to_op="Remember (5)" to_port="store"/>
          <connect from_op="Remember (5)" from_port="stored" to_port="out 1"/>
          <portSpacing port="source_in 1" spacing="0"/>
          <portSpacing port="sink_out 1" spacing="0"/>
          <portSpacing port="sink_out 2" spacing="0"/>
        </process>
        <description align="left" color="transparent" colored="false" width="126">&amp;#32080;&amp;#26524;&amp;#12398;&amp;#20445;&amp;#23384;&amp;#29992;&amp;#12398;&amp;#34920;&amp;#20316;&amp;#25104;&lt;br/&gt;&lt;br&gt;&lt;br&gt;</description>
      </operator>
      <operator activated="true" class="loop_examples" compatibility="9.2.001" expanded="true" height="82" name="Loop Examples" width="90" x="179" y="289">
        <parameter key="iteration_macro" value="example"/>
        <process expanded="true">
          <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro" width="90" x="112" y="34">
            <parameter key="macro" value="getVideo_id"/>
            <parameter key="macro_type" value="data_value"/>
            <parameter key="statistics" value="average"/>
            <parameter key="attribute_name" value="video_id"/>
            <parameter key="example_index" value="%{example}"/>
            <list key="additional_macros"/>
          </operator>
          <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall" width="90" x="112" y="187">
            <parameter key="name" value="allData"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="remove_from_store" value="false"/>
          </operator>
          <operator activated="true" class="filter_examples" compatibility="9.2.001" expanded="true" height="103" name="Filter Examples" width="90" x="246" y="187">
            <parameter key="parameter_expression" value=""/>
            <parameter key="condition_class" value="custom_filters"/>
            <parameter key="invert_filter" value="false"/>
            <list key="filters_list">
              <parameter key="filters_entry_key" value="video_id.equals.%{getVideo_id}"/>
            </list>
            <parameter key="filters_logic_and" value="true"/>
            <parameter key="filters_check_metadata" value="true"/>
          </operator>
          <operator activated="true" class="generate_attributes" compatibility="9.2.001" expanded="true" height="82" name="Generate Attributes" width="90" x="380" y="187">
            <list key="function_descriptions">
              <parameter key="my_vpos" value="floor(vpos/100+0.5)"/>
            </list>
            <parameter key="keep_all" value="true"/>
          </operator>
          <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (2)" width="90" x="514" y="187">
            <parameter key="attribute_filter_type" value="subset"/>
            <parameter key="attribute" value=""/>
            <parameter key="attributes" value="comment_message|display_comment_count|margin_comment_by_video_length|my_vpos"/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="aggregate" compatibility="9.2.001" expanded="true" height="82" name="Aggregate" width="90" x="648" y="187">
            <parameter key="use_default_aggregation" value="false"/>
            <parameter key="attribute_filter_type" value="all"/>
            <parameter key="attribute" value=""/>
            <parameter key="attributes" value=""/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
            <parameter key="default_aggregation_function" value="average"/>
            <list key="aggregation_attributes">
              <parameter key="display_comment_count" value="maximum"/>
            </list>
            <parameter key="group_by_attributes" value="my_vpos"/>
            <parameter key="count_all_combinations" value="false"/>
            <parameter key="only_distinct" value="true"/>
            <parameter key="ignore_missings" value="true"/>
          </operator>
          <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename" width="90" x="782" y="187">
            <parameter key="old_name" value="maximum(display_comment_count)"/>
            <parameter key="new_name" value="count_%{getVideo_id}"/>
            <list key="rename_additional_attributes"/>
          </operator>
          <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (2)" width="90" x="916" y="391">
            <parameter key="name" value="result"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="remove_from_store" value="false"/>
          </operator>
          <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (4)" width="90" x="916" y="187">
            <parameter key="attribute_filter_type" value="subset"/>
            <parameter key="attribute" value="margin_comment_by_video_length"/>
            <parameter key="attributes" value="count_%{getVideo_id}|my_vpos"/>
            <parameter key="use_except_expression" value="false"/>
            <parameter key="value_type" value="attribute_value"/>
            <parameter key="use_value_type_exception" value="false"/>
            <parameter key="except_value_type" value="time"/>
            <parameter key="block_type" value="attribute_block"/>
            <parameter key="use_block_type_exception" value="false"/>
            <parameter key="except_block_type" value="value_matrix_row_start"/>
            <parameter key="invert_selection" value="false"/>
            <parameter key="include_special_attributes" value="false"/>
          </operator>
          <operator activated="true" class="delay" compatibility="9.2.001" expanded="true" height="103" name="Delay (2)" width="90" x="1050" y="238">
            <parameter key="delay" value="none"/>
            <parameter key="delay_amount" value="1000"/>
            <parameter key="min_delay_amount" value="0"/>
            <parameter key="max_delay_amount" value="1000"/>
          </operator>
          <operator activated="true" class="concurrency:join" compatibility="9.2.001" expanded="true" height="82" name="Join" width="90" x="1184" y="238">
            <parameter key="remove_double_attributes" value="false"/>
            <parameter key="join_type" value="right"/>
            <parameter key="use_id_attribute_as_key" value="false"/>
            <list key="key_attributes">
              <parameter key="my_vpos" value="my_vpos"/>
            </list>
            <parameter key="keep_both_join_attributes" value="false"/>
          </operator>
          <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (3)" width="90" x="1318" y="238">
            <parameter key="name" value="result"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="store_which" value="1"/>
            <parameter key="remove_from_process" value="true"/>
          </operator>
          <connect from_port="example set" to_op="Extract Macro" to_port="example set"/>
          <connect from_op="Extract Macro" from_port="example set" to_port="example set"/>
          <connect from_op="Recall" from_port="result" to_op="Filter Examples" to_port="example set input"/>
          <connect from_op="Filter Examples" from_port="example set output" to_op="Generate Attributes" to_port="example set input"/>
          <connect from_op="Generate Attributes" from_port="example set output" to_op="Select Attributes (2)" to_port="example set input"/>
          <connect from_op="Select Attributes (2)" from_port="example set output" to_op="Aggregate" to_port="example set input"/>
          <connect from_op="Aggregate" from_port="example set output" to_op="Rename" to_port="example set input"/>
          <connect from_op="Rename" from_port="example set output" to_op="Select Attributes (4)" to_port="example set input"/>
          <connect from_op="Recall (2)" from_port="result" to_op="Delay (2)" to_port="through 2"/>
          <connect from_op="Select Attributes (4)" from_port="example set output" to_op="Delay (2)" to_port="through 1"/>
          <connect from_op="Delay (2)" from_port="through 1" to_op="Join" to_port="left"/>
          <connect from_op="Delay (2)" from_port="through 2" to_op="Join" to_port="right"/>
          <connect from_op="Join" from_port="join" to_op="Remember (3)" to_port="store"/>
          <portSpacing port="source_example set" spacing="0"/>
          <portSpacing port="sink_example set" spacing="0"/>
          <portSpacing port="sink_output 1" spacing="0"/>
        </process>
        <description align="center" color="transparent" colored="false" width="126">&amp;#12467;&amp;#12513;&amp;#12531;&amp;#12488;&amp;#34920;&amp;#31034;&amp;#37327;&amp;#12398;&lt;br/&gt;&amp;#12464;&amp;#12521;&amp;#12501;&amp;#12398;&amp;#34920;&amp;#29983;&amp;#25104;&lt;br/&gt;</description>
      </operator>
      <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (7)" width="90" x="313" y="34">
        <parameter key="name" value="result"/>
        <parameter key="io_object" value="ExampleSet"/>
        <parameter key="remove_from_store" value="false"/>
      </operator>
      <operator activated="true" breakpoints="after" class="replace_missing_values" compatibility="9.2.001" expanded="true" height="103" name="Replace Missing Values (2)" width="90" x="447" y="34">
        <parameter key="return_preprocessing_model" value="false"/>
        <parameter key="create_view" value="false"/>
        <parameter key="attribute_filter_type" value="all"/>
        <parameter key="attribute" value=""/>
        <parameter key="attributes" value=""/>
        <parameter key="use_except_expression" value="false"/>
        <parameter key="value_type" value="attribute_value"/>
        <parameter key="use_value_type_exception" value="false"/>
        <parameter key="except_value_type" value="time"/>
        <parameter key="block_type" value="attribute_block"/>
        <parameter key="use_block_type_exception" value="false"/>
        <parameter key="except_block_type" value="value_matrix_row_start"/>
        <parameter key="invert_selection" value="false"/>
        <parameter key="include_special_attributes" value="false"/>
        <parameter key="default" value="zero"/>
        <list key="columns"/>
      </operator>
      <operator activated="true" class="subprocess" compatibility="9.2.001" expanded="true" height="68" name="Subprocess (3)" width="90" x="715" y="85">
        <process expanded="true">
          <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (8)" width="90" x="112" y="85">
            <parameter key="name" value="video_id_list"/>
            <parameter key="io_object" value="ExampleSet"/>
            <parameter key="remove_from_store" value="false"/>
          </operator>
          <operator activated="true" class="subprocess" compatibility="9.2.001" expanded="true" height="68" name="Subprocess (4)" width="90" x="179" y="238">
            <process expanded="true">
              <operator activated="true" class="time_series:generate_data_arima" compatibility="9.2.001" expanded="true" height="68" name="Generate Data (3)" width="90" x="112" y="85">
                <parameter key="name_of_new_time_series_attribute" value="arima"/>
                <enumeration key="coefficients_of_the_auto-regressive_terms"/>
                <enumeration key="coefficients_of_the_moving-average_terms"/>
                <parameter key="constant" value="0.0"/>
                <parameter key="standard_deviation_of_the_innovations" value="0.0"/>
                <parameter key="length" value="20000"/>
                <parameter key="use_local_random_seed" value="false"/>
                <parameter key="local_random_seed" value="1992"/>
              </operator>
              <operator activated="true" class="generate_attributes" compatibility="9.2.001" expanded="true" height="82" name="Generate Attributes (4)" width="90" x="246" y="85">
                <list key="function_descriptions">
                  <parameter key="DanmakuCounter" value="0"/>
                  <parameter key="DanmakuArea" value="0"/>
                  <parameter key="video_id" value="&quot;unknown&quot;"/>
                  <parameter key="threshold" value="0"/>
                </list>
                <parameter key="keep_all" value="true"/>
              </operator>
              <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (9)" width="90" x="380" y="85">
                <parameter key="name" value="resultOfDanmaku"/>
                <parameter key="io_object" value="ExampleSet"/>
                <parameter key="store_which" value="1"/>
                <parameter key="remove_from_process" value="true"/>
              </operator>
              <connect from_op="Generate Data (3)" from_port="arima" to_op="Generate Attributes (4)" to_port="example set input"/>
              <connect from_op="Generate Attributes (4)" from_port="example set output" to_op="Remember (9)" to_port="store"/>
              <portSpacing port="source_in 1" spacing="0"/>
              <portSpacing port="sink_out 1" spacing="0"/>
            </process>
            <description align="left" color="transparent" colored="false" width="126">&amp;#24382;&amp;#24149;&amp;#12398;&amp;#20491;&amp;#25968;&amp;#12392;&lt;br/&gt;&amp;#24382;&amp;#24149;&amp;#12398;&amp;#38754;&amp;#31309;&amp;#12434;&amp;#12398;&amp;#34920;&amp;#12434;&lt;br/&gt;&amp;#20316;&amp;#25104;</description>
          </operator>
          <operator activated="true" class="loop_examples" compatibility="9.2.001" expanded="true" height="82" name="Loop Examples (2)" width="90" x="380" y="85">
            <parameter key="iteration_macro" value="example"/>
            <process expanded="true">
              <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro (2)" width="90" x="112" y="34">
                <parameter key="macro" value="getVideo_id"/>
                <parameter key="macro_type" value="data_value"/>
                <parameter key="statistics" value="average"/>
                <parameter key="attribute_name" value="video_id"/>
                <parameter key="example_index" value="%{example}"/>
                <list key="additional_macros"/>
              </operator>
              <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (13)" width="90" x="112" y="136">
                <parameter key="name" value="allVideo_info"/>
                <parameter key="io_object" value="ExampleSet"/>
                <parameter key="remove_from_store" value="false"/>
              </operator>
              <operator activated="true" class="filter_examples" compatibility="9.2.001" expanded="true" height="103" name="Filter Examples (3)" width="90" x="246" y="136">
                <parameter key="parameter_expression" value=""/>
                <parameter key="condition_class" value="custom_filters"/>
                <parameter key="invert_filter" value="false"/>
                <list key="filters_list">
                  <parameter key="filters_entry_key" value="video_id.equals.%{getVideo_id}"/>
                </list>
                <parameter key="filters_logic_and" value="true"/>
                <parameter key="filters_check_metadata" value="true"/>
              </operator>
              <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro (4)" width="90" x="380" y="136">
                <parameter key="macro" value="correctionValue"/>
                <parameter key="macro_type" value="data_value"/>
                <parameter key="statistics" value="average"/>
                <parameter key="attribute_name" value="margin_comment_by_video_length"/>
                <parameter key="example_index" value="1"/>
                <list key="additional_macros"/>
              </operator>
              <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro (5)" width="90" x="514" y="136">
                <parameter key="macro" value="gotCommentNum"/>
                <parameter key="macro_type" value="data_value"/>
                <parameter key="statistics" value="average"/>
                <parameter key="attribute_name" value="got_comment_num"/>
                <parameter key="example_index" value="1"/>
                <list key="additional_macros"/>
              </operator>
              <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro (6)" width="90" x="648" y="136">
                <parameter key="macro" value="commentNum"/>
                <parameter key="macro_type" value="data_value"/>
                <parameter key="statistics" value="average"/>
                <parameter key="attribute_name" value="comment_num"/>
                <parameter key="example_index" value="1"/>
                <list key="additional_macros"/>
              </operator>
              <operator activated="true" class="generate_macro" compatibility="9.2.001" expanded="true" height="82" name="Generate Macro (2)" width="90" x="782" y="136">
                <list key="function_descriptions">
                  <parameter key="threshold" value="if(parse(%{gotCommentNum})&lt;parse(%{commentNum}),25/parse(%{correctionValue}),25)"/>
                </list>
                <description align="center" color="transparent" colored="false" width="126">&amp;#24382;&amp;#24149;&amp;#12398;&amp;#21028;&amp;#23450;&amp;#20516;&amp;#12434;&amp;#20316;&amp;#12427;</description>
              </operator>
              <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (10)" width="90" x="380" y="289">
                <parameter key="name" value="result"/>
                <parameter key="io_object" value="ExampleSet"/>
                <parameter key="remove_from_store" value="false"/>
              </operator>
              <operator activated="true" class="select_attributes" compatibility="9.2.001" expanded="true" height="82" name="Select Attributes (13)" width="90" x="514" y="289">
                <parameter key="attribute_filter_type" value="single"/>
                <parameter key="attribute" value="count_%{getVideo_id}"/>
                <parameter key="attributes" value=""/>
                <parameter key="use_except_expression" value="false"/>
                <parameter key="value_type" value="attribute_value"/>
                <parameter key="use_value_type_exception" value="false"/>
                <parameter key="except_value_type" value="time"/>
                <parameter key="block_type" value="attribute_block"/>
                <parameter key="use_block_type_exception" value="false"/>
                <parameter key="except_block_type" value="value_matrix_row_start"/>
                <parameter key="invert_selection" value="false"/>
                <parameter key="include_special_attributes" value="false"/>
              </operator>
              <operator activated="true" class="rename" compatibility="9.2.001" expanded="true" height="82" name="Rename (2)" width="90" x="648" y="289">
                <parameter key="old_name" value="count_%{getVideo_id}"/>
                <parameter key="new_name" value="count"/>
                <list key="rename_additional_attributes"/>
              </operator>
              <operator activated="true" class="generate_attributes" compatibility="9.2.001" expanded="true" height="82" name="Generate Attributes (5)" width="90" x="782" y="289">
                <list key="function_descriptions">
                  <parameter key="count" value="if(count&gt;=25,count,0)"/>
                </list>
                <parameter key="keep_all" value="true"/>
              </operator>
              <operator activated="true" class="generate_macro" compatibility="9.2.001" expanded="true" height="82" name="Generate Macro" width="90" x="916" y="289">
                <list key="function_descriptions">
                  <parameter key="danmakuNum" value="0"/>
                  <parameter key="CountingFlag" value="0"/>
                  <parameter key="DanmakuAreaNum" value="0"/>
                </list>
                <description align="center" color="transparent" colored="false" width="126">&amp;#22793;&amp;#25968;&amp;#21021;&amp;#26399;&amp;#21270;</description>
              </operator>
              <operator activated="true" class="loop_examples" compatibility="9.2.001" expanded="true" height="82" name="Loop Examples (3)" width="90" x="1050" y="289">
                <parameter key="iteration_macro" value="example2"/>
                <process expanded="true">
                  <operator activated="true" class="extract_macro" compatibility="9.2.001" expanded="true" height="68" name="Extract Macro (3)" width="90" x="112" y="34">
                    <parameter key="macro" value="tn"/>
                    <parameter key="macro_type" value="data_value"/>
                    <parameter key="statistics" value="average"/>
                    <parameter key="attribute_name" value="count"/>
                    <parameter key="example_index" value="%{example2}"/>
                    <list key="additional_macros"/>
                  </operator>
                  <operator activated="true" class="branch" compatibility="9.2.001" expanded="true" height="82" name="Branch" width="90" x="246" y="187">
                    <parameter key="condition_type" value="expression"/>
                    <parameter key="expression" value="parse(%{tn})&gt;=parse(%{threshold})"/>
                    <parameter key="io_object" value="ANOVAMatrix"/>
                    <parameter key="return_inner_output" value="false"/>
                    <process expanded="true">
                      <operator activated="true" class="generate_macro" compatibility="9.2.001" expanded="true" height="82" name="Generate Macro (3)" width="90" x="179" y="34">
                        <list key="function_descriptions">
                          <parameter key="danmakuNum" value="if(parse(%{CountingFlag})==0,parse(%{danmakuNum})+1,parse(%{danmakuNum}))"/>
                          <parameter key="DanmakuAreaNum" value="parse(%{DanmakuAreaNum})+parse(%{tn})"/>
                        </list>
                      </operator>
                      <operator activated="true" class="set_macro" compatibility="9.2.001" expanded="true" height="82" name="Set Macro" width="90" x="313" y="34">
                        <parameter key="macro" value="CountingFlag"/>
                        <parameter key="value" value="1"/>
                      </operator>
                      <connect from_op="Generate Macro (3)" from_port="through 1" to_op="Set Macro" to_port="through 1"/>
                      <portSpacing port="source_condition" spacing="0"/>
                      <portSpacing port="source_input 1" spacing="0"/>
                      <portSpacing port="sink_input 1" spacing="0"/>
                    </process>
                    <process expanded="true">
                      <operator activated="true" class="set_macro" compatibility="9.2.001" expanded="true" height="82" name="Set Macro (2)" width="90" x="45" y="34">
                        <parameter key="macro" value="CountingFlag"/>
                        <parameter key="value" value="0"/>
                      </operator>
                      <connect from_port="condition" to_op="Set Macro (2)" to_port="through 1"/>
                      <portSpacing port="source_condition" spacing="0"/>
                      <portSpacing port="source_input 1" spacing="0"/>
                      <portSpacing port="sink_input 1" spacing="0"/>
                    </process>
                  </operator>
                  <connect from_port="example set" to_op="Extract Macro (3)" to_port="example set"/>
                  <connect from_op="Extract Macro (3)" from_port="example set" to_port="example set"/>
                  <portSpacing port="source_example set" spacing="0"/>
                  <portSpacing port="sink_example set" spacing="0"/>
                  <portSpacing port="sink_output 1" spacing="0"/>
                </process>
                <description align="center" color="transparent" colored="false" width="126">&amp;#24382;&amp;#24149;&amp;#12398;&amp;#20491;&amp;#25968;&amp;#12392;&amp;#38754;&amp;#31309;&amp;#12434;&amp;#27714;&amp;#12417;&amp;#12427;&lt;br/&gt;</description>
              </operator>
              <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (11)" width="90" x="1050" y="442">
                <parameter key="name" value="resultOfDanmaku"/>
                <parameter key="io_object" value="ExampleSet"/>
                <parameter key="remove_from_store" value="false"/>
              </operator>
              <operator activated="true" class="set_data" compatibility="9.2.001" expanded="true" height="82" name="Set Data" width="90" x="1184" y="442">
                <parameter key="example_index" value="%{example}"/>
                <parameter key="count_backwards" value="false"/>
                <parameter key="attribute_name" value="DanmakuCounter"/>
                <parameter key="value" value="%{danmakuNum}"/>
                <list key="additional_values">
                  <parameter key="DanmakuArea" value="%{DanmakuAreaNum}"/>
                  <parameter key="video_id" value="%{getVideo_id}"/>
                  <parameter key="threshold" value="%{threshold}"/>
                </list>
              </operator>
              <operator activated="true" class="remember" compatibility="9.2.001" expanded="true" height="68" name="Remember (8)" width="90" x="1318" y="442">
                <parameter key="name" value="resultOfDanmaku"/>
                <parameter key="io_object" value="ExampleSet"/>
                <parameter key="store_which" value="1"/>
                <parameter key="remove_from_process" value="true"/>
              </operator>
              <connect from_port="example set" to_op="Extract Macro (2)" to_port="example set"/>
              <connect from_op="Extract Macro (2)" from_port="example set" to_port="example set"/>
              <connect from_op="Recall (13)" from_port="result" to_op="Filter Examples (3)" to_port="example set input"/>
              <connect from_op="Filter Examples (3)" from_port="example set output" to_op="Extract Macro (4)" to_port="example set"/>
              <connect from_op="Extract Macro (4)" from_port="example set" to_op="Extract Macro (5)" to_port="example set"/>
              <connect from_op="Extract Macro (5)" from_port="example set" to_op="Extract Macro (6)" to_port="example set"/>
              <connect from_op="Extract Macro (6)" from_port="example set" to_op="Generate Macro (2)" to_port="through 1"/>
              <connect from_op="Recall (10)" from_port="result" to_op="Select Attributes (13)" to_port="example set input"/>
              <connect from_op="Select Attributes (13)" from_port="example set output" to_op="Rename (2)" to_port="example set input"/>
              <connect from_op="Rename (2)" from_port="example set output" to_op="Generate Attributes (5)" to_port="example set input"/>
              <connect from_op="Generate Attributes (5)" from_port="example set output" to_op="Generate Macro" to_port="through 1"/>
              <connect from_op="Generate Macro" from_port="through 1" to_op="Loop Examples (3)" to_port="example set"/>
              <connect from_op="Recall (11)" from_port="result" to_op="Set Data" to_port="example set input"/>
              <connect from_op="Set Data" from_port="example set output" to_op="Remember (8)" to_port="store"/>
              <portSpacing port="source_example set" spacing="0"/>
              <portSpacing port="sink_example set" spacing="0"/>
              <portSpacing port="sink_output 1" spacing="0"/>
            </process>
            <description align="left" color="transparent" colored="false" width="126">&amp;#19968;&amp;#12388;&amp;#19968;&amp;#12388;&amp;#12398;&amp;#21205;&amp;#30011;&amp;#12395;&amp;#12388;&amp;#12356;&amp;#12390;&amp;#20966;&amp;#29702;&lt;br/&gt;</description>
          </operator>
          <connect from_op="Recall (8)" from_port="result" to_op="Loop Examples (2)" to_port="example set"/>
          <portSpacing port="source_in 1" spacing="0"/>
          <portSpacing port="sink_out 1" spacing="0"/>
        </process>
        <description align="center" color="transparent" colored="false" width="126">&amp;#24382;&amp;#24149;&amp;#12398;&amp;#38754;&amp;#31309;&amp;#12392;&amp;#20491;&amp;#25968;&amp;#12434;&amp;#35336;&amp;#31639;&lt;br/&gt;</description>
      </operator>
      <operator activated="true" class="recall" compatibility="9.2.001" expanded="true" height="68" name="Recall (12)" width="90" x="849" y="85">
        <parameter key="name" value="resultOfDanmaku"/>
        <parameter key="io_object" value="ExampleSet"/>
        <parameter key="remove_from_store" value="false"/>
      </operator>
      <connect from_op="Subprocess" from_port="out 1" to_op="Loop Examples" to_port="example set"/>
      <connect from_op="Recall (7)" from_port="result" to_op="Replace Missing Values (2)" to_port="example set input"/>
      <connect from_op="Replace Missing Values (2)" from_port="example set output" to_port="result 1"/>
      <connect from_op="Recall (12)" from_port="result" to_port="result 2"/>
      <portSpacing port="source_input 1" spacing="0"/>
      <portSpacing port="sink_result 1" spacing="0"/>
      <portSpacing port="sink_result 2" spacing="0"/>
      <portSpacing port="sink_result 3" spacing="0"/>
    </process>
  </operator>
</process>