メインサイト
 アイマス動画発掘サイト『ニコマスchガイド』

ニコニコ動画のアイドルマスター動画を独自のジャンルとキーワードで検索できる総合カタログサイトです。ログイン不要の再生にも対応。
ニコマス急上昇ワード

設置方法
NEW ENTRIES
CATEGORIES
拍手ボタンによるおススメ
ARCHIVES
LINKS
Calendar
Sun Mon Tue Wed Thu Fri Sat
1234567
891011121314
15161718192021
22232425262728
2930     
<< September 2019 >>
PROFILE
OTHERS
 
ニコニコ動画にある”アイドルマスター”タグ付き動画に付けられたコメントを集計・加工してできた色々(powered by ニコマスchガイド)

ニコマスサーチ新着動画追加再開のお知らせ
自動更新用PCですが、故障したのが電源だったので手持ちの電源を使って延命措置を図りました。

こんな状態で動かしてます。
PC

幸いディスクの方はノーダメージだったんですが、バックアップを取っていなかったので一通りバックアップ。

現在データは通常通りに戻っています。

また、新着動画が1週間くらい前から表示されなくなっていましたが、こちらも修正しました。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 20:20 | comments(0) | trackbacks(0) |
ニコマスサーチの連想検索について
ニコマスサーチのヘルプがあまりうまく機能しなかったので、ヘルプもblogで代用しようかなと。

ニコマスサーチの連想検索、というのは現在「キーワード検索」という名前で公開している画面のことですが、これがどういうものなのかということを、例を交えて説明したいと思います。

例えばこの動画を見て、もっとやよいの動画をみたいなーと思った時。


通常のキーワード検索では、「アイドルマスター やよい」で検索します。
ニコニコ動画で検索して、結果が4,535件だったとして、これで希望通りではないですよね。

そこで件数を減らすために、通常のキーワード検索では検索語を増やします。
例えば「アイドルマスター やよい やよ癒し」のように。

これで201件なので、なんとか期待した結果が得られそうです。

ところでこの動画には「やよ癒し」と近い意味のタグ「やよいゾーン」が付けられています。
この動画の場合はたまたま両方のタグが付いていましたが、動画によってはどちらかしか付いていない場合があります。

「やよいゾーン」は知っていたけど「やよ癒し」は知らなかった、という場合。
適切な検索語をあらかじめ知っていなければ、通常のキーワード検索は無力だということです。

連想検索では、「やよい」というキーワードを選択すると、次にどの言葉で検索したら結果が絞り込めるかを提示します。
だから、どんな言葉で検索したら自分が期待した結果になるかを自分で想像しなくて良いわけです。

どの言葉で検索したら結果をうまく絞り込めるかというシミュレーションは、連想検索が先にしてくれています。
あとは、自分が欲しい情報に近いキーワードを選ぶだけです。


web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 22:50 | comments(0) | trackbacks(0) |
ニコマスサーチ新着動画追加一時休止のお知らせ
自動更新に使用していたPCが故障したっぽいのでしばらく新着動画の検索追加は休止します。

データ取得はこのPCに頼ってただけに厳しいなぁ。

皆さんもPCのバックアップには気をつけましょう。
つーかハードウェア故障に対応できるような環境は個人レベルではやり過ぎのような気もするけど。


ちなみに自動更新用PCは24時間稼働でマシンスペックはそんなにいらないので、中古で1万円前後で買えるスリムデスクトップあたりを基準にしてます。
IBMなんか狙い目かと。
消費電力も少ないに越したことないんですが、丁度該当する機種はPentium4だったり。


う〜ん。余計な作業が増えてしまった。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
| ニコマスサーチ | 22:59 | comments(0) | trackbacks(0) |
最近のニコマスサーチの不具合情報
動画見ていただき、ありがとうございます。
約1割の方がこっちにも飛んできてくださったようです。

えーと、ネタ☆MAD動画の視聴者コメントキーワード、出し直しました。

視聴者コメントキーワード一覧
《CSV形式》Excel、OpenOffice等をご利用でない方は、CSV形式対応のフリーソフト、ExcelViewerなどを使ってください。

その内修正版をHPの方に載せる予定です。


ここ最近調整に失敗していくつか不具合が出ていたのでまとめてご報告。

◎8月20日の機能追加後、9月3日まで、ダイレクト検索を行った際にページ切り替えできなくなっていました。
◎新着動画の自動更新が8月21、22日は失敗していました。
◎8月19日〜24日まで、コメントキーワードが文字化けしていました。
◎8月27日まで、一部の動画の検索結果が正しく表示されない問題がありました。
◎新着動画の自動更新が9月3日〜6日の間されていませんでした。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:56 | comments(0) | trackbacks(0) |
ニコマスサーチ機能追加
本日キーワード検索のデータを最新に更新しました。
47,909動画中44,393動画がキーワード検索可能です。(カバー率92.7%)


ニコマスサーチのキーワード検索の使い道としては、興味のある動画の発見・発掘を目的に使っていただければと思います。
ニコニコ動画の登録タグ検索は、そのものずばりを検索するのは得意ですが(なので、シリーズものなどを検索するには登録タグを使っていただければ良いのですが)、ジャンルで表しにくいものを探すには良いと思います。

たとえば、「カオス」→「シュール」でこんな動画が検索できたりします。




それでは本題。
また少し機能を追加しました。

★新着動画を毎日追加
★トップページに「はてなブックマーク「idolm@ster」注目エントリー」と「2ちゃんねる アイドルマスタースレッド」のリンクを追加
★関連動画検索で、検索した動画のキーワードを表示



新着動画検索の処理を自動化することができたので、毎日17時頃に、その日の午前中までにアップされた動画の検索に対応可能になりました。


注目エントリーはニコニコ以外のアイマス情報をフォローするつもりで付けたのですが、その点ではあまりうまくいっていないですね。
2ちゃんねるはまずデータを取得するのが難しかったです。今回はスレッドタイトル検索のRSSを提供しているstreaming.2chを参照させていただいています。youtube板とギャルゲー板のみです。
こちらもスレッド作成順でしか取得できないので、あまり意味なかったかも。

いずれにしろ、全動画+動画を取り上げた全ブログ+新着動画+ニコマス系主要HP+はてな・ヤフーブックマークへのリンクに加えてアイマス関係ブログと2ちゃんねるスレッドへリンクを張ったので、これでほぼ網羅できたのではないかと思います。

特に重宝しているのが「はてな」の各種サービスですね。
ニコマスサーチは動画へのコメントをはてなブックマークから引っ張ってきているので、専用にコメントを入力してもらう必要がなくて色々便利です。
他のサイトもRSSやJSONP形式でデータを配信してくださると連携がしやすくなります。

ニコマスサーチはID検索・キーワード検索共JSONP形式でUPしているので、他のサイトでもデータを参照することができます。



最後に、サイト立ち上げ当初から存在していた動画に関するキーワードのデータですが、今回やっと表示することにしました。
役に立つかわかりませんが。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:59 | comments(0) | trackbacks(0) |
キーワードリスト公開
先にニコマスサーチ更新情報。
本日、類似動画検索とキーワード検索を08月07日02:38までのデータに更新しました。


前回、データ取得を自前で行うように調整を行いました。
これまで「アイドルマスター全動画データベース」にある動画を対象としていました。

ニコマスサーチ単独ではそれでもあまり問題は無いのですが、他のサイトとの連動を考えると最新データの重要性が増してきたのが原因です。
ニコマスサーチを更新するのに必要なのは動画IDだけなので、新着から拾ってくる手間はたいしたことがないというのもあります。

データベースのほうは引き続き新着でない動画の追加や、各種件数・登録タグなどの分析用データとして使わせていただきます。



では本題。
ニコマスサーチオープン時点から、各動画には特徴語データがついていまして、キーワード検索はこのデータを加工・集計して作成しているのですが、分析するに当たって一覧表にまとめたものを、今回より配布データに追加することにしました。

wordlist.csv

登録タグと比べてみても面白いのかなと思います。
と言うか、このブログのタイトルからすればもっと自分で分析結果を公開すべきなんですが。

wordlist.zip
12.2MB(展開後wordlist.csv 28.7MB)

以下、ファイルの説明。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:48 | comments(0) | trackbacks(0) |
ニコマスサーチ(β)スタート
キーワード検索の調整が大体終わったので、β版スタートです。

α版との一番の違いは、限定的ですがキーワード検索ができるようになったことです。
これについては過去のブログで説明しているので、その他の機能追加について。


検索結果の1画面での表示数が6動画になりました。
”<”・”>”で前・次のページに移ります。

検索結果にを付けました。
このアイコンをクリックすると、はてなブックマークのコメントをその場で見ることができます。

右サイドバーのアイドルマスタータグ新着動画リストがサムネイル付のスライドショー表示になりました。
データは「ニコニコ動画 俺様用RSS(※)」を使用させていただいています。
※提供が中断したためニコRSSに変更になりました。


主な変更はそれくらいですね。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:25 | comments(0) | trackbacks(0) |
キーワード検索実験中
久しぶりにまじめにアルゴリズム考えたような気がする。

えと、ニコマスサーチがちょっと・・・というか大きく変わって、キーワード検索が付きました。

これで晴れて予定していた2大機能が実装されて、ようやく使えるサイトになったのではないかと思うのですが。
是非使ってください。
そして、感想や意見いただけるとうれしいです。

■元データ

このブログの最初の方で書いたと思うんですが、ニコマスサーチを作ろうと思ったきっかけは、どうにも発掘しきれない動画があるということです。

−ランキングは数字が取れないと載らない
ランキングを否定するわけではないですが、ランキング頼りになってしまうと商業作品と同じ問題が生じる懸念があります。(作者が数字を気にして作る/知名度のない作品が埋もれる/作品を評価する基準が固定されてしまう、など)
それに、ランキングは既に作られている方がいましたので。

−登録タグは、特定のジャンルを探すには向いているが、あいまいな表現が苦手

−マイリストは作成者によって千差万別

−タイトルや投稿者文は作者によっては動画と関係ないことが書かれている

それで、最後に残った視聴者コメントを使った動画検索サイトを作ることにしました。


■登録タグ検索との違い

ニコマスサーチのキーワード検索がどう有効かという事を説明するために、登録タグと視聴者コメントのキーワードの違いを見てみます。

<登録タグ>
主にジャンルに関する言葉。
<視聴者コメント>
意見、感想、突っ込み、メッセージ。その他コメントアート、歌詞など。

登録タグには「iM@SコラボPV」というのがありますが、視聴者コメントで iM@SコラボPVと書く人はまれなので、ニコマスサーチでは出てきません。
逆に、キーワード検索のトップに表示されている「ダンス」や「鳥肌」というキーワードは、登録タグでは通常付けられない言葉です。

キーワード検索の「鳥肌」→「泣き」は登録タグの「泣けるアイマス」に対応するかと思いますが、「鳥肌」→「きれい」には対応するタグがありません。

今回ようやくそういう、今までなかったものが提供できましたので、自分としてはうれしいですね。



web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:59 | comments(0) | trackbacks(0) |
β版への道は険しい
 ニコマスサーチオープンから2ヶ月以上経ち、ここしばらくはβ版にアップデートすべくデータ解析を繰り返していたんですが、未だ良い結果が出ず。

MSN相談箱 相談党7月
 ところでMSN相談箱の検索がニコマスサーチと同じタイプのデータ解析をしているというニュースを見て「相談党」というくだらないプロモーションの存在は知っていたんですが、久しぶりに見てみたらこんなことになってました。
 DoーDai法案というのはどうかと思いますが、何気にもやし法案が2番だったりして、こちらは一般層からも支持を得ているようで。しめしめというか、なんだか。

 ちなみに投票の仕方が物凄くわかりづらいですが、[★みんなの提案を見る]→[賛成数順で並び替え]→[投票する]で投票ボタンとコメントの表示ができます。



 いろいろとチューニングを行って分かったことは、現在の関連動画結果の精度は、単一パラメータで出している分にはかなり高精度っていうことですね。
 データの集計方法や解析パラメータを調整してみても、全体の結果の精度を今以上に高くするのは難しそうです。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
続きを読む >>
| ニコマスサーチ | 23:26 | comments(0) | trackbacks(0) |
コメントで検索は無理でした
タイトルの通りで、前回シンクロ率でコメント検索してみましたけども、特定の言葉で動画検索してみようとしてもまったくうまく行かず、ネタが作れませんでした。
もうこのブログのタイトル変えようかと。。。


それはともかく、α2で関連動画検索の精度が向上したので、今回はそのあたりをご報告。


4日0時頃、データを6/27までのものに更新しました。
動画リストを配布されているAOI-CATさんありがとうございます。
次の7/3までのデータは火曜日までにUPします。

全データをzipでパックにしたファイルの配布を開始しました。
http://nicomas.main.jp/filedl/nicomassearch0627でダウンロードできます。

そして5日0時頃、被参照リンク表示を追加。
正直こっちの結果はまだ微妙です。

被参照率(その動画が1つでも別の動画の関連動画上位20位までに出てくる率)は、以前は60%程度でしたが、α2になって99%くらいになりました。
今まではコメント数の多い動画が有利になってしまう状況にあったのですが、それが改善されたということです。

具体的には、コメント数は20程度でも場合によって正しい結果が出るようになりました。
マイリスト数で言うと一桁の動画も結果として出てくるようになったということです。


ただ、あまりに強力すぎて、前以上に特定の単語に反応しやすくなってしまい、そのために関係ないような動画も混じってしまっています。
このあたりは単語の精度を上げればもう少しなんとかなるかと思っているのですが。

どちらにしろ、コメントを元に関連動画を検索しているので、複数のテーマが混じった動画なんかは宿命的に結果がおかしくなります。

その点登録タグのような確実な検索方法は外しが少ないですよね。

こればっかりは止むを得ない。

関連度の高い動画がなくなった後の検索結果もばらつきが酷いのは改善の余地ありですね。


あと重要な点としては、今回特徴語重視ということで、頻出語であるアイドル名はほぼ関連度の算出から無視されてしまっています。
なので、例えばノーマルPVやコミュ動画の場合、同じアイドルの動画よりも、同じ曲・コミュの動画が出てきます。
こちらも現状はどうしようもない感じ。


そんなわけでニッチな動画の方はざっくざくな感じです。
料理とか演奏してみたとか。

有名動画の場合は、派生作品が出てくる率が高くなりました。
その点では新たな発見がありましたね。未来派作品など。


まあ、とにかくデータ件数多くてデータ作成に時間かかってます。

web拍手 by FC2他の人にもおすすめの記事だと思ったら押してください。左の記事ランクに反映されます。私信の送信にも使えます。
| ニコマスサーチ | 23:55 | comments(0) | trackbacks(0) |