【自然言語処理】BM25 - tf-idfの進化系の実践類似度分析【Elasticsearch への道②】#085 #VRアカデミア

高評価: 310件

再生: 9,413回

公開日: 2020年12月11日

▼テーマ
Elasticsearch でも実践的に利用されている BM25 の紹介です。
数式は複雑に見えますが、 tf-idf を発展させただけでそんなに難しくないです。
次回は、 Elasticsearch に使われている Lucene's Practical Scoring Function を解説します。

▼関連プレイリスト
自然言語処理系プレイリスト
https://www.youtube.com/playlist?list=PLhDAH9aTfnxL4XdCRjUCC0_flR00A6tJR

▼目次
00:00 OP
==== 1.背景,定義 ====
01:02 BM25の背景
01:30 状況設定と記号の定義
02:41 検索の定式化とBM25の役割
03:35 定義を眺める
04:35 進化した部分を眺める
==== 2.数式の意味 ====
07:21 ヤバい数式の対処法
08:07 BM25解読開始！
10:13 φの解読(#d=avgdlの場合)
13:10 φの解読(一般の場合)
18:06 bの役割
=========
19:54 圧倒的まとめっ...!
22:57 ED

▼終わりに
ご視聴ありがとうございました！
面白かったら高評価、チャンネル登録お願いします。
動画の質問、感想などは、コメント欄やTwitterにどうぞ！
お仕事、コラボのご依頼は、TwitterのDMからお願い致します。
動画生成：AIcia Solid (Twitter: https://twitter.com/AIcia_Solid/ )
動画編集：AIris Solid (妹) (Twitter: https://twitter.com/AIris_Solid/ )
=======
Logo: TEICAさん ( https://twitter.com/T_E_I_C_A )
Model: http://3d.nicovideo.jp/works/td44519
Model by: W01fa さん ( https://twitter.com/W01fa )