発表 #1015
完了第17回 講演3: Redmine全文検索の実際 〜1,000億文字を平均3秒以内に検索できる、サクサクなRedmine全文検索の作り方〜
説明
発表の希望時間: <40分>
発表内容の概要:
スライド投影:
<持参PCをHDMI接続します>
その他連絡事項:
<その他、希望や連絡があれば書いてください>
このチケットで担当者を「スタッフ」としてご希望をご連絡ください。
勉強会の前日までにタイトルを確定し、発表資料データをチケットに添付してください。
発表に関する調整や連絡はこのチケットのやり取りで行いたいと思います。
勉強会当日まで内容を公開したくない場合はプライベートチケットとして下さい。
勉強会Wikiに掲載する概要
Redmine4.0はRails5対応を始めとして数多くの機能の拡張と改善が行われたことでさらなる長期利用が可能となりました。長期利用によって多くの情報が蓄積されると、応答性能の低下や大切な情報が埋もれてしまい検索性が低下するといった懸念が表面化します。また、蓄積した情報のうち添付ファイルとリポジトリファイル(git/svn/他)は検索対象になっていないため、情報の活用度に改善の余地が残っていました。今回、 "株式会社クリアコード":https://www.clear-code.com/ と "株式会社島津製作所":https://www.shimadzu.com/ は "Groonga":https://www.groonga.org/ja/ を使ったRedmine全文検索システムのオープンソース開発を行い、添付ファイルやリポジトリの内容を検索する機能を新たに開発しました。テキストデータが333億文字の実運用環境(500ユーザー、34万チケット、添付ファイル35万、データ数375万)において、プロジェクト内検索で1秒以内、全データの横断検索も平均3秒以内で検索できる高速な全文検索システムを安定的に稼働をさせることができたことから、大量データかつ高負荷の業務用途に耐えうる仕上がりを確認できています。本発表では、オープンソースによるRedmine全文検索システムの仕組み、導入手順、1,000億文字の応答性能ベンチマーク等の性能計測データをご紹介し、導入判断の一つの材料としていただけるよう「Redmine全文検索の実際」の一事例を公表します。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
@おがわ あきぴー さん、返信が遅くなってすみません。
コンパスの講演者枠に申し込みました。
発表者は調整中です(1~2名)。決まったらこちらにご連絡いたします。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
- 題名 を 第17回 講演3: Redmine全文検索の実際 〜1,000億文字を平均5秒以内に検索できる、サクサクなRedmine全文検索の作り方〜 から 第17回 講演3: Redmine全文検索の実際 〜1,000億文字を平均3秒以内に検索できる、サクサクなRedmine全文検索の作り方〜 に変更
- 1000億文字ベンチマークの暫定値(5秒以内) → 最終確定値(3秒以内)をタイトルに反映しました。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
直前になってしまいすみません。発表資料のURLです。
スライド https://akahane92.page.link/fts20191102
PDF https://akahane92.page.link/fts20191102pdf
よろしくお願いいたします。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
- 勉強会Wikiに掲載する概要 を更新 (差分)
楠川 智久 さんが4年以上前に更新
赤羽根さん
承知しました。
取り急ぎ https://youtu.be/556_kQtzA-A にアップしました。
説明文がつけられますので、文を書いていただけたら更新します。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
楠川さん
取り急ぎ https://youtu.be/556_kQtzA-A にアップしました。
説明文がつけられますので、文を書いていただけたら更新します。
お忙しくなさっているなか、早速ありがとうございます。助かりました。
映像の説明文は下記の内容でお願いいたします。
株式会社クリアコード 須藤功平 スライド https://slide.rabbit-shocker.org/authors/kou/redmine-tokyo-17/ 【内容】Redmine検索技術の現状と未来像を解説しています。 ・1,000億文字の横断検索を1秒以下にしたい ・Milkode のようなコードに特化した検索機能をRedmine検索に組み込みたい ・検索の高精度化(機械学習など)
お手数をおかけしてすみません。
どうぞよろしくお願いいたします。
AKAHANE(赤羽根) Kuniharu(州晴) さんが4年以上前に更新
- ステータス を 新規 から 終了 に変更
- 本件、大変お世話になり、どうもありがとうございました!
資料アップロードなどの事後対応も終わりましたので、本チケットはクローズいたします。
(私がCloseしても良かったのかな)