お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用申請及び審査がございます。詳細はヘルプページをご確認ください。

このエントリーをはてなブックマークに追加

Nov

30

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説
Hashtag :#StudyCo
Registration info

オンライン

Free

FCFS
257/300

Attendees
oshima
umiyuki
makotonagakura
ichigotosakura
tt727
fankou5555
yaza_ta
tugutugutugu
Kazuaki_Torisawa
2413976
View Attendee List
Start Date
2023/11/30(Thu) 19:30 ~ 20:30
Registration Period

2023/11/08(Wed) 08:59 〜
2023/11/30(Thu) 20:30まで

Location

Zoom

オンライン

参加者への情報
(参加者と発表者のみに公開されます)
出席登録
(イベント開始時間の2時間前から終了時間まで、参加者のみに公開されます)

Description

講座概要

今年の7月から10月にかけて、Kaggle主催でKaggle - LLM Science Examというコンペが開催されました。 LLMに選択式の問題を解かせて正解率を競うという内容で、2,664チームが参加し、LLMを扱うコンペとしてはかなりの盛り上がりを見せていました。

発表者 (早野) はこれに参加し、上位8% (205th) で銅メダルを獲得することができました。本コンペでは特に、RAG (Retrieval Augumented Generation) によって、LLMへの入力となるプロンプトを如何に拡充させるかがキーとなっており、RAGに関するさまざまな手法が議論され試されていました。コンペに取り組んでいく中でこうした議論や試行錯誤を直に体験することができ、これまで参加した中でもトップクラスに実りの多いコンペだったと思います。

本講座では、発表者が「Kaggle - LLM Science Exam」へどう取り組んだか、その取り組みの中で活用した手法 (RAGのほか学習データ生成やモデルアンサンブルなど) について解説します。また、上位チームがどのようにアプローチしたかについても解説します。

主な対象者

  • Kaggleに興味がある方
  • RAGに興味がある方

前提とする知識

  • 深層学習の基本的な知識
  • LLM、トークナイザーなどの自然言語処理関連の用語についての知識

会場

Zoomウェビナーでの開催となります

※ 参加登録してくださった方に、このページ上部の「参加者への情報」の欄にZoom URLが表示されます。

タイムテーブル

時刻 内容
19:30 はじめに
19:35 キーワードはRAG ! Kaggle LLMコンペの攻略法を解説
20:20 質疑応答
20:30 終了

※質疑の内容や数などにより、終了時刻が前後する可能性があります。

発表者プロフィール

発表者: 早野康太

東京大学農学生命科学研究科生物・環境工学 修士課程修了。都内のIT企業で自然言語モデルに関わる研究開発に従事。Kaggleで獲得したメダルは銀メダル1個、銅メダル2個。

発表者

Feed

oshima

oshimaさんが資料をアップしました。

12/02/2023 09:58

oshima

oshimaさんが資料をアップしました。

11/30/2023 20:53

oshima

oshimaさんが資料をアップしました。

11/30/2023 20:53

oshima

oshima published キーワードはRAG ! Kaggle LLMコンペの攻略法を解説.

11/08/2023 09:01

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 を公開しました!

Ended

2023/11/30(Thu)

19:30
20:30

Registration Period
2023/11/08(Wed) 08:59 〜
2023/11/30(Thu) 20:30

Location

Zoom

オンライン

Zoom

Attendees(257)

oshima

oshima

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

umiyuki

umiyuki

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

makotonagakura

makotonagakura

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

ichigotosakura

ichigotosakura

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

tt727

tt727

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

fankou5555

fankou5555

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

yaza_ta

yaza_ta

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

tugutugutugu

tugutugutugu

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

Kazuaki_Torisawa

Kazuaki_Torisawa

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

2413976

2413976

キーワードはRAG ! Kaggle LLMコンペの攻略法を解説 に参加を申し込みました!

Attendees (257)

Canceled (4)