LLM(Large Language Model) Calendar 2024
https://qiita.com/advent-calendar/2024/llm
Day 2 投稿予定記事です。

LLM コミュニティに9月から参加している。
４月にさかのぼって勉強するための資料
参加した結果、なにか知見があれば別に記録。
connpassに示されていない仕様のURLを追記。（自己目的ではこれが最大）

LLMコミュニティに記載間違いがないか確認中。
講師名を記載してよいか確認中。
動画URLを追記予定。https://www.youtube.com
開催時間を追記予定。

分類は個人的な記載で、別の分類が良い方は、資料をコピペしてお使いください。
なお、この記事のURLをおつけいただけると幸いです。

<この項は書きかけです。順次追記します。>
This article is not completed. I will add some words and/or centences in order.

20241125版

分類	行事	氏名	日付	時間	内容	Qiita/Researchmap	calendar2024
Beginning	松尾研 LLM コミュニティ "Beginning LLM Level 1" https://matsuolab-community.connpass.com/event/315969/		2024/04/30(火)		0から始めるLLMの触り方
	松尾研 LLM コミュニティ "Beginning LLM Level 2" https://matsuolab-community.connpass.com/event/317847/		2024/05/16(木)		プロンプティングを駆使して生成AIで画像生成を行う。/ 画像生成コンテスト実施
	松尾研 LLM コミュニティ "Beginning LLM Level 3" https://matsuolab-community.connpass.com/event/319443/		2024/05/30(木)		画像生成パート2 「Stable Diffusion スタート講座 (SDXLハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 4" https://matsuolab-community.connpass.com/event/320877/		2024/06/20(木)		サイト生成パート1 「Create.xyz スタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 5" https://matsuolab-community.connpass.com/event/321803/		2024/07/11(木)		サイト生成パート2 「Create.xyz スタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 6" https://matsuolab-community.connpass.com/event/321804/		2024/07/18(木)		RAG「NotebookLM スタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 7" https://matsuolab-community.connpass.com/event/321805/		2024/08/15(木)		AIチャットBOT「Difyスタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 8" https://matsuolab-community.connpass.com/event/321806/		2024/08/22(木)		チャットBOT2 「Dify スタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 8" https://matsuolab-community.connpass.com/event/321807/		2024/08/29(木)		LLMサービスを用いたクリエイティブコーディング
	【勉強会 #1】小型LlamaモデルのTransformerEngineを用いた事前学習の環境構築 https://matsuolab-community.connpass.com/event/332491/		2024/10/13(日)		conda共用環境の作り方
	【松尾研LLMコミュニティ】面倒なことはLLMにやらせよう "Beginning LLM" https://matsuolab-community.connpass.com/event/321809/	からあげ https://x.com/karaage0703	2024/10/17(木)		面倒なことはChatGPTにやらせよう https://www.kspub.co.jp/book/detail/5342909.html	【松尾研LLMコミュニティ】面倒なことはLLMにやらせよう "Beginning LLM"　2024年10月17日 https://qiita.com/kaizen_nagoya/items/efdc23fbe67cdae2126e	からあげ帝国 Calendar 2024 https://qiita.com/advent-calendar/2024/karaage　Day11
	【勉強会 #2】小型LlamaモデルのMegatron-LMを用いた事前学習と継続事前学習 https://matsuolab-community.connpass.com/event/334130/		2024/10/27(日)		トークナイザーの学習, 事前学習, 継続事前学習
	【勉強会 #3】小型LlamaモデルのTRLライブラリを用いた事後学習 https://matsuolab-community.connpass.com/event/335403/		2024/11/24(日)		TanukiモデルのTRLライブラリを用いた事後学習を、手頃な価格で仕立てられるローカルPCやレンタルクラウド環境上で、動作検証をするという実演的な勉強会
	【勉強会 #4】Tanuki8Bに対してMT-Bench等を用いた性能評価 https://matsuolab-community.connpass.com/event/338243/		2024/12/22(日)
共有	GENIAC LLM開発プロジェクト進捗共有会 https://matsuolab-community.connpass.com/event/317824/		2024/05/09(木)		GENIAC LLM開発における、コンペ等の進捗共有会
	松尾研LLM開発プロジェクト “Tanuki” 開発報告会 Vol.1 https://matsuolab-community.connpass.com/event/329394/		2024/09/10(火)		「GENIAC」プロジェクトの詳細 https://www.meti.go.jp/policy/mono_info_service/geniac/index.html
	松尾研LLM開発プロジェクト “Tanuki” 開発報告会 Vol.2 https://matsuolab-community.connpass.com/event/329838/		2024/09/17(火)		NEDOの採択を受け、公開型での500億パラメータサイズの大規模言語モデル開発を開始します。https://weblab.t.u-tokyo.ac.jp/2024-02-02/
	松尾研LLM開発プロジェクト “Tanuki” 開発報告会 Vol.3 https://matsuolab-community.connpass.com/event/329840/	Susumu Ota 白石尽誠(Jinsei Shiraishi) 山口裕輝	2024/09/24(火)
	松尾研LLMコミュニティ "LLM講座もくもく会 Vol.1" https://matsuolab-community.connpass.com/event/331475/		2024/09/26(木)		松尾研LLMコミュニティのSlackに参加していることを前提
	松尾研LLMコミュニティ "LLM講座もくもく会 Vol.2" https://matsuolab-community.connpass.com/event/332144/		2024/10/03(木)	20:00 〜 21:30	松尾研LLMコミュニティのSlackに参加していることを前提
	松尾研 LLM コミュニティ "リクルート説明会第1回" https://matsuolab-community.connpass.com/event/332697/		2024/10/04(金)		松尾研LLMコミュニティのコミュニティ運営チームを若干名募集
	松尾研 LLM コミュニティ "リクルート説明会第2回" https://matsuolab-community.connpass.com/event/332892/		2024/10/07(月)		松尾研LLMコミュニティのコミュニティ運営チームを若干名募集
	松尾研LLMコミュニティ "もくもく会 -朝会- Vol.3" https://matsuolab-community.connpass.com/event/333162/		2024/10/12(土)		松尾研LLMコミュニティのSlackに参加していることを前提
	松尾研 LLM コミュニティ "Season2 開幕キックオフイベント" https://matsuolab-community.connpass.com/event/333677/		2024/10/20(日)		Season1での活動内容を振り返るとともに、Season2における新たな取り組みについてご紹
	松尾研LLMコミュニティ "もくもく会 Vol.4" https://matsuolab-community.connpass.com/event/334743/		2024/10/24(木)		松尾研LLMコミュニティのSlackに参加していることを前提
	松尾研LLMコミュニティ "もくもく会 Vol.5" https://matsuolab-community.connpass.com/event/335557/		2024/10/31(木)		松尾研LLMコミュニティのSlackに参加していることを前提
	東京大学松尾・岩澤研究室 LLM コミュニティ "LLMATCHプログラム説明会" https://matsuolab-community.connpass.com/event/335375/		2024/11/01(金)		LLMコミュニティで知識、スキルを身に着けた学生に次のステップを提供することで、学生に実績を作ってもらい、次のキャリアに繋げてもらう
	松尾研LLMコミュニティ "もくもく会 Vol.6" https://matsuolab-community.connpass.com/event/335986/		2024/11/07(木)		LLMコミュニティで知識、スキルを身に着けた学生に次のステップを提供することで、学生に実績を作ってもらい、次のキャリアに繋げてもらう
	LLM Night Hours #1 https://matsuolab-community.connpass.com/event/336833/		2024/11/20(水)		コンペディスカッション
	LLM Night Hours #2 https://matsuolab-community.connpass.com/event/337987/		2024/11/27(水)
P&H	松尾研 LLM コミュニティ "Paper & Hacks Vol.01"https://matsuolab-community.connpass.com/event/315810/		2024/04/09(火)		RAGの手法と実装について
	松尾研 LLM コミュニティ "Paper & Hacks Vol.02" https://matsuolab-community.connpass.com/event/315942/		2024/04/16(火)		RAGのサーベイ論文紹介 Retrieval-Augmented Generation for Large Language Models: A Survey https://arxiv.org/pdf/2312.10997.pdf
	松尾研 LLM コミュニティ "Paper & Hacks Vol.03" https://matsuolab-community.connpass.com/event/316160/		2024/04/23(火)		ChatGPTとその利用可能性
	松尾研 LLM コミュニティ "Paper & Hacks Vol.04" https://matsuolab-community.connpass.com/event/317326/		2024/05/07(火)		MM-LLMs: Recent Advances in MultiModal Large Language Models https://arxiv.org/pdf/2401.13601.pdf
	松尾研 LLM コミュニティ "Paper & Hacks Vol.05" https://matsuolab-community.connpass.com/event/318423/		2024/05/14(火)		Retrieval Head Mechanistically Explains Long-Context Factuality https://arxiv.org/pdf/2404.15574
	松尾研 LLM コミュニティ "Paper & Hacks Vol.06" https://matsuolab-community.connpass.com/event/319287/		2024/05/21(火)		End-to-EndのRAGの仕組みの紹介 RAG2.0
	松尾研 LLM コミュニティ "Paper & Hacks Vol.07" https://matsuolab-community.connpass.com/event/319916/		2024/06/04(火)		「LLMと推薦システム：Large Language Models for Generative Recommendation: A Survey and Visionary Discussions」 https://arxiv.org/pdf/2309.01157
	松尾研 LLM コミュニティ "Paper & Hacks Vol.08" https://matsuolab-community.connpass.com/event/321389/		2024/06/11(火)		GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.09" https://matsuolab-community.connpass.com/event/322042/		2024/06/18(火)		GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.10" https://matsuolab-community.connpass.com/event/322400/		2024/06/25(火)		GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.11" https://matsuolab-community.connpass.com/event/323269/		2024/07/02(火)		GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.12" https://matsuolab-community.connpass.com/event/324103/		2024/07/09(火)		LLM主要論文ざっくり解説_Language Modeling Reading List (to Start Your Paper Club) https://eugeneyan.com/writing/llm-reading-list/
	松尾研 LLM コミュニティ "Paper & Hacks Vol.13" https://matsuolab-community.connpass.com/event/324860/		2024/07/23(火)		「GENIAC Phase1 開発の取組」
	松尾研 LLM コミュニティ "Paper & Hacks Vol.14" https://matsuolab-community.connpass.com/event/325806/		2024/07/30(火)		A Survey of Large Language Models in Medicine: Progress, Application, and Challenge" https://arxiv.org/abs/2311.05112 に掲載されている論文からAIドクターに必要と考えられる研究をピックアップして紹介します。
	松尾研 LLM コミュニティ "Paper & Hacks Vol.15" https://matsuolab-community.connpass.com/event/326550/		2024/08/06(火)		"The Evolution of Multimodal Model Architectures" https://arxiv.org/abs/2405.17927
	松尾研 LLM コミュニティ "Paper & Hacks Vol.16" https://matsuolab-community.connpass.com/event/327394/		2024/08/20(火)		LLM Agentのベンチマーク
	松尾研 LLM コミュニティ "Paper & Hacks Vol.17" https://matsuolab-community.connpass.com/event/328467/		2024/08/27(火)		言語とは何か？集合的予測符号化の言語観
	松尾研 LLM コミュニティ "Paper & Hacks Vol.18" https://matsuolab-community.connpass.com/event/329264/		2024/09/03(火)		画像とLLM 、CVPR2024におけるLLMの動向
	松尾研 LLM コミュニティ "Paper & Hacks Vol.19" https://matsuolab-community.connpass.com/event/331740/		2024/10/01(火)		松尾研大規模言語モデル講座第3回 Pre-training 【+α】
	松尾研 LLM コミュニティ "Paper & Hacks Vol.20" https://matsuolab-community.connpass.com/event/332695/		2024/10/08(火)		「スケーリング法則が何故スケーラブルなのか?」
	松尾研 LLM コミュニティ "Paper & Hacks Vol.21" https://matsuolab-community.connpass.com/event/333658/		2024/10/15(火)		合成データの作成について
	松尾研DL輪読会 x 大規模言語モデル講座2024 ”特別回"https://matsuolab-community.connpass.com/event/333991/	鴨井遼氏（ペンシルベニア州立大学)	2024/10/17(木)		LLMの自己修正〜OpenAI o1の関連研究〜
	松尾研 LLM コミュニティ "Paper & Hacks Vol.22"　https://matsuolab-community.connpass.com/event/334089/		2024/10/22(火)		オフラインデータを用いたアライメントの一般化手法について Generalized Preference Optimization: A Unified Approach to Offline Alignment　https://arxiv.org/pdf/2402.05749.pdf
	松尾研 LLM コミュニティ "Paper & Hacks Vol.23" https://matsuolab-community.connpass.com/event/334867/		2024/10/29(火)		論理的飛躍を生み出しLLMに大喜利させる方法 Let's Think Outside the Box: Exploring Leap-of-Thought in Large Language Models with Creative Humor Generation https://arxiv.org/abs/2312.02439
	松尾研 LLM コミュニティ "Paper & Hacks Vol.24" https://matsuolab-community.connpass.com/event/335384/		2024/11/05(火)		LLMはハルシネーションを自覚しているか Physics of Language Models: Part2.2 How to Learn From Mistakes on Grade-School Math Problems https://arxiv.org/abs/2408.16293
	松尾研 LLM コミュニティ "Paper & Hacks Vol.25" https://matsuolab-community.connpass.com/event/336318/		2024/11/12(火)		Google Colabによる Llama3.2 / Qwen2.5 のファインチューニング・ハンズオン
	松尾研LLMコミュニティ【Paper & Hacks Vol.26】医療LLMの研究紹介 https://matsuolab-community.connpass.com/event/336858/		2024/11/19(火)	医療LLMの研究紹介 Development and bilingual evaluation of Japanese medical large language model within reasonably low computational resources https://arxiv.org/abs/2409.11783 From Medprompt to o1: Exploration of Run-Time Strategies for Medical Challenge Problems and Beyond https://arxiv.org/pdf/2411.03590v1	医療LLMの研究紹介助田一晟松尾研LLMコミュニティ【Paper & Hacks Vol.26】参加記録 https://qiita.com/kaizen_nagoya/items/86463619054a3ffa8ecc	"LLM(Large Language Model) Calendar 2024 https://qiita.com/advent-calendar/2024/llm　Day4
	松尾研LLMコミュニティ【Paper&Hacks#27】FlashAttentionとMoEのしくみ https://matsuolab-community.connpass.com/event/337632/		2024/11/26(火)		Flash AttentionとMoEのしくみ Flash Attentionの論文：FlashAttention: Fast and Memory-Efficient Exact Attention with IO-Awareness https://openreview.net/forum?id=H4DqfPSibmx （参考）Flash Attention2の論文：FlashAttention-2: Faster Attention with Better Parallelism and Work Partitioning https://openreview.net/forum?id=mZn2Xyh9Ec MoE：A Survey on Mixture of Experts https://arxiv.org/abs/2407.06204

初版

分類	行事	日付	内容
Beginning	松尾研 LLM コミュニティ "Beginning LLM Level 1" https://matsuolab-community.connpass.com/event/315969/	2024/04/30(火)	0から始めるLLMの触り方
	松尾研 LLM コミュニティ "Beginning LLM Level 2" https://matsuolab-community.connpass.com/event/317847/	2024/05/16(木)	プロンプティングを駆使して生成AIで画像生成を行う。/ 画像生成コンテスト実施
	松尾研 LLM コミュニティ "Beginning LLM Level 3" https://matsuolab-community.connpass.com/event/319443/	2024/05/30(木)	画像生成パート2 「Stable Diffusion スタート講座 (SDXLハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 4" https://matsuolab-community.connpass.com/event/320877/	2024/06/20(木)	サイト生成パート1 「Create.xyz スタート講座 (ハンズオン)」
	松尾研 LLM コミュニティ "Beginning LLM Level 5" https://matsuolab-community.connpass.com/event/321803/	2024/07/11(木)	サイト生成パート2 「Create.xyz スタート講座 (ハンズオン)」
共有	GENIAC LLM開発プロジェクト進捗共有会 https://matsuolab-community.connpass.com/event/317824/	2024/05/09(木)	GENIAC LLM開発における、コンペ等の進捗共有会
P&H	松尾研 LLM コミュニティ "Paper & Hacks Vol.01"https://matsuolab-community.connpass.com/event/315810/	2024/04/09(火)	RAGの手法と実装について
	松尾研 LLM コミュニティ "Paper & Hacks Vol.02" https://matsuolab-community.connpass.com/event/315942/	2024/04/16(火)	RAGのサーベイ論文紹介 Retrieval-Augmented Generation for Large Language Models: A Survey https://arxiv.org/pdf/2312.10997.pdf
	松尾研 LLM コミュニティ "Paper & Hacks Vol.03" https://matsuolab-community.connpass.com/event/316160/	2024/04/23(火)	ChatGPTとその利用可能性
	松尾研 LLM コミュニティ "Paper & Hacks Vol.04" https://matsuolab-community.connpass.com/event/317326/	2024/05/07(火)	MM-LLMs: Recent Advances in MultiModal Large Language Models https://arxiv.org/pdf/2401.13601.pdf
	松尾研 LLM コミュニティ "Paper & Hacks Vol.05" https://matsuolab-community.connpass.com/event/318423/	2024/05/14(火)	Retrieval Head Mechanistically Explains Long-Context Factuality https://arxiv.org/pdf/2404.15574
	松尾研 LLM コミュニティ "Paper & Hacks Vol.06" https://matsuolab-community.connpass.com/event/319287/	2024/05/21(火)	End-to-EndのRAGの仕組みの紹介 RAG2.0
	松尾研 LLM コミュニティ "Paper & Hacks Vol.07" https://matsuolab-community.connpass.com/event/319916/	2024/06/04(火)	「LLMと推薦システム：Large Language Models for Generative Recommendation: A Survey and Visionary Discussions」 https://arxiv.org/pdf/2309.01157
	松尾研 LLM コミュニティ "Paper & Hacks Vol.08" https://matsuolab-community.connpass.com/event/321389/	2024/06/11(火)	GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.09" https://matsuolab-community.connpass.com/event/322042/	2024/06/18(火)	GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.10" https://matsuolab-community.connpass.com/event/322400/	2024/06/25(火)	GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.11" https://matsuolab-community.connpass.com/event/323269/	2024/07/02(火)	GENIAC Phase1 開発の取組
	松尾研 LLM コミュニティ "Paper & Hacks Vol.12" https://matsuolab-community.connpass.com/event/324103/	2024/07/09(火)	LLM主要論文ざっくり解説_Language Modeling Reading List (to Start Your Paper Club) https://eugeneyan.com/writing/llm-reading-list/