卒研１のプロジェクト

・機械学習

・B4 古川 聡悟

私は, 因果大規模言語モデル(Causal LLM)のLoRAという追加学習方法や文が出力される仕組みを学びました. 後ろの単語が前の単語を入力した後の事後確率分布であり, Transformer復号器がその分布を自己回帰的に学習しているのが興味深いと感じました. また, LoRA手法では事前学習の知識を活かした追加学習ができることを学びました.

皆様へ一言

・自分の興味ある分野や研究について挑戦できる場所だと思います。毎週あるゼミでは先輩方の研究への取り組みや活発な議論を聞いて刺激を受けています。また、発表の方法や研究への取り組み方などわからないことがあれば、先生や先輩方が丁寧に教えてくれます。

・私たち学生は主体的に取り組む事を強く求められ、先生方はそのサポートを惜しみなくしてくださいます。

・この研究室では、機械学習、最適化、群（強化学習）の3つの分野を選択でき、また、それぞれの分野で面倒を見てくださる先生方や先輩方のサポートがとても手厚いと感じています。研究室に配属されてから、プレゼンテーションの仕方から理論の理解、ロジカルな考え方などいろいろなものを吸収させてもらえていると思っています。

・AIの技術の進化のスピードが著しい中、新しいモデルや論文のキャッチアップを教授、先輩と一緒に丁寧に行うことができる研究室です！分からない概念や専門用語も質問することでこちらが納得するまで説明してくださるので、しっかりとした知識を蓄えることができます！

・自分の興味を持った分野や、先輩の研究の引継ぎなど幅広い分野を学べるのがこの研究室の魅力だと思います

・学生が興味を持ったテーマで研究を進めることができます。自主的に行動することが推奨されており、先生方は手厚くサポートしてくださいます。 br>

・研究室に興味がある皆様へ 学生が主体的に行動でき、教授や助教の方々も惜しみなく議論やサポートをしてくださいます。そのおかげで、私はM1の秋に国際学会で発表をし、海外の研究者と英語で議論を交わす貴重な経験をすることができました。積極的に行動することで、研究者として一回り成長できる素晴らしい研究室です！AIや深層生成モデル、拡散モデルに興味のある方はぜひ連絡下さい！

・色々なことに挑戦できる研究室だと思います．私は学部4年で企業からの委託課題に取り組みました．先輩と2人でこの課題に取り組み，企業との打ち合わせに参加したりもしました．修士からは自分で研究テーマを設定して，研究に取り組んでいます．

・ AI, 最適化, 群れのどれかに興味があって、”ほどよい距離感”が好きな人にオススメの研究室です。