AI関連 Duplication of ‘Sparse Reward Subsystem in Large Language Models’ Note Article
「LLMにフィードバックしても、次のプロンプトでは全部リセットされた気がする」そんなモヤっと感、経験ありませんか？ 「この方針で続けて」「さっきのは良くなかったから別アプローチで」と丁寧に指示しても、・数ターン後にはまた同じ失敗をする・“学...
トランスフォーマー
AI関連 
AI関連 驚きのAI革命！初心者向けマルチヘッドアテンション完全ガイド
こんにちは、皆さん！今日のテーマは、生成AIの世界で多くの注目を集めている技術「マルチヘッドアテンション」についてです。ちょっと待って、ただの「アテンション」じゃなくて「マルチヘッド」って何？と思われる方も多いかもしれませんね。さあ、一緒に...
AI関連 生成AIの熱狂を冷静に分析する
生成AI、つまり「AIが新たなコンテンツを生み出す技術」が急激に注目を集めている理由はいくつかあります。最近のテクノロジーの進化により、私たちの生活やビジネスのあり方が根本から変わってきているのです。ここでは、その背景にある要因を掘り下げて...
AI関連 AIによる文章評価の新たなアプローチ
最近の研究によって、大規模言語モデル（LLM）が人間の文章評価に迫る力を持つことが明らかになりました。この技術が教育やビジネス界にどのような影響を及ぼすのかを考えてみましょう。大規模言語モデル（LLM）の基礎知識最近、AIの世界で話題になっ...
AI関連 生成AIを活用したレポート作成の比較: ChatGPTとLlama-3 ELYZA
最近の生成AI技術の進化に伴い、大学生たちがレポートを作成する際のAIの利用方法を比較してみました。特に、ChatGPTと新たに登場したLlama-3 ELYZAの実力を掘り下げてみましょう。生成AIとは何か？最近、生成AIという言葉をよく...
AI関連 GPT-2を再現する冒険に出よう！
最近公開されたAndrej Karpathyの動画を参考に、GPT-2の内部構造や実装方法を分かりやすく解説します。生成AIの世界に一歩踏み込むためのガイドとなるでしょう。そもそもGPT-2って何？さて、GPT-2について語る前に、その背景...