エンジニア関連– category –

はじめに 　近年、AI技術、特に大規模言語モデル（LLM）に代表されるフロンティアAI（最先端のAIモデル）は目覚ましい進化を遂げています。その能力向上は、科学技術、医療、教育など様々な分野での貢献が期待される一方で、予期せぬ深刻な危害 (severe ha...

はじめに 　本稿では、Microsoft Researchによって開発された、初のオープンソース・ネイティブ1ビット大規模言語モデル（LLM）である「BitNet b1.58 2B4T」について詳しく解説します。その技術的な特徴、性能、そして実際の利用方法まで解説します。 引用...

 はじめに 　近年、大規模言語モデル（LLM）の能力をさらに引き出すための技術として、強化学習（Reinforcement Learning, RL）、特にLLMのための強化学習（RLLM）が注目を集めています。数学的推論などの分野では目覚ましい成果が報告されていますが、コ...

はじめに 　本稿では、比較的小さな1.5Bパラメータの言語モデルでありながら、OpenAIの「o1-preview」をも上回る性能を示した「DeepScaleR-1.5B-Preview」について、その技術的な側面を詳細に解説します。特に、強化学習（RL）をスケーリングさせるための...

エンジニアにとって、技術情報を発信する場としておすすめのプラットフォームはどれだろうか？ Qiita、Zenn、Noteは、それぞれに特徴やメリット・デメリットがあり、どれが最適なプラットフォームなのか迷う方も多いのではないでしょうか。少なくとも私は...