jingyaogong/minimind

外部のオープンソース リポジトリを紹介するページです。HDATFの製品ではありません。

何をするか

約64Mパラメータの小さな言語モデルを、PyTorchの基本機能でゼロから実装した教育用プロジェクトです。コードはpretraining、SFT、LoRA、RLHF、tool use、distillationなど学習の全工程を扱います。

ATFへの役立ち方

関連は弱いです。Harnessが頼る言語モデルがどのように学習、調整されるかを理解する学習資料として参考になりますが、流用する部品ではありません。

ライセンス

Apache-2.0 寛容で特許許諾を含みます。商用利用できます。告知を残し、変更点を明記します。

同じ分野のリポジトリ

• experientiallabs/experiential
  ホスティングモデル、BYOK、ローカルモデルを一つのOpenAI互換APIにまとめるオープンソースのgatewayです。ユーザーとagentごとに使えるモデルと支出上限を決め、本番トラフィックから独自のrouterやモデルを作れます。
• sgl-project/sglang
  大規模言語モデルとマルチモーダルモデルのためのサービングフレームワークです。DeepSeek、Qwen、Llama、GLMなどの公開モデルを提供でき、画像や動画生成向けのdiffusionモデルも扱います。
• bojieli/ai-infra-book
  ハードウェアの制約とモデルアーキテクチャから出発し、LLMの推論と学習システムの設計を定量的に導く中国語のオープンソース書籍です。リポジトリには本文全体、PDF、付属の計算ツールと実験が含まれます。
• FlashML-org/FreeToken
  GPU、CPU、メモリに処理を分担させ、大規模なopen-weightのMoEモデルを個人のハードウェアで動かすservingエンジンです。コーディングagentが接続できるよう、AnthropicとOpenAI互換のAPIを提供します。
• modelscope/ms-cookbook
  ModelScope Cookbookは、open-sourceモデルで実際のアプリケーションを作る方法をまとめた公開ガイドです。モデル選定、推論、fine-tuning、評価、RAG、agentを扱い、企業ナレッジQ&Aやカスタマーサービス品質分析などの実行可能な例を収めています。

Trendshiftのランキングに入ったリポジトリだけを載せ、リストは候補を探すためだけに使いました。順位の数字は転載していません。説明、ライセンス、スター数は各GitHubリポジトリで確認しました。解説は私たちの判断です。これらを試験したわけではなく、上昇リストに載ったことは品質の証明ではありません。