M
v0.20.0
mlc-llm v0.20.0 安定 (最後の単石時代のリリース、mlc-...
mlc-llm v0.20.0 安定 (最後の単石時代のリリース、mlc-...
tvm/support/cuda の下に移動した NVTX ヘッダを使用し、 tvm::runtime の代わりに tvm::support から NVTXScopedRange を使用します。tvm_runtime_extraをデフォルトでリンクしてインストールすると、分散されたランタイムシンボルが正しく解消されます。
タグ v0.19.0
このPRはすべてのGPUをチェックした後 CPU検出を最後のデバイスに移動します
タグ v0.18.1
このPRはOLMoアーキテクチャのサポートを追加します追加サポート: clip-qkv のサポートを追加する。テスト:既にAndroid (Pixel 4) と cuda (テンソール_パラレル_シュラッド=2) を設定してテストしました
このPRはバックエンドの名前を更新し、バックエンドフレームワークごとに1つの名前を導入します。これらのバックエンドは同じAPIエンドポイントを指す可能性があります。
タグ v0.17.1
追加されたヘルメス 3 サポート 修正されたフォーマット 固定 毛糸
共同著者:ホンイ・ジン <jinhongyi02@gmail.com> 共同著者:ルイハン・ライ <ruihangl@cs.cmu.edu> 共同著者:天津・チェン <tqchen@cmu.edu> 共同著者:ジュンルー・シャオ <junrushao@apache.org> 共同著者:ジハオ・イエ <zhye@cs.washington.edu>