跳到主要內容
buildradar
Sign in
主題 · inference-optimization

inference-optimization

標記 inference-optimization 主題、收錄中的開源專案,依星數排序。

專案數
4
總星數
4,917
平均星數
1,229
佔比
0.00%

常跟 inference-optimization 一起出現在同一個專案上的主題。

近期新秀

近 90 天內建立、標記 inference-optimization 主題的專案。

  • llm-inference-engineering@amitshekhariitbhu

    Learn LLM Inference Engineering step by step - from KV cache, PagedAttention, and continuous batching to vLLM, SGLang, and GPUs.

    221
  • XNNPACK@google

    適用於行動裝置、伺服器與 Web 的高效能浮點數類神經網路推論運算子

    2,439+2近 7 天星數變化
  • efficient-dl-systems@mryab

    高效深度學習系統課程教材

    1,031+2近 7 天星數變化
  • BladeDISC@alibaba

    BladeDISC 是一個用於機器學習工作負載的端對端動態形狀編譯器 (Dynamic Shape Compiler) 專案。

    932+0近 7 天星數變化
  • krasis@brontoguana

    Krasis 是一款混合型 LLM 執行時期,專注於在消費級 VRAM 受限的硬體上高效執行大型模型。

    519+2近 7 天星數變化
← 返回主題列表