본문으로 건너뛰기
buildradar
Sign in

SigmanticAI/apex-inference-chip

@SigmanticAI

FPGA에서 실제 LLM(Qwen2.5-0.5B)을 실행하는 추론 칩 디자인 — RTL로 구현된 하나의 트랜스포머 디코더 레이어, 모든 실리콘 값이 골든 모델과 비트 단위로 일치함. 측정된 속도는 0.56 tok/s로 140배 향상되었으며, 전체 검증 증적 제공.

스타
615
포크
11
언어
Python
라이선스
Apache-2.0
마지막 푸시
3주 전
Python

아직 관련 인텔이 없습니다

이 저장소는 radar가 추적하는 어떤 소스에도 아직 등장하지 않았습니다. 수집기는 예약에 따라 실행됩니다——이 저장소를 다루게 되면 다시 확인하세요.