Edge0-AI/Edge0

출처
GitHub
처음 오른 날
분야
모델 추론
GitHub 별 수
2,390
주 언어
Python

외부 오픈소스 저장소를 소개하는 글입니다. HDATF 제품이 아닙니다.

Edge0-AI/Edge0

무엇을 하나

Edge0는 SSD 전문가 오프로딩, Recover-LoRA와 라우팅 예측을 사용하는 스트리밍 MoE 추론 프레임워크입니다. README는 공개된 플랫폼별 엔진과 2026년 4분기 예정인 통합 프레임워크를 구분합니다.

ATF에 주는 도움

Harness의 로컬 추론 실행기를 검토할 때 SSD 오프로딩 방식을 비교해 볼 수 있습니다. 플랫폼별 제공 범위와 예정된 통합 프레임워크는 구분해서 평가해야 합니다.

라이선스

Apache-2.0 허용 범위가 넓고 특허 사용 허락이 포함됩니다. 상업적 이용이 가능하며 고지 문구를 유지하고 변경 사실을 밝혀야 합니다.

같은 분야 저장소

  • Vibra-Ingenn/Janus
    gguf model을 자기 컴퓨터에서 돌리는 Go 실행 파일 하나입니다. llama.cpp를 써서 AMD와 Intel, NVIDIA 그래픽의 Vulkan으로 돌리고 없으면 CPU로 돌리며, OpenAI와 같은 모양의 API로 chat completions와 models를 엽니다. 다시 켜지 않고 model을 바꾸고, 추론 부분을 따로 떼어 내고, chat template을 gguf 정보에서 읽습니다. Python과 Docker가 필요하지 않습니다.
  • magnitudedev/magnitude
    사용자 하드웨어에서 커널을 컴파일하고 조정하는 에이전트용 추론 엔진입니다. Apple Silicon, NVIDIA, AMD 또는 CPU에서 공개 모델을 실행하며 데스크톱 앱과 CLI로 기존 에이전트에 연결합니다.
  • ProjectDMX/DMI
    LLM 추론과 학습 중 내부 상태를 살펴보는 분리형 비동기 관측 백엔드입니다. HuggingFace, vLLM, Megatron-LM 연동을 제공하는 연구 미리보기 단계이며 API는 바뀔 수 있습니다.
  • ninjahawk/livenerf
    출시 후 모델 능력의 변화를 추적하는 장기 벤치마크입니다. 고정한 프롬프트, CLI 버전, 채점 기준과 보관한 원시 로그를 사용합니다.
  • deepopen-com/deepopen
    Laya 기반의 다국어 구조화 의사결정 엔진입니다. 토큰을 차례로 생성하지 않고 한 번의 순전파로 여러 차원을 분류합니다.

Trendshift 순위 목록에 오른 저장소만 담았고, 목록은 후보를 찾는 데만 썼습니다. 순위 숫자는 옮기지 않았습니다. 설명과 라이선스, 별 수는 각 GitHub 저장소에서 확인했습니다. 해설은 우리의 판단입니다. 이 프로젝트들을 직접 시험한 것은 아니며, 상승 목록에 올랐다고 품질이 증명되지는 않습니다.

GitHub에서 보기 (새 탭에서 열림)