vLLM vLLM은 0.17.1을 출시하고 추론 백엔드의 주요 패치를 수정하여 패치 응답 속도와 이기종 백엔드 적응에 점점 더 많은 관심을 기울이는 추론 인프라를 제공합니다

vLLM 0.17.1 출시: TRTLLM MoE와 MTP 패치가 중앙에서 구현되었으며, 고성능 추론이 안정성을 계속 보완하고 있습니다

vLLM 0.17.1은 0.17.0 위에 구축된 패치 버전이지만, 근본적인 문제들을 해결합니다. 공식 목록에는 TRTLLM 융합 MoE, 비게이트 융합 모에 트라이톤, TRTLLM MoE FP8 백엔드, Mamba/Qwen3.5 SSM 캐시 블록, MTP 처리 최적화가...