home/categories/llm-ai/eyadsibai-ltk-plugins-ltk-data-skills-llm-inference-skill-md
llm-aidata-ai

llm-inference

Use when "LLM inference", "serving LLM", "vLLM", "llama.cpp", "GGUF", "text generation", "model serving", "inference optimization", "KV cache", "continuous batching", "speculative decoding", "local LLM", "CPU inference"

eyadsibai
maintainer
eyadsibai
Обновлено 1/15/2026
Звёзды
0
Форки
0
quick start

Installation and usage

Use when "LLM inference", "serving LLM", "vLLM", "llama.cpp", "GGUF", "text generation", "model serving", "inference optimization", "KV cache", "continuous batching", "speculative decoding", "local LLM", "CPU inference"

Установка
$ install --globalskills.sh
Использование

После установки вы можете использовать этот skill, выполнив следующую команду в терминале:

skills use llm-inference