博客

开发者工具使用指南、技术科普与最佳实践。

全部 AI Agent AI IDE AI 编程助手 AI安全 AI工程化 AI编程 AI编程助手 AI编程工具 AI编辑器 Agent Anthropic Base64 CI/CD CSP CSS Cache ChromaDB Claude Claude Code Copilot Cursor DevOps Embedding Function Calling GitHub Copilot GitLab HTTPS IDE IDE插件 INT4 JSON KV Cache LLM LLM安全 LLM应用开发 LLM部署 LM Studio LangChain Llama MCP MLX Markdown Node.js Ollama PagedAttention Production Prompt Injection PromptInjection Prompt注入 Qdrant RAG RAG安全 React SEO SSL Security Transformer TypeScript URL Unicode Unix VS Code WebGPU WebLLM Web安全 Web开发 Windsurf XML XSS llama.cpp transformers.js vLLM 代码审查代码编辑器代码规范代码重构写作前端向量数据库向量检索图片在线工具安全实战实战经验密码工程实践幻觉开发工具开发效率开发者体验开发者工具开源模型性能优化推理优化提效提示注入提示词插件搜索引擎效率效率工具数据库数据格式文本处理文档时间戳本地推理本地部署格式化检索检索优化检索增强检索增强生成正则表达式流量浏览器推理渗透测试生产力生产实践生产环境生产部署知识库端侧AI 端侧推理类型系统编码编程编程助手网站速度计算机基础设计证书语义搜索踩坑经验量化防御方案防御架构隐私保护颜色

标签：#本地推理 · 清除筛选

端侧与硬件·2026-08-23

llama.cpp 本地推理实战：从安装到优化的完整指南

一线开发者实测：如何在消费级硬件上跑起LLM，量化带来的精度损失到底有多少，以及那些文档里没写踩坑记录

llama.cpp量化本地推理端侧AI

显示第 1-1 篇，共 1 篇