博客

开发者工具使用指南、技术科普与最佳实践。

全部 AI Agent AI 编程助手 AI基础设施 AI安全 AI工程化 AI智能体 AI编程 AI编程助手 AI编程工具 AI编辑器 AI集群 Agent Anthropic Apache2.0 Base64 CSP CSS Cache Claude Claude Code ComfyUI Copilot Cursor DeepSeek DeepSeek V4 Embedding Eric Xing Function Calling GitHub Copilot H3 HTTPS Hugging Face IDE IDE插件 IFM INT4 JSON K2 Horizon KV Cache Kimi K3 LLM LLM安全 LLM应用开发 LLM部署 LM Studio LangChain Linux基金会 Llama MCP MLX Markdown Meta MiniCPM5 MiniMax MoE Muse Glimmer NVIDIA Nature Node.js Ollama OpenAI OpenBMB PAIR PagedAttention Production Prompt Injection PromptInjection Prompt注入 Qdrant Qwen3.8 RAG RAG安全 React SEO SSL Security Transformer TypeScript URL Unicode Unix VS Code WebGPU WebLLM Web安全 Web开发 Windsurf XML XSS gpt-oss llama.cpp transformers.js vLLM 代码审查代码编辑器代码规范代码重构供应链写作前端向量数据库向量检索图片在线工具大模型安全实战实战经验密码工程实践幻觉开发工具开发效率开发者体验开发者工具开源开源协议开源大模型开源模型开源生态强化学习性能优化成本优化推理优化提效提示注入提示词搜索引擎收购效率效率工具数据库数据格式文本处理文档时间戳智能密度本地AI 本地推理格式化检索检索优化检索增强检索增强生成模型选型正则表达式流量浏览器推理渗透测试生产力生产实践生产环境生产部署知识库端侧AI 端侧推理类型系统编码编程编程助手网站速度英伟达视频生成计算机基础设计证书语义搜索踩坑经验量化防御方案防御架构隐私保护面壁智能颜色黄仁勋

标签：#本地推理 · 清除筛选

AI技术·2026-08-31

Meta 开源 Muse Glimmer：30B 参数，一张显卡就能跑本地 AI 智能体

Meta 开源 30B 参数模型 Muse Glimmer，4-bit 量化后仅需 20GB 显存，在消费级 GPU 上即可运行多模态 AI 智能体，Apache 2.0 协议商用友好。

MetaMuse Glimmer开源大模型本地推理AI智能体

AI技术·2026-08-29

OpenAI 首次开源！gpt-oss 来了，闭源帝国裂开一道缝

OpenAI 自 GPT-2 后六年首次开源模型权重，gpt-oss-120b 和 gpt-oss-20b 以 Apache 2.0 协议发布，单卡可跑、接口兼容 OpenAI SDK，开源 LLM 格局或生变局。

OpenAIgpt-oss开源大模型本地推理Apache2.0

端侧与硬件·2026-08-24

llama.cpp 本地推理实战：从安装到优化的完整指南

一线开发者实测：如何在消费级硬件上跑起LLM，量化带来的精度损失到底有多少，以及那些文档里没写踩坑记录

llama.cpp量化本地推理端侧AI

显示第 1-3 篇，共 3 篇