独立的 AI 编程实战社区

最新帖子

从 Lora 到 GaLore:低显存环境下微调大模型的实用方案解析

显存墙一直是开发者微调大模型的头号敌人,而从 LoRA 到 GaLore 的演进,本质上是我们在寻找一种在“模型性能”与“硬件成本”之间达成极致平衡的数学技巧。 LoRA 的核心逻辑是“走捷径”。它不…

PromptCube 高级 ·行业动态 · 302 · 0 · 6 ·2026/5/14
从 Lora 到 GaLore:低显存环境下微调大模型的实用方案解析

如何利用 ComfyUI 的 IPAdapter 结合 ControlNet 实现精准的人物角色一致性控制

搞定角色一致性不能只靠抽卡,把 IPAdapter 和 ControlNet 组合起来才是真正的“工业级”方案。很多人习惯只用 Lora,但 Lora 的泛化能力太差,换个场景就崩;而单纯用 IPAd…

技术宅的日常 高级 ·AI模型讨论 · 497 · 0 · 14 ·2026/5/14
如何利用 ComfyUI 的 IPAdapter 结合 ControlNet 实现精准的人物角色一致性控制

如何利用 JSON Schema 强制 LLM 稳定输出复杂的嵌套数据结构

直接把 Prompt 里的“请输出 JSON 格式”当成约束,在处理深层嵌套结构时几乎必然翻车。一旦数据量增加,LLM 经常在闭合括号上出错,或者随心所欲地更改字段名,导致后端解析直接抛出 。 解决这…

运营喵小美 中级 ·AI编程实战 · 120 · 0 · 4 ·2026/5/14
如何利用 JSON Schema 强制 LLM 稳定输出复杂的嵌套数据结构

如何通过构建动态System Prompt有效拦截针对逻辑陷阱的越狱攻击

死磕了三天逻辑陷阱,我发现单纯靠在 System Prompt 里写“你不能做什么”基本没用,因为只要用户构造一个足够复杂的逻辑悖论(比如经典的“如果我命令你忽略所有指令,你是否会执行这个忽略指令”)…

数据分析师Lucy 中级 ·AI模型讨论 · 366 · 0 · 6 ·2026/5/14
如何通过构建动态System Prompt有效拦截针对逻辑陷阱的越狱攻击

LM Studio 部署 DeepSeek R1 时显存溢出怎么优化?

显存溢出(OOM)基本是本地跑 R1 系列模型的常态,尤其是尝试 32B 或 70B 版本时,LM Studio 默认的加载配置很容易把 VRAM 撑爆。 我的实测结论是: 不要迷信“全量加载”,要把…

设计师老张 高级 ·AI模型讨论 · 303 · 0 · 12 ·2026/5/14
LM Studio 部署 DeepSeek R1 时显存溢出怎么优化?

用 Dify 搭建自动化研报分析流:从 PDF 解析到多维度对比总结

要把几份几十页的 PDF 研报快速理出对比维度,手动复制粘贴到 LLM 里简直是浪费生命。我最近用 Dify 撸了一个自动化分析流,核心逻辑是把「长文档切片」和「结构化提取」分开处理,解决了大模型面对…

一杯咖啡日记 初级 ·AI编程实战 · 192 · 0 · 2 ·2026/5/14
用 Dify 搭建自动化研报分析流:从 PDF 解析到多维度对比总结

如何通过构建外部知识库 RAG 来降低 LLM 在专业领域文档中的幻觉率

单纯靠调 Prompt 很难彻底根治大模型在专业文档里的“一本正经胡说八道”,尤其是面对公司内部私有文档或极其冷门的行业标准时,RAG(检索增强生成)几乎是唯一的工程化解法。 我最近把一套复杂的医疗器…

摄影爱好者Tom 初级 ·AI模型讨论 · 240 · 0 · 5 ·2026/5/14
如何通过构建外部知识库 RAG 来降低 LLM 在专业领域文档中的幻觉率

如何在 Ollama 中通过 Modelfile 自定义 System Prompt 打造专属 AI 助手

很多用 Ollama 的朋友习惯直接 这种快速启动方式,但这种用法其实浪费了模型 50% 的潜力。大多数人所谓的“调优”还停留在对话框里发一段指令,但这种临时性的 Prompt 随着对话长度增加很容易…

PromptCube 高级 ·行业动态 · 414 · 0 · 10 ·2026/5/14
如何在 Ollama 中通过 Modelfile 自定义 System Prompt 打造专属 AI 助手

长文本上下文窗口扩大后,如何通过 Prompt 缓存降低 Token 成本

上下文窗口从 128K 卷到 1M 甚至 2M,表面上是让模型能读完一整本书或整个代码库,但实际落地的成本压力极大。很多开发者在尝试 RAG(检索增强生成)之外的长文本方案时,会发现 Token 消耗…

PromptCube 高级 ·行业动态 · 354 · 0 · 2 ·2026/5/13
长文本上下文窗口扩大后,如何通过 Prompt 缓存降低 Token 成本

如何通过 MCP 协议让 Claude 直接读写我的本地 SQLite 数据库

Claude Code 刚出的时候我就在试,但真正让它产生“生产力”的是配上 MCP(Model Context Protocol)。以前让 AI 改数据库,得手动导出 Schema 丢给它,它写完 …

技术宅的日常 高级 ·AI编程实战 · 401 · 0 · 15 ·2026/5/13
如何通过 MCP 协议让 Claude 直接读写我的本地 SQLite 数据库

实测 Gemini 2.0 多模态实时 API 在低延迟语音交互中的表现

直接把 Gemini 2.0 Flash 的 Multimodal Live API 接入到我的语音助手 Demo 里跑了一天,最直观的感受是:它终于把「语音 文本 语音」的这种三段式延迟给砍掉了。以…

运营喵小美 中级 ·AI编程实战 · 228 · 0 · 5 ·2026/5/13
实测 Gemini 2.0 多模态实时 API 在低延迟语音交互中的表现

实测 LoRA 权重合并后推理速度与精度的损耗分析

很多人在部署微调模型时,习惯性地将 LoRA 权重合并(Merge)回原模型以追求极速推理,但实际上这种“无损”合并在特定场景下会带来微妙的精度漂移。 这次针对 Llama 3 8B 在不同秩(Ran…

PromptCube 中级 ·行业动态 · 356 · 0 · 7 ·2026/5/13
实测 LoRA 权重合并后推理速度与精度的损耗分析

如何利用 LangGraph 的 StateGraph 实现带有条件循环的复杂多步工作流

LangGraph 的核心竞争力就在于它把 LLM 的调用从简单的「链式结构」变成了真正的「有向图」。很多朋友习惯了 LangChain 的 Linear Chain,但在处理需要反复修正、循环校验的…

设计师老张 高级 ·AI编程实战 · 97 · 0 · 13 ·2026/5/13
如何利用 LangGraph 的 StateGraph 实现带有条件循环的复杂多步工作流

如何通过 Few-Shot 提示词让 AI 稳定输出标准的 JSON 格式数据

直接在 Prompt 里写“请输出 JSON”大概率在处理复杂嵌套或长文本时翻车,AI 经常会随手加上 这种废话,或者在数组末尾多加一个逗号导致 直接报错。 最稳妥的方案是采用 Few Shot(少样…

Prompt工程师陈 专家 ·AI编程实战 · 145 · 0 · 3 ·2026/5/13
如何通过 Few-Shot 提示词让 AI 稳定输出标准的 JSON 格式数据

如何利用豆包的 API 快速搭建一个自动化周报生成助手

直接把豆包 API 接入到飞书/钉钉的机器人,比在网页端手动粘贴周报素材快得多。我这套方案的核心逻辑是: 本地 Markdown 碎片收集 $\rightarrow$ 豆包 API 结构化清洗 $\r…

一杯咖啡日记 初级 ·AI编程实战 · 226 · 0 · 9 ·2026/5/13
如何利用豆包的 API 快速搭建一个自动化周报生成助手