人工智能技术文章
-
- 批处理推理用批处理吞吐换取响应延迟的实现方法
- 面向离线推理任务，介绍如何用 Transformers pipeline 接入流式数据、按样本长度和显存选择 batch_size，并为显存不足与失败批次保留可恢复的降级路径。
- 科技周边 · 人工智能 | 3星期前 | 301浏览 收藏
-
- PEFT适配器检查点为什么不包含完整基础模型
- 使用 Hugging Face PEFT 训练适配器后，检查点通常只包含适配器权重和配置，不会复制完整基础模型。本文从目录现象出发，说明保存设计、恢复加载、继续训练与合并导出的区别。
- 科技周边 · 人工智能 | 2天前 | 301浏览 收藏
-
- RAG 文档切块按标题层级保留语义边界
- 从标题路径、递归切分、token 上限和召回聚合四个环节，说明 RAG 如何减少断章与误召回。
- 科技周边 · 人工智能 | 6天前 | 300浏览 收藏
-
- 多家模型 API 参数各不相同：用 LiteLLM 虚拟 Key 做路由和配额隔离
- 用 LiteLLM Proxy 把多家模型收敛到统一入口，再通过虚拟 Key 做模型白名单、团队预算和速率限制，让客户端不用感知供应商差异。
- 科技周边 · 人工智能 | 1个月前 | 299浏览 收藏
-
- OpenAI Responses API 怎么把工具调用结果串成多轮任务
- Responses API 的多轮工具调用关键在于保留 function_call 的 call_id，用 function_call_output 回传业务结果，并在后续请求中正确续接响应状态。本文用 Python 拆解完整循环、异常处理和状态保存取舍。
- 科技周边 · 人工智能 | 1个月前 | 299浏览 收藏
-
- AI 流式回答收尾不完整怎么处理：增量缓冲、结束事件与可恢复状态
- AI 流式回答显示到一半、刷新后状态混乱，通常不是模型少返回了一句，而是增量缓冲、结束事件和可恢复状态没有分开处理。本文用一个浏览器流式阅读器示例拆开这条链路。
- 科技周边 · 人工智能 | 1个月前 | AI应用 · 流式响应 · 人工智能 AbortController 流式输出 ReadableStream 298浏览 收藏
-
- AI Agent 工具调用怎么避免参数漂移：版本快照、字段校验与失败回放
- AI Agent 在工具调用中容易遇到参数漂移：字段名变化、旧版本参数残留和失败后无法复现。本文用版本快照、字段校验与失败回放搭出一条可验收的处理链。
- 科技周边 · 人工智能 | 1个月前 | 297浏览 收藏
-
- 向量检索结果如何做可解释验收：相似度阈值、引用片段与空召回处理
- 向量检索返回相似度高的片段，不等于答案一定可靠。本文用一个轻量 Python 示例，把 query_points、score_threshold、source_id 和引用片段串成可验收的检索链，并处理空召回与低分结果。
- 科技周边 · 人工智能 | 1个月前 | 297浏览 收藏
-
- Hugging Face Transformers 怎么用动态 padding 减少推理浪费
- 用 DataCollatorWithPadding 让 Transformers 按 batch 内最长文本动态补齐，并配合 attention_mask、截断和长度分桶减少无效推理计算。
- 科技周边 · 人工智能 | 1个月前 | 性能优化 · 人工智能 · Hugging Face Transformers dynamic padding attention_mask 297浏览 收藏
-
- 长上下文应用如何避免塞入无关历史
- 长上下文应用不应把全部聊天记录直接拼进请求。本文用近期消息、滚动摘要和按需检索三层结构，配合 token 预算、去重与计数，减少无关历史进入模型上下文。
- 科技周边 · 人工智能 | 1个月前 | 人工智能 · rag · 人工智能 RAG 提示词 长上下文 context window 296浏览 收藏
-
- 提示词模板如何给变量设置默认值和类型
- OpenAI 提示词模板的变量主要负责替换输入，默认值、类型和必填校验应放在应用侧包装函数中。本文用 TypeScript 建立一层可复用契约。
- 科技周边 · 人工智能 | 1个月前 | 296浏览 收藏
-
- Claude Messages API citations 怎么核对：document blocks、source 与引用位置
- Anthropic Claude Messages API 的 citations 能把回答片段关联回 PDF、纯文本或自定义文档块。本文从 document block、citations.enabled、引用位置和 streaming 的 citations_delta 四个层面核对返回结果，避免只让模型口头声称有来源。
- 科技周边 · 人工智能 | 1个月前 | ai · Claude 引用 Anthropic Messages API citations document block 295浏览 收藏
-
- MCP Roots 已弃用怎么办：roots/list 兼容核验与工作区边界迁移
- MCP 2026-07-28 已将 Roots 标为弃用，但兼容期内 roots/list 仍可能出现在旧客户端。本文用工作区读取场景说明如何核验 roots 能力、拒绝越界路径，并把新设计迁移到工具参数、资源 URI 或服务端配置。
- 科技周边 · 人工智能 | 1个月前 | 人工智能 · mcp · ai agent · MCP Model Context Protocol Roots roots/list 工作区边界 293浏览 收藏
-
- Open Responses 的 agent loop 为什么不等于 Chat Completions：输入输出对象的迁移边界
- 从 messages、tool_calls 到 response.items，拆清 Open Responses 面向代理循环的输入输出对象变化，给出兼容层和最小验证方法。
- 科技周边 · 人工智能 | 1个月前 | API · 人工智能 · Responses API Open Responses agent loop Chat Completions 293浏览 收藏
-
- RAG 评测怎么分别统计召回率和答案正确率
- RAG 评测不要只看一个总分。本文用固定 JSONL 样本，把检索上下文覆盖率与最终答案正确率拆开统计，并用指标组合定位检索、生成和数据集问题。
- 科技周边 · 人工智能 | 1个月前 | 人工智能 · rag · RAG 召回率 evaluation Context Recall Answer Correctness 答案正确率 293浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案，代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景，打造一站式知识长龙服务，适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例，全面具体可落地，从理论到实践，一步一步将GO核心编程技术、编程思想、底层实现融会贯通，使学习者贴近时代脉搏，做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信：Le-studyg；在课程中，我们将首先介绍MySQL8的新特性，包括性能优化、安全增强、新数据类型等，帮助学生快速熟悉MySQL8的最新功能。接着，我们将深入解析MySQL的网络通信机制，包括协议、连接管理、数据传输等，让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网，分为导航，轮播，关于我们，成功案例，服务流程，团队介绍，数据部分，公司动态，底部信息等内容区块。网站整体采用CSSGrid布局，支持响应式，有流畅过渡和展现动画。
- 485次学习
-
- Golang深入理解GPM模型
- Golang深入理解GPM调度器模型及全场景分析，希望您看完这套视频有所收获；包括调度器的由来和分析、GMP模型简介、以及11个场景总结。
- 474次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集，涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用，助力提升NLP模型性能。
- 490次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台，提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能，助您快速选择最适合项目的高性能大语言模型。
- 547次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制，用户可对比不同大模型回答并生成实时排行榜，助力开发者优化模型及用户选择最佳AI工具。
- 572次使用
-
- HELM
- 深入了解斯坦福推出的HELM（Holistic Evaluation of Language Models）大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景，涵盖准确性、公平性、鲁棒性等多维度指标，助力开发者全面优化语言模型性能。
- 526次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台，提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景，助力开发者全面评估多模态模型性能。
- 339次使用
