
大模型预训练微调与对齐三阶段
大模型预训练微调与对齐三阶段 一篇大模型从「零」到「能用」,通常经历 预训练 → 指令微调(SFT)→ 对齐(RLHF / DPO) 三段。三段各自往模型里注入的能力并不相同:预训练是事实与语言能力的主战场,SFT 主要教输出格式与指令遵循,对齐则校准价值观与偏好。本文结合三阶段分工、知识类型划分,以及 LIMA 等研究所提出的 表层对齐假说,梳理「微调到底能不能注入知识」这一争论背...

大模型预训练微调与对齐三阶段 一篇大模型从「零」到「能用」,通常经历 预训练 → 指令微调(SFT)→ 对齐(RLHF / DPO) 三段。三段各自往模型里注入的能力并不相同:预训练是事实与语言能力的主战场,SFT 主要教输出格式与指令遵循,对齐则校准价值观与偏好。本文结合三阶段分工、知识类型划分,以及 LIMA 等研究所提出的 表层对齐假说,梳理「微调到底能不能注入知识」这一争论背...

船舶AIS自动识别系统简介 本文介绍海事领域 AIS(Automatic Identification System,自动识别系统) 的定位、技术组成及其与物联网的关系。AIS 是船—船、船—岸之间的专用无线电广播识别系统,在现代智慧航运与船联网平台中常作为数据采集的重要来源之一。 参考与延伸阅读: ITU-R M.1371(AIS 技术建议书):https://www....

html-video技能使用简介 本文介绍 Open Design 出品的 html-video 技能:以 HTML/CSS 动画为画面、Playwright 录屏与 ffmpeg 编码生成 MP4,并可对接 MiniMax 合成旁白与烧录字幕。内容基于实际踩坑与跑通经验整理,路径与业务文案已做抽象化处理,便于在 Cursor Skills 工作区复用。 参考与延伸阅读: ...

WrenAI Classic与Commercial及新版CLI路线 2026 年 5 月,Canner 完成 Wren 开源仓库整合:main 分支转向 面向 AI Agent 的 Open Context Engine,旧版 Docker 成套 Web 产品 Wren GenBI Classic 已 sunset。本文从产品线定位、Classic 与 Commercial 能力差异...
– title: HDBSCAN算法超参数说明 date: 2026-06-29 15:00:00 categories: [AI, ML] tags: [AI, ML, 聚类, HDBSCAN] image: path: /assets/img/posts/common/ml.jpg — HDBSCAN算法超参数说明 适用对象:hdbscan 库(scikit-learn-c...

医学影像常见术语与应用场景 根据 RadiAnt DICOM Viewer 中文官网首页 的栏目与用语 整理、释义,建立影像阅片与 PACS 相关词汇表;在官网表述基础上做了归纳与延伸。非 RadiAnt 官方文档,亦 非 诊疗或产品使用手册。 目录 一、背景:首页在讲什么 二、核心系统名词 三、多模态 DICOM 类型 四、阅片基础操作 五、工作流场...

医学影像常见文件格式与查看工具 梳理临床与科研中常见的 医学影像文件格式(DICOM、NIfTI、NRRD、WSI 等):中文名称、结构特点、所含信息及常用查看工具。侧重 AI 与数据预处理 视角;非诊疗建议,临床以院内 PACS 规范为准。 目录 一、总览:临床与科研两条线 二、DICOM(医学数字成像与通信标准) 2.4 CT 与 MRI...

Atlas300I-Duo国产大模型部署与精度支持说明 适用于 Atlas 300I Duo 推理卡(Ascend 310P3),如 TaiShan 200 + 8×310P3(4 张 Duo / 8 Chip)。说明 FP16 / BF16 硬件约束、MindIE-LLM 国产模型(Qwen、GLM、Kimi)在 300I Duo 上的支持判读与部署速查。 一、硬件对算子精...

胸片多标签分类疾病检测技术简介 以开源库 TorchXRayVision 为主线,整理胸片多标签分类疾病检测的技术要点:框架与公开数据集、预训练权重下载、整图 0/1 监督与 DenseNet、增类标注,以及质控 / Grad-CAM / 解剖分割等增强能力。库不附带训练影像;权重托管于 GitHub Releases v1(文档亦称 1.x)。非诊疗建议。 参考与延伸阅读: ...

医疗影像AI通用逻辑与第一性原理 非诊疗建议。医疗影像里模型名目繁多,初学者容易被各种 Net 淹没。本文从任务类型、通用流水线、特征与决策、局部与全局几层,说明「通用逻辑」是什么、为什么不是「一个模型通吃一切」。帮助建立整体认知,不替代课程、论文与临床规范。 目录 一、结论先行 二、第一性原理:任务类型 三、通用流水线 四、特征提取与决策头 五、CN...