发布时间：2026/10/5 4:12:51
就是图文对然后编码计算得到文本向量和图像向量之后计算相似度。训练的目的就是使得对角线上的损失是最小的然后如何将clip用于分类任务其实就是将类别直接填入提示词中这是一个模板直接就构成一个分类器了推理阶段输入图像然后和这些类别的文本向量进行计算看和谁的相似度最高损失计算clip使用对称的对比损失实际是两个交叉熵损失损失1图像-文本 给定图像I预测正确的文本损失2文本-图像给定文本T预测正确的图像将两部分损失加起来反向更新同时更新 文本编码和图像编码的参数clip损失计算不管那么多细节了就是找个损失就是计算了文本和图像之间的相似度对于这个矩阵来讲N*N只需要计算一次就行。横着看就是文本对图像的相似度竖着看就是图像对文本的相似度。然后在计算的时候是使得正对角线的上的相似度尽可能大其他的尽可能小是要看全局的。这个全局指的还是一个行或者是一个列这个损失就是会计算。这个zi,j会去1和-1那么当ij相等的时候就是1这个时候就希望相似度高这样log得到的数值就小损失就小
Qwen2架构详解：VibeThinker-3B-8bit背后的技术原理与创新点 【免费下载链接】VibeThinker-3B-8bit 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/VibeThinker-3B-8bit VibeThinker-3B-8bit是基于Qwen2架构构建的轻量级AI模型，由m…
多GPU部署Kimi-K2.5-NVFP4：8卡MI350环境下的负载均衡与性能测试终极指南 【免费下载链接】Kimi-K2.5-NVFP4 项目地址: https://ai.gitcode.com/hf_mirrors/amd/Kimi-K2.5-NVFP4 Kimi-K2.5-NVFP4是一款基于AMD MI300/MI350/MI355硬件微架构优化的高性能AI模型…
7个实用技巧：用gemma-4-e4b-it-qat-OptiQ-4bit构建本地AI应用 【免费下载链接】gemma-4-e4b-it-qat-OptiQ-4bit 项目地址: https://ai.gitcode.com/hf_mirrors/mlx-community/gemma-4-e4b-it-qat-OptiQ-4bit gemma-4-e4b-it-qat-OptiQ-4bit是一款基于MLX框架…
SerenityOS 命令行选项解析指南：getopt 与 getopt_long 用法、返回值与底层实现 【免费下载链接】serenity The Serenity Operating System 🐞 项目地址: https://gitcode.com/GitHub_Trending/se/serenity 导读 本文以 getopt(3) 手册 为核心&a…
每年大促节点，群里永远有人在问同一个问题：“38元的轻量服务器到底怎么抢？为什么我每次点进去都是已售罄？68元直购和99元的ECS我到底选哪个？”作为一个常年帮团队和自己采购云服务器的老用户，我太清楚这种纠…
为 AI 代理的 Review 动作编写 Cedar 审批门控策略：review-agent-governance 策略编写实战指南 【免费下载链接】agents Multi-harness agentic plugin marketplace for Claude Code, Codex, Cursor, OpenCode, GitHub Copilot, and Google Antigravity 项目地址:…
PaddleOCR 手写数学公式识别算法 CAN 实战指南：Counting-Aware Network 训练、评估与推理部署 【免费下载链接】PaddleOCR Turn any PDF or image document into structured data for your AI. A powerful, lightweight OCR toolkit that bridges the gap between i…
/* MD / 富文本中的 .toc（含博客园搬家等嵌套结构）；.toc-box 在侧栏，不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p（:empty 仍占 20px），一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …
openai-agents-python 多模型接入指南：深入解析 AnyLLMModel 适配层与 any-llm 路由 【免费下载链接】openai-agents-python A lightweight, powerful framework for multi-agent workflows 项目地址: https://gitcode.com/GitHub_Trending/op/openai-agents-pyth…
