闫广庆

在模型推理阶段引入知识图谱（Knowledge Graph, KG）可以大幅提升推理的效果，特别是在需要依赖领域知识的任务中。以下是一些应用知识图谱的主要指南，重点是如何将...

人口红利减少：随着中国人口老龄化的加剧，劳动人口逐渐减少。年轻劳动力的供应减少使得依赖低成本劳动力推动的增长模式难以为继，创新和高附加值的经济活动尚未完全填补这一空缺。 技...

产品文档：多模态航空应用系统 1. 产品概述 本产品是一款多模态航空应用系统，旨在通过图像和文字的结合，提高航空行业的运营效率、安全性和服务质量。系统利用先进的图像识别和自...

概述 🤗 PEFT（Parameter-Efficient Fine-Tuning）是一个先进的参数高效微调框架，旨在解决大规模预训练模型微调成本高昂的问题。通过仅微调模...

针对图文理解任务，其中输入为图像和文本，输出为文本的相关基准，以下是一些知名的基准测试和数据集，它们可以用于训练和评估多模态理解模型： 1. Microsoft COCO ...

多模态理解基准是评估多模态模型性能的一套标准测试集和评价准则，它涵盖了多种不同的任务和挑战。以下是各个主要方面的详细介绍： 粗粒度视觉认知 粗粒度视觉认知通常指的是对图像的...

以下是这套生成式语言模型解决任务的流程图概述： 流程图说明： 用户输入：用户输入请求。 上下文相关性理解：分析输入的上下文。 意图识别：识别用户意图，分为查询、计算和生成内...

GLM4-MILINT: Global Military Intelligence Powered by GLM4 项目简介 GLM4-MILINT 是一个基于公开领域高质...

探索RAG技术：解锁数据智能的无限可能 在数据爆炸的时代，如何从海量信息中快速准确地提取并生成有用知识，成为了数据智能领域的核心挑战。RAG（Retrieve-Augmen...

LLaMA-Factory在华为显卡上的实验记录 包括低资源微调、全参数量微调、全参数量预训练、及强化学习。...

flash-attention代码解读：自定义激活函数和反向传播 这段代码实现了几种激活函数及其反向传播的逻辑。让我们逐步解读每个部分的实现和理论基础。 1. bias_g...

```python import os.path import pandas as pd from tqdm import tqdm import glob from pa...

```python from lxml import etree import requests def fetch_html(url): """ 获取网页的HTML内容。...

设计一套针对熟悉ChatGLM、Llama2、Qwen等大型语言模型及其微调技术（如Prompt Engineering、P-Tuning v2、LoRA）的面试题目，旨在...

生成式二维类文本序列大模型（Generative Two-Dimensional Text Sequence Model）是一种先进的人工智能技术，它能够在处理和生成文本数...

入门生成式语言模型（Generative Language Models）涉及以下步骤： 1. 了解生成式语言模型的基本概念 了解生成式语言模型是一种能够生成文本或其他类型...

在这篇博客中，我们深入探讨了从多头注意力（MHA）到多查询注意力（MQA）、分组查询注意力（GQA），直至最新的多头潜在注意力（MLA）的发展历程，特别聚焦于DeepSee...

一、报告背景 随着人工智能技术的不断进步，自然语言处理（NLP）领域取得了显著的成就。本报告旨在构建一个垂直领域的民航生成式模型，并探索不同训练模式和模型选型对模型性能的影...

多模态（X+语言）模型系列介绍 LayoutLM/LayoutLMv2/LayoutLMv3: 这一系列模型是基于多模态（文本+布局/格式+图像）的文档基础模型，专为文档人...