董章鱼是个攻城狮

上一节通过词汇表将 token 文本转换为数值，也就是转换为 token ID ，这之后计算机便可以进行下一步的操作了。 但是这里我抛出一个问题：计算机在进行运算时，可以基...

前面几节一直在介绍 token 相关的内容，相信你看到这里，对 token 肯定很了解了吧。如果对 token 本身还有其他疑问，可以在本文下留言。 本节开始，进入下一步骤...

在你了解了 token 的概念以及对文本进行分词的大致过程后。 本节给出一个使用 GPT4 模型（当前 OpenAI 最强大的模型）拆分 token 并将拆分结果进行可视化...

前面两节分别通过两个代码示例展示了模型将文本转换为 token 之后是什么样的，希望你可以对此有一个感性的认识。 本节来简要介绍一下将一个连续的文本转换为 token 序列...

在上一节，利用 BERT 模型将一个文本进行了 token 化。那你可能会问，是不是所有的模型将同一个文本 token 化之后，结果都一样呢？ 当然不是。 这是因为不同的模...

上一节学习了利用 Canny 算法来完成一个图片的边缘检测，从而可以区分出图像的边缘。 本节再了解一个计算机视觉中更常见的应用，那就是把图片的前景和背景的分离，也叫做图像分...

本节来看一个利用传统计算机视觉方法来实现图片边缘检测的方法。 什么是边缘检测？ 边缘检测是通过一些算法来识别图像中物体之间或者物体与背景之间的边界，也就是边缘。 图像边缘通...

在上一节，我们介绍了 token 的概念。 你可以这么认为， token 是自然语言处理场景（如文本生成、AI聊天）下，AI 模型能够处理的最小单位。 在计算机视觉中，模型...

可以说，学习自然语言处理、大模型、Transformer 任何一个技术，都离不开 token这个概念。 本专栏就从这个最基础的概念开始讲起。 多年前，第一次接触到自然语言处...

本节一起绘制一个可视化的高斯滤波器，同时对一个彩色图像增加高斯噪声，最后通过一个高斯滤波器对图像进行降噪处理。 就像上节说的那样，滤波不是学习重点，下面通过实操了解下原理即...

大家好啊，我是董章鱼。 如果你平时使用苹果电脑的 MacOs 系统，或者使用 Linux 终端，或者使用 Windows Shell 进行工作，肯定会遇到如下的问题。 “如...

这一节在上一节的基础上，再进阶一下，来了解一下什么是高斯滤波。 首先，如上一节所说，均值滤波是利用一个窗口在图片上滑动，每次都计算窗口内能看到的像素的平均值，然后将平均值作...

在前 5 节，从最基础的像素开始了介绍，并且着重介绍了 RGB 图片和 YUV 图片以及通道的概念。 其实这几节的内容，很多细节和知识了解即可。 你只需要知道计算机在处理图...

上一篇描述了 RGB 这种彩色图像表示，这一节我们再看另一种图像表示：YUV。 YUV 和 RGB 不同，区别主要在于颜色信息的存储和传输上。 YUV 是什么呢 YUV 表...

大家好啊，我是董章鱼。 最近发生了两件事让我重新开始审视 AI。 第一件事，是我花了大概3天的时间，写了一个文档管理程序，用来管理我多如牛毛的文档。 可以实现批量修改、复制...

在2、灰度与色彩的最后，给出了一个由彩色图片转成灰度图的示例，并且通过 color_image.mode获取了图片的格式：彩色图片获取到的格式为 RGBA，灰度图为 L。 ...

大家好啊，我是董章鱼。 上一篇文章1、图像和像素中说到：像素是计算机视觉任务中的原材料。 很多图像处理任务以像素的局部性为基础，在不同尺度下完成图像特征的提取。你可以这么理...