之前树先生教过大家如何利用微调打造一个垂直领域的 LLM 专属模型。但是微调一方面需要专业知识，通常需要很多计算资源和时间，以便在不同的超参数设置上训练多个模型并选择最佳的一个，另一方面动态扩展比较差

我的网站上对公式展示效果更好，https://lulaoshi.info/machine-learning/linear-model/minimise-loss-function.html，欢迎访问。 前一节我们曾描述了线性回归的数学表示，最终得出结论，线性回归的机器学习过程就…

选自Paperspace，作者：Ayoosh Kathuria，机器之心编译。 从很大程度上来说，深度学习实际上是在解决大量烦人的优化问题。神经网络仅仅是一个非常复杂的函数，包含数百万个参数，这些参数代表的是一个问题的数学解答。以图像分类为例，AlexNet 就是一个数学函数，…

梯度下降算法针对的是最小优化问题(即求最小值问题)，目的是使目标函数沿最快路径下降到最小值。梯度下降算法家族包括批量梯度下降法、随机梯度下降法、小批量梯度下降法三种。