Chapter 03
对数函数
对数表示「底乘几次能得到这个数」,是指数的逆运算,在深度学习的损失与概率式中与指数一起使用。
home.mathDiagramTitle
home.mathDiagramDescription
对数是指数的逆。 表示 。下图为 与其反函数 的图象。
例:,,,(当 时, 即为 )
紫:,青绿:
什么是对数函数
对数是指数的逆概念。当 时,把「 乘几次得到 」写成 。其中 是底, 是真数, 是对数值(指数)。
例: 所以 。()。底为 时写成自然对数 ,在深度学习与统计中常用。
对数和与商:(积在对数下变和),(商变差)。AI 中概率相乘时常用这种形式。
在AI中损失函数(如交叉熵)和概率式里会用到 ,把乘法变成加法,便于计算与求导。为什么用对数? 概率连乘会变得很小,用 把积变成和,计算更稳定,梯度下降也更好处理。
深度学习的损失函数常用概率的 来度量「错多少」。掌握对数能理解「为什么用 」。
概率连乘会变得很小。用 把积变成和,计算更稳定,梯度下降也更好处理。
在AI里对数用来把概率或分数放到对数尺度上。交叉熵损失用正确类别的对数概率的负值,使预测越对损失越接近 0。对数和 在损失与概率式中常出现。
| 例 | 值 |
|---|---|
| 3() | |
| 2 | |
| 2 |
仅当真数是底的整数次幂时,对数值才是整数。
对数中常用运算(在 AI 损失与概率式中常用):
| 运算 | 公式 | 说明 |
|---|---|---|
| 对数和 | 积→和 | |
| 对数差 | 商→差 | |
| 幂 | 指数提前 |
| 例 | 计算 |
|---|---|
| 对数和 | |
| 对数差 |
在下面题目中求对数值、真数、对数和或对数差。