平方数和的最小值

这是一个经典的优化问题。我们要求在约束条件 下,函数 的最小值。

答案是:最小值为

下面提供三种不同的方法来求解。

方法一:柯西 - 施瓦茨不等式 (Cauchy-Schwarz Inequality)

这是解决此问题最直接、最优雅的方法。

柯西 - 施瓦茨不等式的向量形式为:

我们巧妙地选取

并且

将它们代入不等式:

现在我们来计算不等式两边的具体值:

  • 左边:。根据已知条件,这个和为 1。所以左边是
  • 右边第一项:。这是我们要求最小值的目标函数。
  • 右边第二项:

将这些代回不等式,我们得到:

整理一下,就可以得到我们目标函数的下界:

根据柯西 - 施瓦茨不等式,等号成立的条件是向量 成比例。即存在一个常数 ,使得 对所有 都成立。

在我们的例子中,这意味着 ,即

也就是说,当所有的 都相等时,可以取到最小值。

我们将 代入约束条件 中:

所以,当 时, 取得最小值。

此时的最小值为:

这与我们从不等式中得到的下界完全吻合。

方法二:拉格朗日乘数法 (Lagrange Multipliers)

这是一种标准的微积分方法,用于求解带约束条件的极值问题。

  1. 定义目标函数和约束函数:

    • 目标函数:
    • 约束条件:
  2. 构造拉格朗日函数:

  3. 求偏导数并令其为零: 我们对每个 以及 求偏导数。 (对于 )

  4. 求解方程组: 从第一个方程 中,我们得到 。 这表明,在极值点,所有的 都必须相等。

    代入第二个方程(即约束条件):

    现在我们知道了 的值,就可以求出 的值:

    这说明,当 时,函数取得极值。由于该函数的二阶导数(Hessian 矩阵)是正定的,可以确定这是一个最小值点。

  5. 计算最小值: 代入目标函数:

方法三:几何解释

  1. 约束条件: 约束 维空间中定义了一个超平面(Hyperplane)。

  2. 目标函数: 目标函数 是点 到原点 距离的平方。

  3. 问题转化: 问题就变成了:在超平面 上,找一个点,使其到原点的距离最短。

  4. 求解: 从原点到超平面的最短距离,是沿着该超平面的法向量方向的。 超平面 的法向量是 。 因此,距离最近的点 必然在由法向量构成的直线上,即 的形式。

    因为这个点必须在超平面上,所以它要满足约束条件:

    所以,离原点最近的点是

    该点到原点距离的平方就是我们要的最小值:

结论

综上所述,通过三种不同的方法,我们都得到了相同的结果:

的条件下,最小值为 ,这个最小值在 时取得。