平方数和的最小值
这是一个经典的优化问题。我们要求在约束条件 下,函数 的最小值。
答案是:最小值为 。
下面提供三种不同的方法来求解。
方法一:柯西 - 施瓦茨不等式 (Cauchy-Schwarz Inequality)
这是解决此问题最直接、最优雅的方法。
柯西 - 施瓦茨不等式的向量形式为:
我们巧妙地选取 和 :
令 并且 。
将它们代入不等式:
现在我们来计算不等式两边的具体值:
- 左边:。根据已知条件,这个和为 1。所以左边是 。
- 右边第一项:。这是我们要求最小值的目标函数。
- 右边第二项:。
将这些代回不等式,我们得到:
整理一下,就可以得到我们目标函数的下界:
根据柯西 - 施瓦茨不等式,等号成立的条件是向量 和 成比例。即存在一个常数 ,使得 对所有 都成立。
在我们的例子中,这意味着 ,即 。
也就是说,当所有的 都相等时,可以取到最小值。
我们将 代入约束条件 中:
所以,当 时, 取得最小值。
此时的最小值为:
。
这与我们从不等式中得到的下界完全吻合。
方法二:拉格朗日乘数法 (Lagrange Multipliers)
这是一种标准的微积分方法,用于求解带约束条件的极值问题。
-
定义目标函数和约束函数:
- 目标函数:
- 约束条件:
-
构造拉格朗日函数:
-
求偏导数并令其为零: 我们对每个 以及 求偏导数。 (对于 )
-
求解方程组: 从第一个方程 中,我们得到 。 这表明,在极值点,所有的 都必须相等。
将 代入第二个方程(即约束条件):
现在我们知道了 的值,就可以求出 的值:
这说明,当 时,函数取得极值。由于该函数的二阶导数(Hessian 矩阵)是正定的,可以确定这是一个最小值点。
-
计算最小值: 将 代入目标函数:
方法三:几何解释
-
约束条件: 约束 在 维空间中定义了一个超平面(Hyperplane)。
-
目标函数: 目标函数 是点 到原点 距离的平方。
-
问题转化: 问题就变成了:在超平面 上,找一个点,使其到原点的距离最短。
-
求解: 从原点到超平面的最短距离,是沿着该超平面的法向量方向的。 超平面 的法向量是 。 因此,距离最近的点 必然在由法向量构成的直线上,即 的形式。
因为这个点必须在超平面上,所以它要满足约束条件:
所以,离原点最近的点是 。
该点到原点距离的平方就是我们要的最小值:
结论
综上所述,通过三种不同的方法,我们都得到了相同的结果:
在 的条件下, 的最小值为 ,这个最小值在 时取得。