张芷铭的个人博客

变分”是一个在数学和计算机科学中非常重要的概念,特别是在优化、概率论和机器学习等领域。它通常涉及对某种函数或函数空间进行“变动”或“优化”的过程。变分的应用广泛,尤其是在推导和近似计算中。

基本概念

“变分”(Variational)这个术语源自于变分法(Calculus of Variations),它是研究在给定约束条件下,如何极小化或极大化函数的理论方法。在数学中,变分法通常用于寻找泛函的极值,而泛函是作用于函数的映射。

泛函的定义

一个泛函是将函数映射到实数的规则。形式上,可以表示为:

$$

J[f] = \int_a^b F(x, f(x), f’(x)) , dx

$$

其中 是一个函数, 是其导数, 是泛函中的目标函数。通过变分法,我们要寻找一个函数 ,使得 达到极值。

2. 变分推理(Variational Inference)

在统计学和机器学习中,**变分推理(Variat

Comments