<p> 对下面的损失函数</p><p> <img src="https://up

Question

对下面的损失函数

1) 请描述损失函数第2项别名和作用，并再列举一个第2项的其他形式。并说明两者的区别

2) 请根据题目求解参数theta的迭代优化公式，写出求解过程。

3）假如现在采用输入一个样本，更新一次参数的方式，参数更新采用theta＝theta＋alpha＊delta（theta）的形式。请问你能想到什么样的加速收敛的方式。