逻辑回归实战详细代码，含注释。逻辑回归利用最优化算法梯度下降来找最佳回归系数。用其做实战预测疝气病症的病马死亡率。

使用C++ 实现的布尔表达式的递归下降 得到推导过程 词法分析 以及逆波兰式

使用多项式拟合一个周期内、加入噪声的正弦曲线。 语言：MATLAB 求解方式：由于自己写的梯度下降函数收敛太慢，因此调用MATLAB梯度下降优化函数；后期用共轭梯度方法求解，收敛较快。代码都在里面，但是比较乱。

采用动量梯度下降算法训练 BP 网络。 训练样本定义如下： 输入矢量为 p =[-1 -2 3 1 -1 1 5 -3] 目标矢量为 t = [-1 -1 1 1] 有注释

机械工程专业，针对优化设计课程的最速下降法求某一函数的最小值

test2: 一、 基本最小二乘法一次算法 二、 基本最小二乘法递推算法 三、 最小二乘遗忘因子一次完成算法 四、 最小二乘遗忘因子递推算法 五、 最小二乘限定记忆算法 六、 最小二乘偏差补偿算法 七、 增广最小二乘算法 八、 广义最小二乘算法 test3: 一、 辅助变量自适应滤波算法 二、 辅助变量纯滞后算法 三、 辅助变量Tally原理算法 四、 多级最小二乘算法 五、 各类改进最小二乘算法的特点 test4: 1、 第二类随机性辨识问题的梯度校正 2、 随机牛顿法 test5: 1、 递推的极大似然估计 2、 预报误差参数辨识 test6: 1、 根据Hankel矩阵秩估计模型阶次(弱噪声) 2、 根据Hankel矩阵秩估计模型阶次(强噪声) 3、 利用行列式比估计模型阶次（白噪声） 4、 利用行列式比估计模型阶次（有色噪声） 5、 利用残差的方差估计模型阶次（白噪声） 6、 利用残差的方差估计模型阶次（有色噪声） 7、 AIV定阶法（白噪声） 8、 AIV定阶法（有色噪声） test7: 1、 一阶惯性+纯滞后环节-----两点法 2、 面积法1 3、 levy法

递归下降语法分析程序要求： 忽略注释； 有出错恢复处理功能； 显示错误格式“第xx行出现xxx错误”

《最优化方法与程序设计》一书作者为倪勤，本书系统地介绍了非线性优化基本理论、方法与程序设计。主要内容有：线搜索与信赖域法，最速下降法与牛顿法，共轭梯度法，拟牛顿法，非线性最小二乘问题的解法，罚函数法，可行方向法，二次规划问题的解法，序列二次规划法等。本书的主要阅读对象是数学专业的本科生与研究生，非数学专业的研究生，对优化方法感兴趣的教师与科学技术人员。读者需要具备微积分、线性代数和Matlab语言方面的初步知识。

LogiReg_data.txt 前两列为特征（成绩），第三列为录取与否