机器学习基本概念

发布于 2021-01-24

一.泛化误差和经验误差 1.泛化误差 对于某函数$h$,定义它的泛化误差(英文:generalization error),也称为 …


PCA数学推导

发布于 2020-10-05

PCA数学推导 给定两个两个数据如下 $X$ $Y$ $a$ $a1$ $b1$ $b$ $a2$ $b2$ $$ \boldsy …


机器学习算法-Apriori

发布于 2020-10-05

关联分析(Apriori) 基本概念 项集 项集是指若干个项的集合 支持度 支持度定义为数据集中包含该项集的记录的比例,或者说几个 …


机器学习算法-Kmeans

发布于 2020-10-03

K-均值聚类算法(K-Means) 算法思路 算法目的 对于样本集$D=\lbrace x_1,x_2,x_3….x_n\rb …


机器学习算法-回归树(CART)

发布于 2020-10-02

回归树(regression tree) 前提知识 决策树 ID3算法中,选择的是信息增益来进行特征选择,信息增益大的特征优先选择 …


机器学习算法-LR(linear)

发布于 2020-10-01

线性回归(LR) 基本概念 给定一个由d个属性决定的示例$x=(x_{1},x_{2},…)$,线性模型试图学得一个通过属性的 …


机器学习算法-adaboost

发布于 2020-09-29

迭代算法(adaboost) 算法介绍 Adaboost算法基本原理就是将多个弱分类器(弱分类器一般选用单层决策树)进行合理的结合 …


机器学习算法-SVM

发布于 2020-09-27

支持向量机(SVM) 前言 SVM(Support Vector Machine)是一种寻求最大分类间隔的机器学习方法,广泛应用于 …


机器学习算法-LR

发布于 2020-09-24

逻辑回归(LR) 线性模型 基本概念 给定一个由d个属性决定的示例$x=(x_{1},x_{2},…)$,线性模型试图学得一个 …


机器学习算法-NBM

发布于 2020-09-22

朴素贝叶斯(NBM) 实现思路 朴素贝叶斯(NBM)是以贝叶斯定理为基础并且假设特征条件之间相互独立的方法,先通过已给定的训练集, …