读芯术七个关键因素:如何选择出最佳机器学习算法?
全文共2240字 , 预计学习时长6分钟
本文插图
图源:unsplash
任意的机器学习问题都可以应用多种算法 , 生成多种模型 。 例如 , 垃圾邮件检测分类问题可以使用多种模型来解决 , 包括朴素贝叶斯模型、逻辑回归模型和像BiLSTMs这样的深度学习技术 。
拥有丰富的选择是好的 , 但难点在于 , 如何决定在生产中实现哪个模型 。 虽然我们有许多性能指标来评估一个模型 , 但为每个问题实现每个算法是不明智的 。 这需要大量的时间和大量的工作 , 因此 , 知道如何为特定的任务选择正确的算法至关重要 。
在本文中 , 我们将研究可以帮助选择最适合你的项目和特定业务需求的算法的因素 , 理解这些因素将使你理解模型将要执行的任务和问题的复杂性 。
可解释性
当我们讨论算法的可解释性时 , 讨论的是它解释其预测的能力 , 缺乏这种解释的算法被称为黑箱算法 。
像k-最近邻算法(k-nearest neighbor , KNN)这样的算法通过特征重要性具有较高的可解释性 , 而线性模型这样的算法通过赋予特征的权重具有可解释性 。 当考虑你的机器学习模型最终会做什么时 , 了解算法的可解释性变得非常重要 。
对于诸如检测癌细胞或判断房屋贷款的信用风险等分类问题 , 必须了解系统结果背后的原因 。 仅仅预测是不够的 , 我们需要能够评估它 。 即使预测是准确的 , 我们也必须了解导致这些预测的过程 。 如果理解结果背后的原因是问题的要求 , 那么需要相应地选择合适的算法 。
数据点的数量和特征
本文插图
图源:unsplash
在选择合适的机器学习算法时 , 数据点的特征和数量起着至关重要的作用 。 根据用例的不同 , 机器学习模型将与各种不同的数据集一起工作 , 这些数据集的数据点和特征也会有所不同 。 在某些情况下 , 选择模型需要理解模型如何处理不同大小的数据集 。
像神经网络这样的算法可以很好地处理大量数据和大量特征 。 但有些算法 , 如支持向量机 , 只能处理有限数量的特征 。 在选择算法时 , 一定要考虑到数据的大小和特征的数量 。
数据格式
数据通常来自于开源和自定义数据资源的混合 , 因此它也可以以各种不同的格式出现 。 最常见的数据格式是分类的和数值的 。 任何给定的数据集可能只包含分类数据、数字数据或两者的组合 。
算法只能处理数值数据 , 因此如果你的数据在格式上是分类的或非数值的 , 那么你将需要考虑将其转换为数值数据的过程 。
本文插图
图源:unsplash
线性数据
在选择模型之前 , 了解数据的线性是必要的一步 。 确定数据的线性有助于确定决策边界或回归线的形状 , 这反过来指导我们使用的模型 。 一些诸如身高-体重的关系可以用线性函数表示 , 这意味着当一个增加时 , 另一个通常以相同的值增加 , 这种关系可以用线性模型表示 。
本文插图
通过散点图理解数据的线性度
了解这一点将帮助你选择合适的机器学习算法 。 如果数据几乎是线性可分的 , 或者可以使用线性模型表示 , 那么支持向量机、线性回归或逻辑回归等算法是一个不错的选择 。 此外 , 还可以采用深度神经网络或集成模型 。
训练时间
训练时间是算法学习和创建模型所花费的时间 。 对于像针对特定用户的电影推荐这样的用例 , 每次用户登录时都需要对数据进行培训 。 但是对于像库存预测这样的用例 , 需要每秒钟都对模型进行训练 。 因此 , 考虑训练模型所花费的时间是至关重要的 。
- 量子科技,爆发!有项关键技术中国已领先世界
- 大降|共同药业闯关IPO关键期净利大降六成
- 婆婆|化险为夷!90岁独居婆婆家中倒地20分钟,关键时刻,他们出手了....
- 游人馆|炉石传说:又强又好玩的卡组来了,提前下场的大哥是关键
- LOL嘴强老司机|老骥伏枥!卡萨六进世界赛首次闯入四强!从决胜局拉哥到关键先生
- 部落|部落冲突快钱不值得吗关键是没有这些,部落首领会忽视你
- 歼-20|又一国看上国产战机,关键部位采用歼-20技术,一口气要采购40架
- 新华网|多个指标由负转正!关键数据透视中国经济“三季报”
- 上海|ABB集团董事长傅赛:技术是增强城市和经济韧性的关键
- 技术|ABB集团董事长傅赛:技术是增强城市和经济韧性的关键