- 综合排序
- 最热优先
- 最新优先
- 来自专栏小小挖掘机
特征工程｜连续特征的常见处理方式（含实例）
连续特征离散化可以使模型更加稳健，比如当我们预测用户是否点击某个商品时，一个点击该商品所属类别下次数为100次和一个点击次数为105次的用户可能具有相似的点击行为，有时候特征精度过高也可能是噪声，这也是为什么在 连续特征经常是用户或者事物对应一些行为的统计值，常见的处理方法包括： 归一化 标准化 离散化 缺失值处理 这里要特别注意一下归一化和标准化的区别，在平常的使用中，很多同学都容易把这两者的概念混淆，因为两者的英文翻译是一样的 特征经过归一化或者标准化处理之后对于模型训练的好处有： 提升模型精度。 因为使不同量纲的特征处于同一数值量级，减少方差大的特征的影响。在KNN中，我们需要计算待分类点与所有实例点的距离。 离散化 数据离散化（也叫数据分组）是指将连续的数据进行分组，使其变为一段段离散化的区间，离散化后的特征根据其所在的组进行One-Hot编码。 例如，将一组变量(1,7,12,12,22,30,34,38,46)分成三组，去重后，变量个数为 8，所以该组变量的分组数目为 8。
1.7K40发布于 2020-08-21 - 来自专栏用户7873631的专栏
详解： 8，连续和不连续最后与开始的选择器
DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-<em>8</em>"> <title>Document</title> <style
75410发布于 2020-10-28 - 来自专栏Python数据科学
特征选择：8 种常见的特征过滤法
根据特征选择的形式又可以将特征选择方法分为三种 Filter：过滤法，按照发散性或者相关性对各个特征进行评分，设定阈值或者待选择阈值的个数，选择特征。 通过一定对方法剔除几乎没有影响的特征，选出影响较多对特征。特征选择在维度较大时尤为重要。 它是根据各种统计检验中的分数以及相关性的各项指标来选择特征。 方差过滤 这是通过特征本身的方差来筛选特征的类。 比如一个特征本身的方差很小，就表示样本在这个特征上基本没有差异，可能特征中的大多数值都一样，甚至整个特征的取值都相同，那这个特征对于样本区分没有什么作用。 其中F检验分类用于标签是离散型变量的数据，而F检验回归用于标签是连续型变量的数据。 F检验的本质是寻找两组数据之间的线性关系，其原假设是”数据不存在显著的线性关系“。它返回F值和p值两个统 计量。
9.9K90发布于 2021-07-16 - 来自专栏NewBeeNLP
KDD2021 | 华为AutoDis：连续特征的Embedding学习框架
但是，Embedding模块却很少有工作进行深入研究，特别是对于连续特征的embedding方面。 1、连续特征处理 CTR预估模型的输入通常包含连续特征和离散特征两部分。 ，通常难以有效捕获连续特征中信息。 这类方法通常是两阶段的，即首先将连续特征转换为对应的「离散值」，再通过「look-up」的方式转换为对应的embedding。 首先探讨一个问题，为什么需要对连续特征进行离散化呢？ 显然，这种方法参数量巨大（因为你可以有无穷个连续特征取值！），无法在实践中进行使用。
2.2K10发布于 2021-12-02 - 来自专栏用户11994342的专栏（2）
什么是连续特征离散化？分桶(Bucketing)有什么技巧？
什么是连续特征离散化？分桶(Bucketing)有什么技巧？本文收录于Github：AI-From-Zero项目——一个从零开始系统学习AI的知识库。如果觉得有帮助，欢迎⭐Star支持！ 这就是连续特征离散化的本质：把无限或庞大的连续数值空间，映射到有限的几个离散类别上。在机器学习的世界里，我们经常会遇到这样的问题：用户的年龄、收入、消费金额，这些都是连续的数字。 增强鲁棒性：异常值和噪声的影响被削弱引入非线性：让线性模型也能学习复杂的分段规律便于特征交叉：离散化后的特征更容易组合出有价值的新特征二、什么是连续特征离散化简单来说，连续特征离散化就是把连续的数值转换成有限的几个类别 ：风控评分卡在信用评分系统中，用户的收入、负债比等连续特征会被离散化成5-10个桶，然后用WOE编码转换成风险分数。 发展趋势自动化分桶：AutoML工具能自动尝试不同的离散化方案，但业务知识仍需人工注入自适应分桶：根据数据分布动态调整分桶边界深度学习中的离散化：在Embedding层中自动学习离散化表示六、总结与思考核心要点回顾：连续特征离散化是把连续值映射到有限类别的技术常用方法包括等宽分桶
9610编辑于 2026-04-10 - 来自专栏小黑在哪里
初识ABP vNext（8）：ABP特征管理
定义特征 应用特征 用户数量 社交登录 前言 上一篇提到了ABP功能管理（特征管理），它来自ABP的FeatureManagement模块，ABP官方文档貌似还没有这个模块的相关说明，但是个人感觉这个模块非常实用 ，下面就简单介绍一个特征管理的基本应用。 定义特征 在Application.Contracts项目中添加Features文件夹。 现在可以为不同租户设置不同的特征值。 应用特征 特征值定义好了，接下来就是如何应用了，首先看一下用户数量如何控制。 社交登录 特征值也可以在前端使用，在/abp/application-configuration中就可以获取到。 ? 拿到特征值，前端也可以做一些差异化功能，比如这里的是否支持社交登录。 ? ?
1K10发布于 2020-09-08 - 来自专栏华章科技
详解数据资产的8大重要特征
▲图2-12 数据资产运营闭环 以标签为组织载体的数据资产区别于传统的数据资源，具有8个显著而独特的重要特征，如图2-13所示。 ? ▲图2-13 数据资产8大特征 01 能确权 所有的数据资产都应该是由某企业或机构合法取得或有效管理的数据源清洗加工而来，否则不能称为资产。
3.7K30发布于 2021-07-12 - 来自专栏机器学习/数据可视化
8种数值变量的特征工程方法
4、KBinsDiscretizerKBinsDiscretizer是Scikit-learn中的一个预处理类，设计用于将连续特征转换为离散分类特征。这个过程被称为离散化、量化或分箱。 某些具有连续特征的数据集可能会从离散化中受益，因为它可以将具有连续属性的数据集转换为仅具有名义属性的数据集。其主要目标是将连续变量的范围划分为特定数量的区间（或箱）。 该算法的工作原理如下：分析连续特征的分布基于这个分布创建预定义数量的箱将每个原始值分配到适当的箱中用箱标签或箱的独热编码替换原始值关键参数：n_bins：要创建的箱数。 我们将通过观察线性回归和决策树在学习连续模式与离散化模式时的性能来展示应用。创建一个随机但半线性数字的模拟数据集，将模型应用于连续数据，然后将相同的数据集应用于离散化特征。 8、主成分分析 PCA主成分分析（PCA）将一组可能相关的变量转换为一组线性不相关的变量，称为主成分。
54900编辑于 2025-05-09 - 来自专栏后端技术探索
新模型预测新冠疫情数据（连续8日准确）
昨日预测与实际对比 截至2月10日24时累计 病例 预测 实际 偏差 确诊 42594 42638 -0.10% 死亡 1010 1016 -0.63% 治愈 3968 3996 -0.71% 连续准确天数 点击图可放大↑↑↑ 预测记录 截止日期 病例 预测 实际 误差 2-9 确诊死亡治愈 399739013302 401719083281 -0.49%-074%+0.64 2-8 确诊死亡治愈 380988312601
1.5K20发布于 2020-02-25 - 来自专栏Y大宽
4️⃣ 核酸序列特征分析(8):重复序列的查找
[序列比对和序列特征分析总目录](https://www.jianshu.com/p/878f2b2495ae 基因组序列主要构成成分是基因序列，重复序列和基因间序列。
3.7K30发布于 2019-02-26 - 来自专栏深度学习和计算机视觉
【扩散模型的应用】用于红外小目标检测的基于Diffusion的连续特征表示
为了克服这些限制，我们提出了一种基于扩散的连续特征表示网络（DCFR-Net），包括两个关键分支：基于扩散的连续高分辨率特征表示（DCHFR）和ISDTD。 显然，我们的训练策略包括两个连续的阶段。在第一阶段，我们通过自监督学习方案训练DCHFR以获得红外目标的精细连续HR特征表示。 因此，调制结果mi携带了详细的控制信息，使得在连续域中提取细粒度和HR特征的性能更优越。此外，为了实现连续特征而不是离散特征，我们在U-Net的解码路径中插入了N − 1个基于坐标的INR。 因此，Dθ的最终定义是： 与(8)相比，将额外的位置编码输入到隐式神经函数Dθ中。 如图3所示，我们首先将连续特征图M沿特征通道维度分割成全局部分Mg和局部部分Ml。
95910编辑于 2024-12-06 - 来自专栏计算机视觉理论及其实现
Lipschitz连续
Lipschitz（利普希茨）连续定义： 有函数f(x)，如果存在一个常量K，使得对f(x)定义域上（可为实数也可以为复数）的任意两个值满足如下条件：?? 那么称函数f(x)满足Lipschitz连续条件，并称K为f(x)的Lipschitz常数。 Lipschitz连续比一致连续要强。它限制了函数的局部变动幅度不能超过某常量。
2.3K10编辑于 2022-09-03 - 来自专栏AI 算法笔记
特征工程之特征缩放&特征编码
（上） 特征工程之数据预处理（下） 本篇文章会继续介绍特征工程的内容，这次会介绍特征缩放和特征编码，前者主要是归一化和正则化，用于消除量纲关系的影响，后者包括了序号编码、独热编码等，主要是处理类别型、文本型以及连续型特征 这背后就是需要采用“海量离散特征+简单模型”，还是“少量连续特征+复杂模型”的做法了。 对于线性模型，通常使用“海量离散特征+简单模型”。 特性 1.在工业界很少直接将连续值作为逻辑回归模型的特征输入，而是将连续特征离散化为一系列 0/1 的离散特征。 其优势有： 离散化之后得到的稀疏向量，内积乘法运算速度更快，计算结果方便存储。 假设有连续特征j ，离散化为 N个 0/1 特征；连续特征 k，离散化为 M 个 0/1 特征，则分别进行离散化之后引入了 N+M 个特征。 /www.huaxiaozhuan.com/%E7%BB%9F%E8%AE%A1%E5%AD%A6%E4%B9%A0/chapters/8_feature_selection.html
1.7K20发布于 2019-08-16 - 来自专栏脑电信号科研科普
PNAS:基于频率标记EEG分离视觉皮层数值和连续幅度提取的数值神经特征
然而，一组对象不仅具有数量特征，而且还具有多个连续的视觉特征，包括单个对象的尺寸和集合的范围。 P10，PO8)。 本研究中采用的频率标记法使研究人员能够克服数值和连续尺度之间的相关性问题，这意味着研究人员可以选择自然维度作为视觉特征的低水平变化的一个强有力的比较点。 因此，人类视觉似乎被提供了对数值的早期辨别机制，其操作方式与解码低级视觉特征所涉及的机制相同，这表明数值也可以被认为是主要的视觉特征。数值的拓扑不变性已被提出为区分数字与连续尺度的关键视觉属性。 开创性的ANS理论提出，与连续尺度相关的低级视觉特征必须在所谓的归一化阶段被消除，该归一化阶段是在以抽象的、非模态的方式提取数字之前。
67300发布于 2020-11-20 - 来自专栏机器学习算法原理与实践
特征工程之特征表达
主要包括缺失值处理，特殊的特征处理比如时间和地理位置处理，离散特征的连续化和离散化处理，连续特征的离散化处理几个方面。 1. 首先我们会看是该特征是连续值还是离散值。如果是连续值，那么一般有两种选择，一是选择所有有该特征值的样本，然后取平均值，来填充缺失值，另一种是取中位数来填充缺失值。 离散特征的连续化处理 有很多机器学习算法只能处理连续值特征，不能处理离散值特征，比如线性回归，逻辑回归等。那么想使用逻辑回归，线性回归时这些值只能丢弃吗？当然不是。 我们可以将离散特征连续化处理。 最常见的离散特征连续化的处理方法是独热编码one-hot encoding。 连续特征的离散化处理 对于连续特征，有时候我们也可以将其做离散化处理。这样特征变得高维稀疏，方便一些算法的处理。
1.1K30发布于 2018-08-07 - 来自专栏FunTester
连续测试策略
何为连续测试 「连续测试」是一种常见软件测试类型，其中涉及经常在连续交付过程的多个阶段进行不同类型的测试以评估软件质量，以及早发现BUG，最终提供高质量的软件和增强业务连续性。 连续测试在DevOps中使用自动化工具起着关键作用，自动化工具可帮助开发人员快速获取有关缺陷的反馈并做出相应的更改，相关内容请参考如何在DevOps中实施连续测试。 高质量连续测试的挑战 大多数敏捷团队都希望进行频繁的部署，但是由于缺乏有效的连续测试交付策略，大多数组织甚至无法缩短其软件开发周期。 选择测试自动化工具 建立全面的连续测试策略是一项长期任务，但是选择正确的测试自动化工具对于实现完全稳定性至关重要。 一个好的自动化工具将通过激活连续的发布和部署、减少时间和维护成本，增加代码的可重用性以及提供更高的投资回报来始终为组织增加价值。
1.1K30发布于 2020-11-09 - 来自专栏机器学习算法原理与实践
特征工程之特征选择
后面还有两篇会关注于特征表达和特征预处理。 1. 特征的来源 在做数据分析的时候，特征的来源一般有两块，一块是业务已经整理好各种特征数据，我们需要去找出适合我们问题需要的特征；另一块是我们从业务特征中自己去寻找高级数据特征。 选择合适的特征 我们首先看当业务已经整理好各种特征数据时，我们如何去找出适合我们问题需要的特征，此时特征数可能成百上千，哪些才是我们需要的呢？ 这个主要用于输出连续值的监督学习算法中。我们分别计算所有训练集中各个特征与输出值之间的相关系数，设定一个阈值，选择相关系数较大的部分特征。 第三个可以使用的是假设检验，比如卡方检验。 寻找高级特征 在我们拿到已有的特征后，我们还可以根据需要寻找到更多的高级特征。比如有车的路程特征和时间间隔特征，我们就可以得到车的平均速度这个二级特征。
1.4K20发布于 2018-08-07 - 来自专栏算法研习社
特征工程（中）- 特征表达
特征属性 特征按其取值类型不同，可以简单分为连续型和离散型。而离散型特征，又可以分为类别型和序列型。下面依次简要说明。 连续型特征：取值为连续实数的特征。 比如，身高，175.4cm。 探讨完特征表达需要考虑的因素，下面我们就可以有的放矢，讨论一下特征表达的技术问题。 02 连续型特征 上面说过，根据模型的需要，特征需要做连续化或者离散化的处理。 连续特征已无需再做连续化处理，可以把特征的值直接拿来用，最多再做个归一化什么的就够了。 连续特征的离散化 方法主要有两种，阈值分组和模型离散。 树模型是靠对特征空间进行分割，并在每个子空间中用常量建模，得到预测结果的。 特征划分的结果，最终反映为树的叶子结点，因此用某个连续值特征被划分到哪个叶子结点，自然就实现了连续特征的离散化。 03 离散型特征 对离散特征，我们考虑其连续化和离散化的过程。 离散特征的连续化 一篇文章，由很多不同的单词组成；一个视频，则可以有很多的标签，如演员、导演、地区、语言、豆瓣评分等。
99730发布于 2020-07-21 - 来自专栏机器学习与统计学
特征选择与特征抽取
.也就是说，特征抽取后的新特征是原来特征的一个映射。 也就是说，特征选择后的特征是原来特征的一个子集。 2. 相同点和不同点 特征选择和特征抽取有着些许的相似点，这两者达到的效果是一样的，就是试图去减少特征数据集中的属性(或者称为特征)的数目；但是两者所采用的方式方法却不同：特征抽取的方法主要是通过属性间的关系 ，如组合不同的属性得新的属性，这样就改变了原来的特征空间；而特征选择的方法是从原始特征数据集中选择出子集，是一种包含的关系，没有更改原始的特征空间。 总结 特征选择不同于特征提取，特征和模型是分不开，选择不同的特征训练出的模型是不同的。在机器学习=模型+策略+算法的框架下，特征选择就是模型选择的一部分，是分不开的。
2K31发布于 2019-04-10 - 来自专栏AI深度学习求索
传统特征：HOG特征原理
这样，一个block内所有cell的特征向量串联起来便得到该block的HOG特征。这些区间是互有重叠的，这就意味着：每一个单元格的特征会以不同的结果多次出现在最后的特征向量中。 则一块的特征数为：3*3*9； （5）收集HOG特征 最后一步就是将检测窗口中所有重叠的块进行HOG特征的收集，并将它们结合成最终的特征向量供分类使用。 （6）那么一个图像的HOG特征维数是多少呢？ ，每相邻的4个单元构成一个块（block），把一个块内的特征向量联起来得到36维的特征向量，用块对样本图像进行扫描，扫描步长为一个单元。 最后将所有块的特征串联起来，就得到了人体的特征。 例如，对于64*128的图像而言，每16*16的像素组成一个cell，每2*2个cell组成一个块，因为每个cell有9个特征，所以每个块内有4*9=36个特征，以8个像素为步长，那么，水平方向将有7个扫描窗口
1.6K30发布于 2018-12-11
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号