roc什么意思,ROC值什么意思

roc什么意思,ROC值什么意思 1. 业务逻辑数据分析遵循一定的流程,不仅可以保证数据分析每一个阶段的工作内容有章可循,而且还可以让分析最终的结果更加准确,更加有说服力。一般情况下,数据分析分为以下几个步骤:业务理

数据分析面试考点!敲黑板!划重点

1. 业务逻辑

数据分析遵循一定的流程,不仅可以保证数据分析每一个阶段的工作内容有章可循,而且还可以让分析最终的结果更加准确,更加有说服力。

一般情况下,数据分析分为以下几个步骤:

业务理解,确定目标、明确分析需求

数据理解,收集原始数据、描述数据、探索数据、检验数据质量

数据准备,选择数据、清洗数据、构造数据、整合数据、格式化数据

建立模型,选择建模技术、参数调优、生成测试计划、构建模型

评估模型,对模型进行较为全面的评价,评价结果、重审过程

成果部署,分析结果应用

2. 特征工程

包括特征提取、特征构建、特征选择。特征工程的目的是筛选出更好的特征,获取更好的训练数据。因为好的特征具有更强的灵活性,可以用简单的模型做训练,更可以得到好的结果。

3. 数据采集 / 清洗 / 采样

1. 数据采集

数据采集前需要明确采集哪些数据,一般的思路为:哪些数据对最后的结果预测有帮助?数据我们能够采集到吗?线上实时计算的时候获取是否快捷?

举例1:我现在要预测用户对商品的下单情况,或者我要给用户做商品推荐,那我需要采集什么信息呢?

店家:店铺的评分、店铺类别……

商品:商品评分、购买人数、颜色、材质、领子形状……

用户:历史信息(购买商品的最低价最高价)、消费能力、商品停留时间……

2. 数据清洗

数据清洗也是很重要的一步,机器学习算法大多数时候就是一个加工机器,至于最后的产品如何,取决于原材料的好坏。数据清洗就是要去除脏数据,比如某些商品的刷单数据。

那么如何判定脏数据呢?

简单属性判定:一个人身高3米 的人;一个人一个月买了10w的发卡。

组合或统计属性判定:你要判定一个人是否会买篮球鞋,样本中女性用户85%?

补齐可对应的缺省值:不可信的样本丢掉,缺省值极多的字段考虑不用。

数据清洗标准:

数据的完整性—-例如人的属性中缺少性别、籍贯、年龄等

数据的唯一性—-例如不同来源的数据出现重复的情况

数据的权威性—-例如同一个指标出现多个来源的数据,且数值不一样

数据的合法性—-例如获取的数据与常识不符,年龄大于150岁

数据的一致性—-例如不同来源的不同指标,实际内涵是一样的,或是同一指标内涵不一致

3. 数据采样

采集、清洗过数据以后,正负样本是不均衡的,要进行数据采样。采样的方法有随机采样和分层抽样。但是随机采样会有隐患,因为可能某次随机采样得到的数据很不均匀,更多的是根据特征采用分层抽样。

正负样本不平衡处理办法:

正样本

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/92231.html

(0)

相关推荐

  • 热血传奇官阶称号是永久的吗,热血传奇官阶俸禄奖励对应表

    热血传奇手游官阶对应的奖励是什么传奇手游功勋列表网友分享: (戊呦传奇) 沙巴克皇宫,等你来战手游热血传奇如何获得威望晋升爵位?玩家在游戏内通过做功勋任务累积功勋值,可一步步加官进爵。 官阶系统介绍: 1、开启方法: (1)在本服打完第一次幻境沙巴克之后的下周一00:00,游戏内等级达到。热血传奇手机版官阶称号怎么能?《热血传奇》手机版官阶称号获得方法如下: 在本服打完第一次幻境沙巴克之后的下周一00:00,游戏内等级达到60级的玩家可触发事件任务——从官之路。 官阶共分九。热血传奇手游中官阶系统怎么开?全新官阶系统将在本服打完第一次幻境沙巴克之后的下周一00:00,无忧舩奇 游戏内等级达到6

    阅读 2022年7月2日
  • 新手怎么开外卖店、做外卖,新店要怎么才能做下去

    新手怎么开外卖店新手怎么开外卖店、做外卖,新店要怎么才能做下去一、如果不会炒菜,怎么开外卖店铺?
    外卖店就是自己烧。自己卖。才能赚钱。请人一般小外卖店真吃不消。现在平台扣点一阵比一阵高,竞争又大。1:轻食店如果你在1线2

    生活 2021年10月28日
  • 柬埔寨为什么叫柬埔寨,柬埔寨以前叫什么

    柬埔寨为什么叫柬埔寨,柬埔寨以前叫什么 柬埔寨王国(The Kingdom of Cambodia),简称柬埔寨(Cambodia),位于中南半岛,西部及西北部与泰国接壤,东北部与老挝交界,东部及东南部与越南毗邻,南

    攻略 2021年10月18日
  • 基因有多强大,哪些基因是父母传给宝宝的。来比较一下。

    遗传学是一个神秘的东西。虽然有规律可循,但都是不可控的随机组合。 但无论如何,对于父母来说,宝宝的健康和幸福才是最重要的。在父母眼里,他们的宝宝是世界上最好的! 你猜到上面的脑筋急...

    生活 2021年11月16日
  • 王者荣耀:为什么玩家总喜欢哭弱?说实话,我不希望队友选他。

    哈喽大家好,我是铃铛儿~铃铛儿几乎每个赛季都会听到很多光信玩家在苦弱,说什么天美再不加强这个英雄,光

    阅读 2022年6月20日
  • 江西2022年专升本政策,江西专升本官网2021

    江西省2022年专升本网上报名111.75.211.142/index.php江西省2022年专升本网上报名http://111.75.211.142/index.php或http://www.jxeea.cn/所有参加

    阅读 2021年12月18日