网易首页 > 网易号 > 正文 申请入驻

大数据分析领域有哪些分析模型?

0
分享至

数据角度的模型一般指的是统计或数据挖掘、机器学习、人工智能等类型的模型,是纯粹从科学角度出发定义的。

1. 降维

在面对海量数据或大数据进行数据挖掘时,通常会面临“维度灾难”,原因是数据集的维度可以不断增加直至无穷多,但计算机的处理能力和速度却是有限的;另外,数据集的大量维度之间可能存在共线性的关系,这会直接导致学习模型的健壮性不够,甚至很多时候算法结果会失效。因此,我们需要降低维度数量并降低维度间共线性影响。

数据降维也被成为数据归约或数据约减,其目的是减少参与数据计算和建模维度的数量。数据降维的思路有两类:一类是基于特征选择的降维,一类是是基于维度转换的降维。

2. 回归

回归是研究自变量x对因变量y影响的一种数据分析方法。最简单的回归模型是一元线性回归(只包括一个自变量和一个因变量,且二者的关系可用一条直线近似表示),可以表示为Y=β0+β1x+ε,其中Y为因变量,x为自变量,β1为影响系数,β0为截距,ε为随机误差。

回归分析按照自变量的个数分为一元回归模型和多元回归模型;按照影响是否线性分为线性回归和非线性回归。

3. 聚类

聚类是数据挖掘和计算中的基本任务,聚类是将大量数据集中具有“相似”特征的数据点划分为统一类别,并最终生成多个类的方法。聚类分析的基本思想是“物以类聚、人以群分”,因此大量的数据集中必然存在相似的数据点,基于这个假设就可以将数据区分出来,并发现每个数据集(分类)的特征。

4. 分类

分类算法通过对已知类别训练集的计算和分析,从中发现类别规则,以此预测新数据的类别的一类算法。分类算法是解决分类问题的方法,是数据挖掘、机器学习和模式识别中一个重要的研究领域。

5. 关联

关联规则学习通过寻找最能够解释数据变量之间关系的规则,来找出大量多元数据集中有用的关联规则,它是从大量数据中发现多种数据之间关系的一种方法,另外,它还可以基于时间序列对多种数据间的关系进行挖掘。关联分析的典型案例是“啤酒和尿布”的捆绑销售,即买了尿布的用户还会一起买啤酒。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
枢密院十号:惨!被美军拒收的F-35,已经快没地儿放了……

枢密院十号:惨!被美军拒收的F-35,已经快没地儿放了……

环球网资讯
2024-05-22 00:22:12
直击“抓嫖新科技”,看完后你还敢去特殊场所玩吗?

直击“抓嫖新科技”,看完后你还敢去特殊场所玩吗?

华庭讲美食
2024-05-22 07:10:21
曝45岁伏明霞离婚,净身出户原因揭晓,71岁百亿丈夫只说6个字

曝45岁伏明霞离婚,净身出户原因揭晓,71岁百亿丈夫只说6个字

深度知局
2024-05-20 19:25:53
美媒拆解比亚迪后破防:如此便宜且精良的车,对美国汽车行业来说是噩梦

美媒拆解比亚迪后破防:如此便宜且精良的车,对美国汽车行业来说是噩梦

小星球探索
2024-05-21 19:06:38
谁见过连一个诺贝尔奖得主都没培养出的世界一流大学?

谁见过连一个诺贝尔奖得主都没培养出的世界一流大学?

霹雳炮
2024-05-21 20:55:38
南北身高差在这一刻具象化,广东辽宁小学生打篮球赛,评论笑疯了

南北身高差在这一刻具象化,广东辽宁小学生打篮球赛,评论笑疯了

熙熙说教
2024-05-21 17:09:48
刘亦菲跟欧美明星热聊遭群嘲,表情谄媚动作迎合,被骂翻了

刘亦菲跟欧美明星热聊遭群嘲,表情谄媚动作迎合,被骂翻了

萌神木木
2024-05-21 13:59:15
苹果宣布史上最大降价:最高降价2300元

苹果宣布史上最大降价:最高降价2300元

三言科技
2024-05-21 08:02:05
社评:挑衅一次、反制一次,挑衅愈甚、反制愈烈

社评:挑衅一次、反制一次,挑衅愈甚、反制愈烈

环球时报新闻
2024-05-22 06:25:51
每体:维拉有意巴萨中卫阿劳霍,计划卖掉卡洛斯腾出位置

每体:维拉有意巴萨中卫阿劳霍,计划卖掉卡洛斯腾出位置

懂球帝
2024-05-21 06:47:15
郭有才蹿红,“群魔乱舞”的直播闹剧该停下了!

郭有才蹿红,“群魔乱舞”的直播闹剧该停下了!

新民周刊
2024-05-21 21:22:54
射精一次会减寿?男性一生最多只能排6000次精?看完心里有数

射精一次会减寿?男性一生最多只能排6000次精?看完心里有数

奇妙的本草
2024-05-20 20:00:03
养一辆20万的新能源车与20万的燃油车,8年的花费差距有多大?

养一辆20万的新能源车与20万的燃油车,8年的花费差距有多大?

西山来客
2024-05-21 13:26:30
高速别停砸车男被抓后,湖南公安沦陷,知情人曝内幕,果然有情况

高速别停砸车男被抓后,湖南公安沦陷,知情人曝内幕,果然有情况

校长侃财
2024-05-21 22:43:16
明年能拿5年2.7亿!队记:布伦森愿和尼克斯签4年1.56亿续约合同

明年能拿5年2.7亿!队记:布伦森愿和尼克斯签4年1.56亿续约合同

直播吧
2024-05-22 06:34:10
这两个新闻连在一起看,简直让人窒息

这两个新闻连在一起看,简直让人窒息

顾礼先生
2024-05-14 16:42:44
震惊!王传福只是比亚迪第二大股东,持股17.64%,第一持股37.70%

震惊!王传福只是比亚迪第二大股东,持股17.64%,第一持股37.70%

杂谈空间社
2024-05-21 23:16:54
台女警下海兼职“性工作者”,被同事上门消费时认出,遭调岗记过

台女警下海兼职“性工作者”,被同事上门消费时认出,遭调岗记过

可达鸭面面观
2024-05-21 13:09:44
郭有才粉丝破千万, 女友苏畅被曝生活奢侈,草根人设崩塌

郭有才粉丝破千万, 女友苏畅被曝生活奢侈,草根人设崩塌

南风西洲
2024-05-20 21:55:36
NBA本季最佳防守一阵:阿德巴约、浓眉、戈贝尔、琼斯、文班

NBA本季最佳防守一阵:阿德巴约、浓眉、戈贝尔、琼斯、文班

懂球帝
2024-05-22 02:20:18
2024-05-22 09:34:44
驾驭你的科技
驾驭你的科技
讲讲互联网大佬们的圈中乐事
297文章数 10198关注度
往期回顾 全部

科技要闻

Copilot领衔,奥特曼站台,微软决战AI时代

头条要闻

女孩疑在街头遭持棍棒男子挟持 7人合力30秒将其解救

头条要闻

女孩疑在街头遭持棍棒男子挟持 7人合力30秒将其解救

体育要闻

结束了!米体:国米的苏宁时代结束了

娱乐要闻

杨洋乔欣聊天记录曝光!还牵扯张天爱

财经要闻

新能源,突传重磅!

汽车要闻

四排八座纯电MPV/续航超过800km 翼真L380开启预订

态度原创

家居
旅游
教育
游戏
公开课

家居要闻

生活蜕变 简约理念雕刻理想居所

旅游要闻

四川广元男子拍到会呼吸的泉水 反复涌出又消失

教育要闻

我终于知道,我们为什么这么累了

传《王国之心4》将登陆任天堂下代主机Switch 2

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版