大数据平台由哪5个部分组成?简述各个部分内容的特点

Question

如题所述

Answer 1

一、数据采集

ETL工具负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。

二、数据存取

关系数据库、NOSQL、SQL等。

三、基础架构

云存储、分布式文件存储等。

四、数据处理

自然语言处理(NLP，Natural Language Processing)是研究人与计算机交互的语言问题的一门学科。处理自然语言的关键是要让计算机"理解"自然语言，所以自然语言处理又叫做自然语言理解(NLU，Natural Language Understanding)，也称为计算语言学(Computational Linguistics。一方面它是语言信息处理的一个分支，另一方面它是人工智能(AI, Artificial Intelligence)的核心课题之一。

五、统计分析

假设检验、显著性检验、差异分析、相关分析、T检验、方差分析、卡方分析、偏相关分析、距离分析、回归分析、简单回归分析、多元回归分析、逐步回归、回归预测与残差分析、岭回归、logistic回归分析、曲线估计、因子分析、聚类分析、主成分分析、因子分析、快速聚类法与聚类法、判别分析、对应分析、多元对应分析(最优尺度分析)、bootstrap技术等等。

六、数据挖掘

分类 (Classification)、估计(Estimation)、预测(Prediction)、相关性分组或关联规则(Affinity grouping or association rules)、聚类(Clustering)、描述和可视化、Description and Visualization)、复杂数据类型挖掘(Text, Web ,图形图像，视频，音频等)。

七、模型预测

预测模型、机器学习、建模仿真。

八、结果呈现

云计算、标签云、关系图等。

Answer 2

他掌握不好刑法上的那些细节。但即使是专攻法律的人，也未必能彻底了解刑法上那些繁杂苛细的条文。然而，他总是下意识地希望从轻治罪，这就帮了他很大的忙。他审讯的那些小偷小摸的犯人，大都一贫如洗、没有文化，为生活所迫，不知不觉走上犯罪道路。通常，他总是装得怒不可遏：对被告拍桌瞪眼，大吼大叫，扬言要对他们严加惩处。但到最后，他有时直接违反法令，只进行少量罚款——有时还亲自解囊相助。在这种时候，他一回到家里，就象个腼腆而又骄傲的孩子一样，把自己的过错向比阿特丽斯老老实实和盘托出。尽管他暗自对自己的行为感到骄傲，但在没有得到她亲口称赞时，还是有些迟疑不决。他有事可干，又很满意，她也高兴。他对她十分信赖，所以她也就全力完成自己承担的义务。家务和孩子，占去了她很多的精力，除了忙忙碌碌以外，她没有多少时间和心思去考虑其他事情。尽管她一如既往，觉得自己很不幸，但这种想法也逐渐变得淡薄了。