MaxCompute 入门必知

MaxCompute 入门必知

一、什么是MaxCompute

com.cn/tag/%e5%a4%a7%e6%95%b0%e6%8d%ae" target="_blank">大数据核算服务(MaxCompute,原名ODPS)是一种快速、彻底保管的EB级数据仓库解决计划。

跟着数据搜集手法不断丰富,职业数据很多堆集,数据规划已增加到了传统软件职业无法承载的海量数据(百TB、PB、EB)等级。MaxCompute致力于批量结构化数据的存储和核算,供给海量数据仓库的解决计划及剖析建模服务。

因为单台服务器的处理才能有限,海量数据的剖析需求分布式的核算模型。分布式的核算模型对数据剖析人员要求较高且不易保护。数据剖析人员不只需求了解事务需求,一起还需求了解底层分布式核算模型。MaxCompute为您供给完善的数据导入计划以及多种经典的分布式核算模型,您能够不用关怀分布式核算和保护细节,便可轻松完结大数据剖析。

二、概述与产品特色

1、选用分布式架构,规划能够根据需求平行扩展
2、主动存储容错机制,保证数据高可靠性
3、一切核算在沙箱中运转,保证数据高安全性
4、以 RESTful API 的方法供给服务
5、支撑高并发、高吞吐量的数据上传下载
6、供给离线核算、机器学习两类模型及核算服务
7、支撑根据 SQL、MapReduce、Graph、MPI 等多种编程模型的数据处理方法
8、支撑多租户,多个用户能够协同剖析数据
9、支撑根据 ACL 和 Policy 的用户权限办理,能够装备灵敏的数据拜访操控战略,避免数据越权拜访

MaxCompute 入门必知

三、首要使用场景

日志剖析、机器学习、数据仓库、数据发掘、用户画像、数据化运营、商业智能等,例如:

MaxCompute 入门必知

四、MaxCompute 体系架构

MaxCompute 入门必知

五、MaxCompute 作业流程

MaxCompute 入门必知