R+ODPS

来源:互联网 发布:http dev.mysql.com 编辑:程序博客网 时间:2024/05/21 08:37

阿里的数加平台最近推出了机器学习数据实验室,由于是基于ODPS创建,运算方面丝毫不是问题,继承了ODPS的大数据计算能力。
算法方面,常见的二分类、多分类、线性回归、聚类、图计算等都有提供,纯图形的操作方式也很简单。
计费方式同ODPS差不多,按IO和计算量计费,起步门槛很低。
有兴趣可以玩一玩:https://data.aliyun.com/product/learn

老码农玩了一段时间,觉得唯一的遗憾就是数据处理方式提供的比较少,不过在这方面R倒是个不错的补充,阿里云也提供了RODPS这个R包供使用。这里简单描述下使用步骤。

1、使用R进行数据处理之前,先需要对ODPS项目中的大数据做抽样。这个阿里云机器学习实验室提供了分层、随机、加权几种抽样方式。
2、将抽样数据写到ODPS项目中,在R中使用RODPS连接并获取数据,存储到data frame中。
3、接下来用R针对样本做处理,如特征选择,统计检验等。最后把处理结果输出报表,或同步到ODPS项目中,使用阿里云提供的在线报表生成报表。

1 0
原创粉丝点击