python MRJob
来源:互联网 发布:单片机控制继电器电路 编辑:程序博客网 时间:2024/06/05 10:18
#-*- coding: utf8 -*-import jiebafrom mrjob.job import MRJobimport reword_re = re.compile(u"[\u4E00-\u9FA5]+")class TestMrJob(MRJob): def mapper(self, _, line): print type(line) for word in word_re.findall(u"%s" % line): #for word in jieba.cut(line): yield word.lower(), 1 def reducer(self, word, counts): yield word, sum(counts)if __name__ == '__main__': TestMrJob.run()
0 0
- python MRJob
- python MRJob
- Mrjob介绍 (hadoop with python)
- Mrjob介绍 (hadoop with python)
- 【原创】python MRJob -…
- 使用Python MrJob的MapReduce实现电影推荐系统
- 使用Python MrJob的MapReduce实现电影推荐系统
- python调用mrjob实现hadoop的mapreduce日志解析
- 使用Python MrJob的MapReduce实现电影推荐系统
- 使用Python MrJob的MapReduce实现电影推荐系统
- mrjob文档
- python hadoop 在streaming中获取文件名的方法 (参考java )适用: MRjob
- python hadoop 在streaming中获取文件名的方法 (参考java )适用: MRjob
- 给mrjob的python脚本加map reduce 个数限制 和 hadoop任务调度优先级
- mrjob运行方式
- mrjob运行runner参数
- mrjob开源开发包
- mrjob和pymongo的互斥
- 最大子列和问题
- 【软考路上】——编译原理
- 第四周项目一三角形类的构造函数(1)
- EJB到底是什么
- Radio Buttons
- python MRJob
- windowsphone界面
- Google Earth与ArcGIS数据交互(一)
- 第四周 项目一--三角形类的构造函数(3)有默认参数的构造函数
- 安装一个新的Launcher
- Android 对APK进行系统签名
- lua 与c++交互 之调用函数
- 游戏制作之经验-3
- 解决微信公众平台接口配置信息配置失败问题