Flume学习笔记 --- 模拟流式数据产生数据
来源:互联网 发布:2009年nba总决赛数据 编辑:程序博客网 时间:2024/06/06 05:59
先利用已有的文件生成数据,然后将文本追加到flume监控的目录下:
SHELL脚本:
#!/bin/basha=`echo {1..50000}`for i in ${a}do cat /usr/softwares/*.csv | head -n 50000 >> /data/pvlog/producer1.csv sleep 1done
这个代码块的含义是每秒生成5W条数据,将数据追加到文件中。
0 0
- Flume学习笔记 --- 模拟流式数据产生数据
- 大数据学习笔记:Flume导数据至Kafka
- h5学习笔记:vue 和 数据模拟
- 模拟客户端将数据flume存储在hdfs上
- Flume学习笔记 --- Flume入门
- flume 读取kafka 数据
- 大数据(七) - Flume
- 使用Flume收集数据
- Flume实时采集数据
- Flume 丢失数据问题
- 使用 Flume 收集数据
- flume数据采集
- 发送数据到Flume
- java 链接mysql 产生500W数据模拟生成环境
- 大数据学习——Flume介绍与安装
- 大数据企业学习篇05----flume初识
- flume学习(三):flume将log4j日志数据写入到hdfs
- flume学习(六):使用hive来分析flume收集的日志数据
- 腾讯云服务器图形界面安装
- 用dos命令轻松删除Windows7系统中的垃圾文件
- App内存占用优化
- JZOJ 4936【NOIP2017GDKOI模拟1.12】c
- MairDB更新/删除数据(三)
- Flume学习笔记 --- 模拟流式数据产生数据
- Codeforces Round #390 (Div. 2) B. Ilya and tic-tac-toe game(dfs)
- rabbitmq的模型
- Ubuntu安装MYSQL数据库以及数据知识点
- 数据库操作命令
- 面试
- amp.cmd
- leetcode9. Palindrome Number
- vsftpd 设置