从事BI的一些心得

来源:互联网 发布:数据查询网站 编辑:程序博客网 时间:2024/06/06 11:48

     从事了三年的j2ee开发,本来一直想从事j2ee开发,谁知公司一个项目需要,就从10年6月做BI开发 了。还好自己的oracle数据库水平不错,工作还能胜任。

     商业智能定义为一类由数据仓库(或数据集市)、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的、以帮助企业决策为目的技术及其应用

     公司主要是通过INFO把数据从不同的数据库集中起来,经过抽取、清洗、转换,形成标准数据。这步应该算etl。然后分析数据、做一些数据挖掘。最后从数据仓库出一些报表。也用到了公司做的一个展示程序,把从数据仓库中的一些指标展示出来。

     我们处理的数据量很大,一个大表的数据就能达到几百G,抽取是用info实现,清洗、转换都是自己写存储过程处理。然后对数据进行汇总和分析,形成数据仓库。数据仓库保存的都是历史数据,不知道数据仓库应该不应该包括元数据,元数据一般都是很大的。

     我们现在做出的成果也就是出统计报表,做了一些查询应用,更深的数据挖掘做的还不多,以后数据挖掘方面还需努力。

     刚开始感觉技术上提升很快,感觉有许多新东西要学习,现在慢慢感觉到,技术上没有什么新的要学的了,要提升业务水平了。

     这段时间工作还是很开心的。学了些oracle优化,对索引、分区有了很深的认识。要是一直从事j2ee开发,这些东西不一定能学到。

     希望每天都有提高。电信、银行、政务、企业、电子商务数据都在迅速增加,感觉BI在未来将要有更大的市场。希望自己能在bi方面有很好的发展。