大数据与智能技术

来源:互联网 发布:手写图片识别软件 编辑:程序博客网 时间:2024/04/30 11:26

今天是2016年的最后一天,大部分的同学都去嗨了,像我这种学渣只能继续为了我那些不靠谱的梦想继续努力。

大数据的出现并不是一种偶然,而是因为非常多的技术已经成熟的原因。在未来进一步的普及和发展还需要解决更多的技术瓶颈。

(1)技术的拐点
科学技术的发展并非是一种匀速的过程。中的科学技术的突破常常需要在一段很长的时间内慢慢的发展。1965年,摩尔博士提出了摩尔定律。工业界,大规模集成电路的出现,从此世界进入了为期半个多世纪的信息产业的高速发展。机器智能的概念已经出现了60多年,但是真正的突破确实在大数据突破的今天。大数据在短短的十年的时间内迅速发展,并且让机器智能的水平提高到了一个新的高度。因此智能技术的拐点就是从十年前开始到接下来的二三十年的时间。接下来,从数据的产生、存储、传输、和处理的四个角度分别来分析大数据的形成的条件。

(2)大数据的产生
大数据的第一个来源就是电脑本身。全球的数字化,几乎使得每一个用电的设备都有了一个电脑,因此很多的数据会被记录下来,例如Google会在编写代码的时候记录日志,以便进行错误的分析。第二个重要的来源就是传感器。例如常用的RFID射频芯片,将这种芯片放到商品上就能轻易地记录下非产多的信息。在可穿戴设备上,使用类似的RFID芯片在万物互联的当下,亦能获得非常多的有用的数据。在互联网的时代,网络用户产生的数据是以极其快速的方式在进行发展。YouTube网站中,每分钟就有300小时的视频被上传。再如,城市的摄像头所记录下的数据。这些数据在过去是不会被长期保存的,但是由于现在的技术,已经可以非常有效地利用这些数据,因此这些数据现在被完整的保存下来。

(3) 信息的存储
由于摩尔定律导致各种存储器的容量在成倍的增加,同时价格在迅速的下降。但是只是在存储容量上增加还是不够的,因为原有的存储设备存取速度是依靠这机械转速,这一问题严重的影响着大规模数据的使用。这一问题直到固态存储器(SSD)设备的出现才得以较为有效地解决。

(4) 数据的传输
到了互联网时代,传授速度发生了巨大的变化。如今的传输速度,已经比原来的速度提高了几十倍。使得数据在产生后能够迅速地出送到服务器上。

(5) 信息的处理
当海量的数据被传送到服务器之上时,能否有效地使用这些数据就取决于服务器是否有强大的数据处理能力了。应用大数据的一个前提就是能否将一个大的计算任务分摊到多个便宜的服务器上去进行并行计算。单一维度的数据并不是一件难事,但是大数据的高维的特点,有时并行计算是非常困难的。

1 0
原创粉丝点击