数据在哪?大数据部署应思考五个问题

大数据是一个含糊的术语。在绘制大数据战略蓝图的时候,提出一些恰当的问题保证企业能够得到有用的信息是非常重要的。本文将讲述大数据部署时应考虑的五个问题。

【安防在线 www.anfang.cn】
大数据是一个含糊的术语。因此,企业用户应该了解其含义,必须理解大数据实际上能做什么及其局限性是什么。在绘制大数据战略蓝图的时候,提出一些恰当的问题保证企业能够得到有用的信息是非常重要的。

企业担心落在竞争对手的后面和利用大数据实现各种业务目标的同行的后面。但是,在被大浪卷走之前,你要后退一步并且考虑五个问题以保证你走上正确的道路。

1、你的问题是什么?

数据在哪?大数据部署应思考五个问题

这似乎是一个显而易见的问题。但是,感受到压力要成为数据驱动的企业的那些公司也许会冒进,不首先恰当地定义问题(或者机会)。你是不能把你需要的数据放入excel表格的商务分析师吗?你首先不能访问你的公司的大数据吗?你是负责减少查询返回的等待时间的首席信息官吗?你是对查询结果需要等待数天或者数星期感到厌烦的非技术用户吗?你的数据是结构化的还是非结构化的?还是拥有上述所有问题?

当然,你可能面对的问题之一是预算,特别是在创业企业和中小企业中。数据仓库和专用硬件的价格让他们望而却步。如果可承受性是一个问题,你要根据在商品化硬件上运行的软件制定一个战略,不需要数据仓库。

2、你为免费(开源)软件支付的价格是什么?

围绕hadoop一直有许多争论。虽然hadoop对于某些企业需求来说是一个非常好的开源软件解决方案,但是,免费并不意味着不支付任何费用。hadoop在商品化硬件上运行。由于它需要电源和网络连接,这就需要投资。

核心的hadoop发布版是免费的开源软件。但是,有些厂商有专有的hadoop发布版。即使开源软件发布版也有专有的插件管理工具。除非你从apache软件基金会下载hadoop组件,否则,你会像使用商业软件一样遇到同样的软件许可证和厂商锁定等令人担心的问题。

我们不要忘记部署和管理这个技术所需要的数据科学家的工资。如果你有足够的资金支付it和硬件费用,hadoop也许对你非常合适。但是,hadoop并非适用于一切需求。这就引出了下一个问题。

3、规模重要吗?(你的企业规模和你的数据的规模)

围绕大数据的谈话主要是pb级的数据。然而,大多数企业使用的数据仅达到tb级。当在tb级的范围内工作的时候,大型机器集群的开销也许不能得到投资回报。你会发现那个遗留的解决方案对于你的企业需求也许规模太大,是不必要的。

如果是在tb级范围内,你就是在使用一台服务器的范围之内。你可以使用一台服务的解决方案,从而降低成本和简化。仅仅在10年前,一台服务器只能处理gb级的数据。但是,现在的商品化硬件已经能够处理tb级的数据,从而提供了以前不能提供的选择范围。

4、你的数据在哪里?

你的大多数数据是在企业内部的,你的策略与大多数数据在云中的企业有所不同。例如,如果你的数据在亚马逊或者rackspace的云服务中,那么,在那个框架中运行大数据解决方案是有意义的,因为数据很容易在那个环境中迁移。然而,如果你的大多数数据在企业内部并且你正在考虑在云中运行你的大数据查询,你要三思。大数据是很难迁移并且保持同步的。当上载到云的时候会有许多挑战。在这种情况下,大数据最好保持在企业内部的环境中。

5、各种技术有什么区别?

目前有三种类型的技术用于大数据分析:软件数据库设备、硬件数据库设备和分布式数据库。

软件数据库设备部署在商品化硬件上,一般部署在一台计算机上,因此,价格便宜,结构简单。这种设备的例子包括sql服务器或者mysql等关系数据库以及sisense的elasticube技术。

硬件数据库设备包括与专有硬件(也就是价格昂贵的硬件)捆绑销售的专有软件。专有硬件的技术规格比商品化硬件更强大,因此价格可以高50倍。

分布式数据库是指部署在计算机集群中的软件,可以平行运行资源密集型的处理操作。这包括复杂的架构。

你可能遇到的其它技术都是不能直接处理大数据的规模较小的技术,如内存处理或者联机分析处理(olap,onlineanalyticalprocessing)。上载到这些数据中心技术的数据在上载之前要显著删减,一般采用上述的一种大数据技术。

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 摄像头的分类与应用(摄像头的分类与应用领域)

    摄像头的分类与应用 摄像头是一种用于捕捉图像和视频的设备,广泛应用于各个领域。根据其特性和用途的不同,摄像头可以分为多种类型,并在各个领域中发挥着重要的作用。 1. 安防摄像头 安…

    2025年10月10日
  • 监控摄像头图像有横条

    监控摄像头图像出现横条问题的原因 监控摄像头是现代社会中广泛应用的安全设备,用于监控和记录特定区域的活动。然而,有时候我们可能会发现监控摄像头的图像出现横条,影响了图像的清晰度和可…

    2025年10月10日
  • 网络摄像头 画面卡顿(网络摄像头太卡怎么办)

    网络摄像头 画面卡顿 原因分析 网络摄像头画面卡顿是指在视频监控或视频通话过程中,画面出现卡顿、延迟或不流畅的现象。这种问题可能由多种原因引起。 网络带宽不足 网络带宽不足是导致网…

    2025年10月10日
  • 农村能否安装摄像头

    农村能否安装摄像头 背景介绍 随着科技的发展,摄像头已经成为了现代社会中不可或缺的一部分。在城市中,摄像头的安装已经普及,起到了监控、防范犯罪等作用。然而,在农村地区,摄像头的安装…

    2025年10月10日
  • 摄像头做巡更记录(监控系统巡检记录表)

    摄像头做巡更记录 摄像头在现代社会中扮演着重要的角色,不仅用于监控安全,还可以用于巡更记录。通过摄像头的安装和使用,可以实现对巡更过程的全程监控和记录,提高巡更工作的效率和准确性。…

    2025年10月10日
  • 中维摄像头时间不同步(摄像头时间不一致)

    中维摄像头时间不同步问题的原因 中维摄像头是一种常用于监控和安防领域的设备,但有时候用户可能会遇到摄像头时间不同步的问题。这种情况可能会导致录像文件的时间戳不准确,给后续的数据分析…

    2025年10月10日