[关闭]
@Lucien 2016-03-10T04:44:07.000000Z 字数 3058 阅读 661

争相插足大数据操作系统为哪般?


摘要:

近来有很多关于大数据操作系统的新闻,尤其是美国硅谷科技公司在大数据操作系统领域投入较大精力,开发出一些能够处理Windows系统不擅长解决的功能。

正文:

近来有很多关于大数据操作系统的新闻,尤其是美国硅谷科技公司在大数据操作系统领域投入较大精力,开发出一些能够处理Windows系统不擅长解决的功能。

或许很多人会问,为什么要做大数据操作系统,它的具体功能是什么,能解决什么实际问题,能带来什么效果?其实,纵观整个线上线下服务市场,大数据操作系统的诞生实属应运而生,主要源于三方面因素:

首先是市场对大数据的强烈需求。当下大数据的价值不容置疑,云计算、移动互联网、物联网、机器学习、人工智能、VR等前沿技术的普及与大数据的发展密不可分。纵观国内外,大数据已经在很多的IT企业和传统实体企业融为一体,例如电商通过数据分析推荐给用户最满意的产品,运输企业通过数据比较实现最优交通路线等等,这些都离不开大数据,大数据所带来的机会和红利是任何企业都不愿错过的。

目前普遍采用开源软件与廉价的x86服务器组合来处理大数据任务,开源软件包括Hadoop、Spark、Storm、NoSQL等。只不过这些开源项目也存在问题:不同功能模块对应多个相互独立的开源项目,为不同的目的而设计,其关系很复杂,缺乏通用性,系统部署和使用复杂而低效,二次开发困难,并且难以统一管理和监控,维护成本高。所以,需要有一个统一的平台。

另外一点也很重要,自主知识产权的需求同样作用于大数据技术领域,大数据操作系统的准入门槛高,如文件系统这样的核心技术,即便是在美国,具有相关开发能力的团队也不多。

有哪几款大数据操作系统值得关注?

在去年9月初,大数据公司百分点对外发布了全新企业级大数据操作系统BD-OS——一款全流程、可视化、智能化的企业级大数据操作系统,有人说,这款操作系统的发布可谓填补了从底层技术到大数据操作之间的空白,帮助企业管理数据资产并创造商业价值。

除了百分点的BD-OS之外,还有一款大数据操作系统,那就是由海绵数据推出的第二代大数据操作系统Sponge,这是一个简单多层,完全兼容POSIX分布式NFS、Hadoop,支持对象存储、云存储、SDS(软件定义存储)、容器机制,集成Spark为计算引擎,基于内存计算技术的分布式系统,将大数据的存储、管理和计算有机融合,具有实时一致性,易于兼容现有系统,相比10年前诞生的第一代产品Hadoop更加简单易用,易于扩展。

此外,Intel wants to be the 'operating system' for big data

Can Hadoop replace an enterprise data warehouse?
The new Intel Data Platform features the latest version of its Hadoop distribution

企业级大数据操作系统(BD-OS)具有可视化的操作界面,系统化的数据处理流程,智能化的操作向导以及协同化的作业平台,用户不必再陷入繁琐的代码操作和流程细节,即可轻松实现大数据处理。

BD-OS的主要设计思想和产品亮点包括三个方面。

首先,它开创了面向数据流程的架构(DPOA)这一方法论。基于既定的业务逻辑,DPOA定义相应的数据处理流程,并自动生成底层技术架构,将业务语言转化为大数据处理语言。

其次,BD-OS还是一个高效的数据作业平台,它融入了数据流程管理(DPM)的思想,将业务链条中的各个环节和相互之间的关系,映射成对数据集、数据关系和处理逻辑的管理,通过对数据流程的创建、组合、调度和监控,将业务流程管理转化为数据流程管理。

最后,BD-OS采用了企业级服务总线(ESB)的理念,支持以热插拔的方式灵活集成各种异构系统及数据服务。即使是企业的传统IT系统,也能便捷并低成本地融入主流大数据架构。

目前,百分点产品线已涵盖大数据基础层、管理层和应用层,其核心产品包括基础层的大数据操作系统,管理层的用户画像标签工场,以及应用层的推荐引擎、分析引擎和营销引擎。

据悉,百分点已为近2,000家互联网及实体企业提供大数据技术平台搭建和大数据驱动的SaaS应用,客户涵盖制造、金融、电商、电信等行业的龙头企业,如华为、TCL、长虹、建设银行、1号店和中国电信等。近期,百分点已经与惠普签订战略合作协议,将百分点BD-OS整合到惠普已有的大数据解决方案中。同时,百分点分别与微软和华为设计联合解决方案,微软的Azure云平台以及华为云平台将搭载BD-OS进行销售。

http://ju.outofmemory.cn/entry/213299

http://tech.it168.com/a2015/0814/1754/000001754478.shtml

http://www.csdn.net/article/2015-09-08/2825649

http://mt.sohu.com/20150908/n420669886.shtml

https://www.zhihu.com/question/37615222

http://www.csdn.net/article/2015-05-25/2824763

http://mt.sohu.com/20160305/n439483293.shtml

http://www.c114.net/news/212/a898905.html

http://cio.it168.com/a2015/1117/1778/000001778029.shtml

http://tech.it168.com/a2015/0520/1730/000001730358.shtml

http://soft.chinabyte.com/os/195/13074695.shtml

http://gd.sina.com.cn/finance/opinion/2015-12-14/cj-ifxmpnqi6505277.shtml

http://www.ccidnet.com/2014/0215/5355265.shtml

http://www.cbdio.com/BigData/2015-11/18/content_4168215.htm

http://tech.qq.com/a/20131113/015300.htm

http://www.datanami.com/2013/05/28/yarn_to_spin_hadoop_into_a_big_data_operating_system_/

http://www.eweek.com/database/slideshows/linux-is-the-best-os-for-big-data-apps-10-reasons-why.html

http://www.infoworld.com/article/2610122/big-data/intel-wants-to-be-the--operating-system--for-big-data.html

http://ieeexplore.ieee.org/xpl/login.jsp?tp=&arnumber=7184922&url=http%3A%2F%2Fieeexplore.ieee.org%2Fiel7%2F7182812%2F7184847%2F07184922.pdf%3Farnumber%3D7184922

添加新批注
在作者公开此批注前,只有你和作者可见。
回复批注