实现Spark摆设 依靠供应商照旧"自力更生"?

Apache Spark用户每每面对一个窘境:持续获得来自供应商的支撑照样更新版本,应用拥有更新功效的快捷挪动的开源软件?

Novantas公司将Spark数据处理引擎作为贸易Hadoop发行版的一部分sg新霸游戏。如许使得阐发效劳和软件提供商与Spark版本的Hadoop软件包支撑的Spark版本绑缚在一路,因而,它不必然能即时走访新的Spark功效

比方,Novantas在今年年初开辟的基于Hadoop的应用程序中运用了Spark 1.4,以帮忙银行的阐发团队在内部体系中找到相干的客户和财务数据。该版本由Apache软件基金会于2015年6月公布,客岁9月被Spark 1.5代替,1月被1.6庖代。然而要sg新霸游戏晋级,Novantas将不得不经过Cloudera摒弃Spark撑持。

“咱们不想运用不受撑持的版本,”纽约公司Novantas解决方案手艺部分CTO和工程总监Kaushik Deka说。这是因为应用程序是该部分***次真正运用Hadoop和Spark。对峙运用Spark 1.4不太抱负。Deka说,他进展当Novantas挪动到一个新的手艺版本能够解决问题。

如许的思索在大数据情况中是常见的,其凡是触及以倏地的速率更新的开源技能。Spark的情形尤为凸起:在2014年7月到2016年7月之间,经过Apache共有18个版本,Ssg新霸游戏park 2.0版本正常都能够利用。

为了更好地利用新功用,一些构造曾经避开了供应商供给的Spark支撑,并自行布置了根基的Apachesg新霸游戏 Spark软件。

比方,Synchronoss手艺公司在2014年从Hadoop供应商MapR得到Spark。但挪动治理公司Bridgewater的大数据分析平台高档主管Suren Nathan表现,公司偶然直接晋级到Apache Spark的新版本,以得到所需的功效。“目前,我的团队能够异常熟练地运用Spark,”他说。

Webtrends公司也不断应用根本的Spark软件。“咱们正试图尽可能维持现有的公布,”来自美国的在线流动跟踪公司***技能官Peter Crossley说,“市场上没有其余技能像这类技能同样快。”

Crossley表现,他更喜爱经过Hadoop供应商Hortonworks得到撑持的Spark版本。为了尽可能做到这一点,他的团队与Hortonworks合作开发了一个“双轨公布方案”,供应商客岁3月加速了Sparkand与Hadoop相干的其余大数据技能的托付。

【编辑sg新霸游戏引荐】

相关推荐
新闻聚焦
猜你喜欢
热门推荐
  • 产业互联网标记剖析平安危害亟需引发关

      当前,我国产业互联网标记剖析体系与家当利用尚处于扶植早期,面对着诸如宁静管理制度不完美、平安防护技术手段缺失、......

    11-20    来源:未知

    分享
  • 微软又出阴招!五亿用户无家可归,将1.

      前段时间微软颁布,Windows7体系于1月14日停留更新,制作方截止技术支持、软件更新和宁静题目的修复。这意味着全世界5亿台......

    12-01    来源:未知

    分享
  • 2020年CIO们将会把钱花在哪些技能上?

      跟着2019年濒临尾声,CIO们入手将他们的才气转移到数字路程的下一站。很多IT领导者会增添他们的员工体验(EX)来改良团体客......

    12-03    来源:未知

    分享
  • WASM 成为 HTML、CSS 与 JS 以后的第 4 门 We

      大师都晓得,万维网同盟W3C 认证的 Web 言语有 HTML、CSS 与 JavaScript,而克日同盟正式颁布 WebAssembly 焦点标准(WebAssembly Core ......

    12-04    来源:未知

    分享
  • 运维之三大监控比照

      1. zabbix Zabbix中心组件重要是Agent和Server,个中Agent首要卖力收罗数据并经过自动大概被动的方法收集数据发送到Server/Proxy,除......

    12-08    来源:未知

    分享
  • 2020年恶意软件删除工具Top 10

      1. Malwarebytes Anti-Malware 第一名,咱们挑选了Malwarebytes恶意软件删除工具,假定你若是曾经被恶意软件沾染,那末MalwarebytesAnt......

    01-27    来源:未知

    分享
  • 我国拟立法建立数据安全庇护经管根本轨

      跟着信息技术和人类出产生涯交汇交融,各种数据迅猛增加、海量集合,对经济生长、社会管理、人民生存都发生了庞大而深......

    01-27    来源:未知

    分享
  • AI技能帮忙环球抗疫保卫者获取信息

      近来,SingularityNET公司CEO Ben Goertzel博士决意召开COVID-19峰会,约请AI与数据科学研究者群体中的资深人士,期望他们与流行病......

    02-02    来源:未知

    分享
  • 5G时期下,移动机器人若何出其“智”胜

      移动机器人是一个集情况感知、动态决议与计划、举动掌握与履行等多功能于一体的综合体系,它会合了传感器手艺、信息处......

    02-02    来源:未知

    分享
  • 怎样变得抢手?如许的开发人员每一个团

      互助是你职业生涯中不会贫乏的一个部份。 甚么是团队?团队就为了独特方针而致力的一群人。一个团队实现目标的进程中,......

    02-07    来源:未知

    分享
返回列表
Ctrl+D 将本页面保存为书签,全面了解最新资讯,方便快捷。