引发的新闻

火花+人工智能峰会(2020年6月22-25th,虚拟)议程了

的议程火花+人工智能峰会2020现在可以了!峰会6月22日开幕。我们今年的峰会演变成了全球性事件——完全虚拟,并且对每个人开放,免费的。和峰会现在更大:扩展与200 + 5天会议,4 x培训,主题演讲有远见和思想领袖。加入成千上万的工程师、科学家、开发人员、分析师和领导人塑造未来的大数据,分析和人工智能。检查满满的时间表注册参加!

3.0预览版的火花

使大规模社区测试即将到来的3.0版本,Apache引发社会公布火花3.0.0 preview2释放。这个预览不是一个稳定版本的API或功能,但它是为了给社区的早期访问尝试将成为引发3.0的代码。如果你想测试版本,请下载它,并发送反馈使用邮件列表JIRA。在可用的文档链接

3.0预览版的火花

使大规模社区测试即将到来的3.0版本,Apache引发社会公布3.0预览版的火花。这个预览不是一个稳定版本的API或功能,但它是为了给社区的早期访问尝试将成为引发3.0的代码。如果你想测试版本,请下载它,并发送反馈使用邮件列表JIRA

计划将Python 2的支持

你们很多人都已经知道,Python核心开发团队和许多利用Python包喜欢熊猫和NumPy 2020/01/01之前Python 2支持或将会下降。Apache引发火花以来支持Python 2和3在2015年1.4版本。然而,维护Python 2/3的兼容性是一个增加负担,它本质上限制使用Python 3特性火花。生命的终结(EOL) Python 2即将到来,我们计划最终下降Python 2支持。当前的计划如下:

火花赢得CloudSort基准作为最有效的引擎

我们自豪地宣布,Apache火花了2016年CloudSort基准(代托纳和印第安纳·琼斯的范畴)。从南京大学一个联合小组,阿里巴巴集团和砖公司进入竞争使用NADSort,分布式排序程序之上的火花,创造一项新的世界纪录,最合算的方法100 tb的数据。

火花2.0.2发布

我们很高兴宣布的可用性Apache火花2.0.2!这个维护发行版包括修复在几个领域的火花,以及卡夫卡0.10和运行时度量支持结构化流。

火花1.6.3发布

我们很高兴宣布的可用性1.6.3火花!这个维护发行版包括修复在几个领域的火花。

火花1.6.2发布

我们很高兴宣布的可用性1.6.2火花!这个维护发行版包括修复在几个领域的火花。

呼吁演讲引发欧盟峰会是开放的

呼吁公开演讲引发欧盟峰会!事件将10月25日至27日在布鲁塞尔举行。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业,引发生态系统和研究。请提交7月1日被认为是。

2.0预览版的火花

使大规模社区测试即将到来的2.0版本,Apache引发团队已经公布2.0预览版的火花。这个预览不是一个稳定版本的API或功能,但它是为了给社区的早期访问尝试将成为引发2.0的代码。如果你想测试版本,只需下载它,并发送反馈使用邮件列表JIRA

火花1.6.1发布

我们很高兴宣布的可用性1.6.1火花!这个维护发行版包括修复火花的多个领域,包括重要的实验数据集更新的API。

提交火花峰会旧金山开放

呼吁公开演讲火花峰会旧金山!事件将在旧金山6月6 - 8。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、商业价值,引发生态系统和研究。请提交2月29日被认为是。

火花1.6.0发布

我们很高兴宣布的可用性火花1.6.0!火花1.6.0是API-compatible第七版1。X线。这个版本的火花社区继续增长,从248名开发者贡献!

CFP火花峰会东2016很快就要关闭!

呼吁的演讲很快关闭火花峰会东!事件将在2月16 - 18日在纽约市。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业、和研究。请提交在11月22日被考虑。

火花1.5.2发布

我们很高兴宣布的可用性1.5.2火花!这个维护发行版包括修复火花的多个领域,包括DataFrame API,引发流,PySpark, R,火花SQL和MLlib。

提交火花峰会东2016年开放

摘要提交现在开放第二火花峰会东!事件将在2月16 - 18日在纽约市。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业、和研究。

火花1.5.1发布

我们很高兴宣布的可用性1.5.1火花!这个维护发行版包括修复火花的多个领域,包括DataFrame API,引发流,PySpark, R,火花SQL和MLlib。

火花1.5.0发布

我们很高兴宣布的可用性火花1.5.0!火花1.5.0是API-compatible第六版1。X线。激发最大的释放,来自230开发人员和1400多名提交!

火花1.4.1发布

我们很高兴宣布的可用性1.4.1火花!这是一个维护版本,其中包括从85年开发者贡献。火花1.4.1包括修复火花的多个领域,包括DataFrame API,引发流,PySpark,火花SQL, MLlib。

2015个视频发布火花峰会

的视频和幻灯片引发2015年峰会现在所有网上!会谈包括技术路线图的讨论,深入对火花组件,和用例之上的火花。

火花1.4.0发布

我们很高兴宣布的可用性火花1.4.0!火花1.4.0 API-compatible 1上的第五个版本。X线。激发最大的释放,来自210开发人员和1000多名提交!

宣布引发欧洲峰会

摘要提交现在对首次开放引发欧洲峰会。事件将在10月27日至29日在阿姆斯特丹。欢迎提交在各种引发相关的话题,包括用例和持续的发展。

1.3.0火花版本发布

我们很高兴宣布的可用性1.3.0火花版本!第三版在API-compatible 1.3.0火花版本1。X线。激发最大的释放,来自174开发人员和1000多名提交!

火花1.2.1发布

我们很高兴宣布的可用性引发这次1.2.1!这是一个维护版本,其中包括从69年开发者贡献。火花1.2.1包括修复火花的多个领域,包括核心API,流媒体,PySpark, SQL, GraphX, MLlib。

火花1.2.0发布

我们很高兴宣布的可用性火花1.2.0!火花1.2.0 API-compatible 1上的第三个版本。X线。激发最大的释放,来自172开发人员和1000多名提交!

火花1.1.1发布

我们很高兴宣布的可用性1.1.1火花!这是一个维护版本,包括来自55个开发人员。火花1.1.1包括修复火花的多个领域,包括核心API,流媒体,PySpark, SQL, GraphX, MLlib。

提交开放火花峰会在纽约东2015

成功的事件在过去的两年里,之后火花峰会会议已经扩大为2015,3月18日至19日在纽约一个事件和一个6月15 - 17日在旧金山。会议是一个很好的机会来满足人们从整个火花社区和看到的最新消息,提示和用例。

火花1.1.0发布

我们很高兴宣布的可用性火花1.1.0!火花1.1.0 API-compatible 1是第二个版本。X线。它是引发最大的释放,从171名开发者贡献!

火花1.0.2中释放

我们很高兴宣布的可用性火花1.0.2!这个版本包括贡献来自30个开发人员。火花1.0.2中包括修复火花的多个领域,包括核心API,流媒体,PySpark, MLlib。

火花0.9.2发布

我们很高兴宣布的可用性火花0.9.2!Apache 0.9.2火花是一个维护版本的bug修复。我们建议所有的0.9。x用户升级到这个稳定版本。对这个版本的贡献来自28个开发人员。

2014个视频发布火花峰会

的视频和幻灯片引发2014年峰会现在所有网上。看着他们看到引发社会的最新消息,以及用例和应用程序之上。此外,培训材料从这次峰会,包括实践练习,也是所有可用的自由。

火花1.0.1发布

我们很高兴宣布的可用性火花1.0.1!这个版本包括从70年开发者贡献。火花1.0.0包括修复火花的多个领域,包括核心API, PySpark, MLlib。它还包括新特性火花(α)的SQL库,包括支持JSON数据和修复性能和稳定性。

火花1.0.0发布

我们很高兴宣布的可用性火花1.0.0!火花1.0.0 1是第一个。X线版本,为火花的核心接口提供API的稳定性。它是引发最大的释放,从117年开始开发人员与贡献。这个版本扩展火花的标准库,引入一个新的SQL包(火花SQL),用户可以将SQL查询集成到现有火花工作流。MLlib火花的机器学习库,是扩大与稀疏向量的支持和一些新的算法。GraphX和流媒体库还引入新的特性和优化。火花的核心引擎增加了纱线集群的支持,一个统一的工具提交火花应用程序,和一些性能和稳定性的改进。

火花峰会议程了

的议程引发2014年峰会会议现在网上。来自50多个组织与会谈,这将是迄今为止最大的引发事件,使开发人员和用户社区。加入我们的人或收听在线学习最新的事件引发。

火花0.9.1发布

我们很高兴宣布的可用性火花0.9.1!Apache火花0.9.1和bug修复是一个维护版本,性能改进,更好的稳定与纱线和改善了Scala的平价和Python API。我们建议所有0.9.0用户升级到稳定版本。对这个版本的贡献来自37个开发人员。

火花变成顶级Apache项目

Apache软件基金会宣布今天,火花从Apache孵化器毕业成为一名顶级Apache项目,表示项目的社区和产品已经按照ASF的精英化的流程和原则。这是社区的重要一步,我们非常自豪与用户分享这个消息我们完整的火花Apache的举措。阅读更多关于火花的增长在过去的一年,在ASF的贡献者和用户新闻稿

火花0.9.0发布

我们很高兴宣布的可用性火花0.9.0!火花0.9.0是一个主要的发布和火花最大的释放,从83年开始开发人员与贡献。这个版本扩展了火花的标准库,引入一个新的图形计算包(GraphX)和若干新功能添加到机器学习和流处理包。这也使得重大改进核心引擎,包括外部聚合,一个简化的H /长寿命应用程序的模式,和硬纱的支持。

火花0.8.1发布

我们刚刚发布了火花释放0.8.1、维护和性能的Scala 2.9版本发布火花。0.8.1包括支持2.2纱,高可用性模式独立的调度程序,优化洗牌,以及其他许多改进。我们建议所有用户更新这个版本。参观发布说明了解新特性,或者下载今天发布。

火花峰会2013是一个包装

引发2013年峰会在2013年12月初举行,在旧金山市中心,是一个成功!开发人员和爱好者超过450火花来自13个国家和超过180家公司向项目负责人和学习生产用户的火花,鲨鱼,火花流和相关项目的用例,最近的事态发展,引发社会的路线图。

宣布第一个火花峰会:2013年12月2日

我们兴奋地宣布第一个火花峰会2013年12月2日在旧金山市中心。听到来自关键生产用户的火花,鲨鱼,火花流和相关项目。也找出发展,并学习如何在不同的应用程序中使用火花堆栈。峰会是由领导组织和赞助组织社区的火花。

火花0.8.0发布

我们自豪地宣布释放Apache火花0.8.0。火花0.8.0是一个主要版本,包含了许多新功能和可用性的改进。这也是我们的第一个版本在Apache孵化器。它是迄今最大的火花释放,从67年开发人员和24家公司贡献。主要的新特性包括扩大监测框架和UI,机器学习库,并支持运行引发内部纱线。

引发用户调查和“由”页面

随着我们继续发展的火花,我们想从用户那里获得反馈和听到你希望我们接下来的工作。我们决定一个好的方法是一项调查——我们希望定期运行。如果你有几分钟时间来参与,在这里填写调查。非常感谢你的时间。

注册开放AMP阵营训练营在伯克利

想学习如何使用火花,鲨鱼,GraphX,和相关技术的人吗?AMP实验室为他们举办一个为期两天的培训班8月29日和30日在伯克利。研讨会将包括教程、谈判从用户和超过四个小时的实践练习。AMP阵营网站上注册现在开放人均250美元的价格。我们建议签约早期因为去年的研讨会是卖完了。

火花邮件列表搬到Apache

作为火花的一部分项目最近搬到Apache,我们计划在本月邮件列表迁移到Apache的基础设施,所以现有的谷歌集团将成为只读的9月1日,2013年。继续接收更新火花或参与开发讨论,请订阅以下列表:

大多数用户可能希望用户列表,但个人感兴趣的项目贡献代码,也应该订阅Dev列表。

火花0.7.3发布

我们刚刚发布了火花释放0.7.3一个维护版本,它包含几个补丁,包括流API将jar添加到更新和新功能spark-shell会话。我们建议所有用户更新这个版本。参观发布说明了解新特性,或者下载今天发布。

火花录取Apache孵化器

火花最近接受Apache孵化器,这将作为项目的长期的家。移动时的源代码和问题跟踪Apache需要一些时间,我们是在Apache高兴加入这个社区。请继续关注本网站的更新项目托管将如何变化。

火花0.7.2发布

我们很高兴宣布释放火花0.7.2,一个新的维护发行版,包括一些bug修复和改进,以及新的代码示例和API特性。我们建议所有用户更新这个版本。头的发布说明了解新特性,或者下载今天发布。

火花进行发表

我们已经发布了第一个两个演示在一系列的短的视频培训课程我们将发布帮助新用户与火花在几分钟内启动并运行。

现在网上地层演习

在今年的地层AMP实验室会议,主持了一天的教程在火花,鲨鱼,和火花流,包括在线练习在Amazon EC2上。现在这些练习网上,让你学会火花和鲨鱼以自己的节奏在EC2集群与真实的数据。他们是一个伟大的学习系统的资源。你还可以找到幻灯片从地层在线教程,以及视频从AMP阵营车间我们8月在伯克利举行。

火花0.7.0发布

我们自豪地宣布释放火花0.7.0,一个新的主要版本添加了几个关键特性的火花,包括Python API火花,一个α的火花流。这个版本是最大的贡献者的结果背后的火花释放- 31贡献者来自内部和外部伯克利。头的发布说明阅读更多关于新功能,或下载今天发布。

亚马逊EMR火花/鲨鱼教程

这个周末,亚马逊发布了一个文章发射和代码,使它容易引发弹性MapReduce和鲨鱼。本文包括的示例如何互动Scala命令和运行SQL查询从鲨鱼在S3数据。头的亚马逊的文章获取详细信息。我们非常兴奋,因为据我们所知,这使得火花第一和EMR non-Hadoop引擎,您可以启动。

火花0.6.2发布

我们最近发布的火花0.6.2新版本的火花。这是一个维护版本,包括几个bug修复和可用性改进(见发布说明)。我们建议所有用户升级到这个版本。

视频从第一个开发meetup火花

12月18日,我们举行了第一次的一系列火花开发聚会,人们感兴趣的火花代码库,为项目做出了贡献。有很多比我们预期的要需求,参加人数超过80人报名,64。第一个聚会是一个介绍引发内部。由于参加者之一,现在聚会的视频在YouTube上。我们也公布了幻灯片。期待看到更多在未来发展聚会火花和鲨鱼。

引发的新闻

最近,我们看到不少的报道引发的新闻。我想列出的一些最近的文章,为读者对学习更感兴趣。

在其他新闻,会有一天的教程在火花和鲨鱼O ' reilly地层会议2月。它们包括三个小时介绍了火花,鲨鱼和汇业银行周二早上,三个小时动手练习会话

火花0.6.1 0.5.2出去

今天我们提供两个火花的维护版本:0.6.10.5.2。他们都包含重要的bug修复以及一些新特性,比如建立针对Hadoop 2分布。我们建议用户升级到最新版本的分支;对于新用户,我们建议0.6.1

最新消息

存档

Baidu
map