Apache火花今年收到了SIGMOD系统奖,由SIGMOD (ACM的数据管理研究机构)有效的实际和研究系统:
的spark-packages团队已经旋转了一个新的存储库服务https://repos.spark-packages.org它会在spark-packages工件的新家。
下一个官方版本是引发火花3.1.1代替3.1.0火花。有一个火花3.1.0 RC1准备期间技术问题,明白了【投票】释放火花3.1.0 (RC1)在火花dev邮件列表。
的议程火花+人工智能峰会2020现在可以了!峰会6月22日开幕。我们今年的峰会演变成了全球性事件——完全虚拟,并且对每个人开放,免费的。和峰会现在更大:扩展与200 + 5天会议,4 x培训,主题演讲有远见和思想领袖。加入成千上万的工程师、科学家、开发人员、分析师和领导人塑造未来的大数据,分析和人工智能。检查满满的时间表和注册参加!
使大规模社区测试即将到来的3.0版本,Apache引发社会公布火花3.0.0 preview2释放。这个预览不是一个稳定版本的API或功能,但它是为了给社区的早期访问尝试将成为引发3.0的代码。如果你想测试版本,请下载它,并发送反馈使用邮件列表或JIRA。在可用的文档链接。
我们很高兴宣布的可用性如果是2.4.4火花!参观发布说明了解新特性,或者下载今天发布。
你们很多人都已经知道,Python核心开发团队和许多利用Python包喜欢熊猫和NumPy 2020/01/01之前Python 2支持或将会下降。Apache引发火花以来支持Python 2和3在2015年1.4版本。然而,维护Python 2/3的兼容性是一个增加负担,它本质上限制使用Python 3特性火花。生命的终结(EOL) Python 2即将到来,我们计划最终下降Python 2支持。当前的计划如下:
的议程火花+人工智能峰会2019现在可以了!峰会4月23日开始一整天的Apache火花培训之后,超过100 +会谈来自Netflix、Facebook、Uber, Yelp,目标,苹果和更多!检查满满的时间表和注册参加!
的议程火花+人工智能欧洲峰会现在可以了!峰会开幕,10月2日一整天的火花训练之后,在100年的谈判由演讲者从砖、Facebook、英特尔、IBM、欧洲核子研究中心,乳房和谷歌。检查满满的时间表和注册参加!
我们很高兴宣布的可用性火花tripwire!参观发布说明了解新特性,或者下载今天发布。
我们很高兴宣布的可用性Apache火花2.2.1!参观发布说明读到这些变化,或下载今天发布。
我们很高兴宣布的可用性Apache火花2.1.2!参观发布说明读到这些变化,或下载今天发布。
的议程2017年欧盟的火花峰会现在可以了!峰会开幕,10月24日一整天的Apache火花训练之后,超过80 +会谈以扬声器和果壳,Netflix,英特尔、IBM、Facebook、卡通等等。检查满满的时间表和注册参加!
我们很高兴宣布的可用性Apache火花2.1.1!参观发布说明读到这些变化,或下载今天发布。
我们自豪地宣布,Apache火花了2016年CloudSort基准(代托纳和印第安纳·琼斯的范畴)。从南京大学一个联合小组,阿里巴巴集团和砖公司进入竞争使用NADSort,分布式排序程序之上的火花,创造一项新的世界纪录,最合算的方法100 tb的数据。
我们很高兴宣布的可用性Apache火花2.0.2!这个维护发行版包括修复在几个领域的火花,以及卡夫卡0.10和运行时度量支持结构化流。
我们很高兴宣布的可用性1.6.3火花!这个维护发行版包括修复在几个领域的火花。
我们很高兴宣布的可用性Apache火花2.0.1!参观发布说明了解新特性,或者下载今天发布。
我们很高兴宣布的可用性1.6.2火花!这个维护发行版包括修复在几个领域的火花。
呼吁公开演讲引发欧盟峰会!事件将10月25日至27日在布鲁塞尔举行。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业,引发生态系统和研究。请提交7月1日被认为是。
我们很高兴宣布的可用性1.6.1火花!这个维护发行版包括修复火花的多个领域,包括重要的实验数据集更新的API。
呼吁公开演讲火花峰会旧金山!事件将在旧金山6月6 - 8。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、商业价值,引发生态系统和研究。请提交2月29日被认为是。
我们很高兴宣布的可用性火花1.6.0!火花1.6.0是API-compatible第七版1。X线。这个版本的火花社区继续增长,从248名开发者贡献!
呼吁的演讲很快关闭火花峰会东!事件将在2月16 - 18日在纽约市。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业、和研究。请提交在11月22日被考虑。
我们很高兴宣布的可用性1.5.2火花!这个维护发行版包括修复火花的多个领域,包括DataFrame API,引发流,PySpark, R,火花SQL和MLlib。
摘要提交现在开放第二火花峰会东!事件将在2月16 - 18日在纽约市。欢迎提交在各种Spark-related话题,包括应用程序、开发,数据科学、企业、和研究。
我们很高兴宣布的可用性1.5.1火花!这个维护发行版包括修复火花的多个领域,包括DataFrame API,引发流,PySpark, R,火花SQL和MLlib。
我们很高兴宣布的可用性火花1.5.0!火花1.5.0是API-compatible第六版1。X线。激发最大的释放,来自230开发人员和1400多名提交!
我们很高兴宣布的可用性1.4.1火花!这是一个维护版本,其中包括从85年开发者贡献。火花1.4.1包括修复火花的多个领域,包括DataFrame API,引发流,PySpark,火花SQL, MLlib。
的视频和幻灯片引发2015年峰会现在所有网上!会谈包括技术路线图的讨论,深入对火花组件,和用例之上的火花。
我们很高兴宣布的可用性火花1.4.0!火花1.4.0 API-compatible 1上的第五个版本。X线。激发最大的释放,来自210开发人员和1000多名提交!
摘要提交现在对首次开放引发欧洲峰会。事件将在10月27日至29日在阿姆斯特丹。欢迎提交在各种引发相关的话题,包括用例和持续的发展。
的视频和幻灯片火花峰会东2015现在所有网上。看他们引发社会的最新消息,以及用例和应用程序之上。
我们很高兴宣布的可用性1.3.0火花版本!第三版在API-compatible 1.3.0火花版本1。X线。激发最大的释放,来自174开发人员和1000多名提交!
我们很高兴宣布的可用性引发这次1.2.1!这是一个维护版本,其中包括从69年开发者贡献。火花1.2.1包括修复火花的多个领域,包括核心API,流媒体,PySpark, SQL, GraphX, MLlib。
我们很高兴宣布的可用性火花1.2.0!火花1.2.0 API-compatible 1上的第三个版本。X线。激发最大的释放,来自172开发人员和1000多名提交!
我们很高兴宣布的可用性1.1.1火花!这是一个维护版本,包括来自55个开发人员。火花1.1.1包括修复火花的多个领域,包括核心API,流媒体,PySpark, SQL, GraphX, MLlib。
我们自豪地宣布,引发了2014灰色分类基准(代托纳100 tb的类别)。一个团队的砖包括火花提交者、雷诺鑫Xiangrui孟,马泰Zaharia,输入基准使用火花。火花从UCSD与忒弥斯团队赢得了领带,在排序,共同创造一项新的世界纪录。
成功的事件在过去的两年里,之后火花峰会会议已经扩大为2015,3月18日至19日在纽约一个事件和一个6月15 - 17日在旧金山。会议是一个很好的机会来满足人们从整个火花社区和看到的最新消息,提示和用例。
我们很高兴宣布的可用性火花1.1.0!火花1.1.0 API-compatible 1是第二个版本。X线。它是引发最大的释放,从171名开发者贡献!
我们很高兴宣布的可用性火花1.0.2!这个版本包括贡献来自30个开发人员。火花1.0.2中包括修复火花的多个领域,包括核心API,流媒体,PySpark, MLlib。
我们很高兴宣布的可用性火花0.9.2!Apache 0.9.2火花是一个维护版本的bug修复。我们建议所有的0.9。x用户升级到这个稳定版本。对这个版本的贡献来自28个开发人员。
我们很高兴宣布的可用性火花1.0.1!这个版本包括从70年开发者贡献。火花1.0.0包括修复火花的多个领域,包括核心API, PySpark, MLlib。它还包括新特性火花(α)的SQL库,包括支持JSON数据和修复性能和稳定性。
我们很高兴宣布的可用性火花1.0.0!火花1.0.0 1是第一个。X线版本,为火花的核心接口提供API的稳定性。它是引发最大的释放,从117年开始开发人员与贡献。这个版本扩展火花的标准库,引入一个新的SQL包(火花SQL),用户可以将SQL查询集成到现有火花工作流。MLlib火花的机器学习库,是扩大与稀疏向量的支持和一些新的算法。GraphX和流媒体库还引入新的特性和优化。火花的核心引擎增加了纱线集群的支持,一个统一的工具提交火花应用程序,和一些性能和稳定性的改进。
我们很高兴宣布的可用性火花0.9.1!Apache火花0.9.1和bug修复是一个维护版本,性能改进,更好的稳定与纱线和改善了Scala的平价和Python API。我们建议所有0.9.0用户升级到稳定版本。对这个版本的贡献来自37个开发人员。
我们很高兴宣布的可用性火花0.9.0!火花0.9.0是一个主要的发布和火花最大的释放,从83年开始开发人员与贡献。这个版本扩展了火花的标准库,引入一个新的图形计算包(GraphX)和若干新功能添加到机器学习和流处理包。这也使得重大改进核心引擎,包括外部聚合,一个简化的H /长寿命应用程序的模式,和硬纱的支持。
的引发2013年峰会在2013年12月初举行,在旧金山市中心,是一个成功!开发人员和爱好者超过450火花来自13个国家和超过180家公司向项目负责人和学习生产用户的火花,鲨鱼,火花流和相关项目的用例,最近的事态发展,引发社会的路线图。
我们兴奋地宣布第一个火花峰会2013年12月2日在旧金山市中心。听到来自关键生产用户的火花,鲨鱼,火花流和相关项目。也找出发展,并学习如何在不同的应用程序中使用火花堆栈。峰会是由领导组织和赞助组织社区的火花。
我们自豪地宣布释放Apache火花0.8.0。火花0.8.0是一个主要版本,包含了许多新功能和可用性的改进。这也是我们的第一个版本在Apache孵化器。它是迄今最大的火花释放,从67年开发人员和24家公司贡献。主要的新特性包括扩大监测框架和UI,机器学习库,并支持运行引发内部纱线。
随着我们继续发展的火花,我们想从用户那里获得反馈和听到你希望我们接下来的工作。我们决定一个好的方法是一项调查——我们希望定期运行。如果你有几分钟时间来参与,在这里填写调查。非常感谢你的时间。
我们已经发布的下一个视频,在Scala中一个独立的工作带你超越引发壳,帮助你编写你的第一个独立的火花工作。
想学习如何使用火花,鲨鱼,GraphX,和相关技术的人吗?AMP实验室为他们举办一个为期两天的培训班8月29日和30日在伯克利。研讨会将包括教程、谈判从用户和超过四个小时的实践练习。AMP阵营网站上注册现在开放人均250美元的价格。我们建议签约早期因为去年的研讨会是卖完了。
作为火花的一部分项目最近搬到Apache,我们计划在本月邮件列表迁移到Apache的基础设施,所以现有的谷歌集团将成为只读的9月1日,2013年。继续接收更新火花或参与开发讨论,请订阅以下列表:
大多数用户可能希望用户列表,但个人感兴趣的项目贡献代码,也应该订阅Dev列表。
AMP实验室的火花,它的创造者,和它的一些用户在一个特色连接企业的文章几天前。往下读,学习一个小火花被用于工业。
我们已经发布了第一个两个演示在一系列的短的视频培训课程我们将发布帮助新用户与火花在几分钟内启动并运行。
我们自豪地宣布释放火花0.7.0,一个新的主要版本添加了几个关键特性的火花,包括Python API火花,一个α的火花流。这个版本是最大的贡献者的结果背后的火花释放- 31贡献者来自内部和外部伯克利。头的发布说明阅读更多关于新功能,或下载今天发布。
最近,我们看到不少的报道引发的新闻。我想列出的一些最近的文章,为读者对学习更感兴趣。
在其他新闻,会有一天的教程在火花和鲨鱼O ' reilly地层会议2月。它们包括三个小时介绍了火花,鲨鱼和汇业银行周二早上,三个小时动手练习会话。
我们的在火花赢得了最佳论文奖USENIX NSDI会议。你可以看到一个视频谈话,以及幻灯片,在线上NSDI网站。
我们已经开始定期举办海湾地区引发用户聚会。在meetup.com注册页面通知事件和其他引发开发者和用户见面。