linuxsir首页 LinuxSir.Org | Linux、BSD、Solaris、Unix | 开源传万世,因有我参与欢迎您!
网站首页 | 设为首页 | 加入收藏
您所在的位置:主页 > 小企鹅新闻图书馆 >

用于Apache Spark 预览版的.NET现已推出

时间:2019-04-29  来源:未知  作者:admin666

昨天,在Spark + AI峰会上,7080棋牌游戏Apache Spark的团队宣布了.NET for Apache Spark,这是一种流行的开源分布式处理引擎,用于分析大型数据集。它还可用于处理实时流,批量数据,机器学习和即席查询。

面向开发人员的.NET for Apache Spark

.NET for Apache Spark旨在使所有Spark API中的.NET开发人员都可以访问Apache Spark。 Apache Spark的团队旨在为开发人员(作为.NET Foundation成员项目)以及Spark和.NET社区开发用于Apache Spark的.NET。

.NET for Apache Spark附带了高性能API,用于使用C#和F#中的Spark。使用.NET API,用户现在可以访问Apache Spark的所有方面,包括streaming,Spark SQL,DataFrame,MLLib等。它允许开发人员重用所有技能,代码,知识和库。绑定到Spark的C#/F#语言将写在一个新的Spark互操作层上,这将提供更容易的可扩展性。 .NET for Apache Spark可以在Linux,macOS和Windows上使用,并且符合.NET Standard 2.0。

.NET for Apache Spark性能

.NET Spark for Apache Spark的第一个预览版在流行的TPC-H基准测试中表现良好。该基准测试包含一系列面向业务的查询。针对Apache Spark的.NET具有针对Python和Scala的更好性能。它也比Python快2倍。

还有什么功能可以预期?

在未来,该团队旨在简化文档和示例,并与Visual Studio,Visual Studio Code,Jupyter笔记本等开发人员工具进行本机集成。开发人员还可以期望.NET支持用户定义的聚合函数以及用于C#和F#的.NET惯用API(例如,使用LINQ编写查询)。该团队还致力于添加对Azure Databricks,Kubernetes等的支持,并为Spark Spark的Apache Spark提供.NET。

不过很少有用户对此消息感到兴奋,并期望使用.NET for Spark进行一些重大改进。

要了解有关此新闻的更多信息,请查看Apache Spark的帖子。

Linux公社的RSS地址:https://www.linuxidc.com/rssFeed.aspx

本文永久更新链接地址:https://www.linuxidc.com/Linux/2019-04/158312.htm

linux Rails 6.0.0 RC1发布,多数据库支持 KernelShark 1.0 即将发布,用于可视化“Trace-cmd” Linux内核跟踪
友情链接
  • Linux基础教程 - VMware虚拟机CentOS 7 磁盘扩容
  • Linux如何查看文件被哪个进程写数据
  • 如何在Ubuntu中安装NVIDIA 430.09
  • Linux和Uboot下eMMC boot分区读写
  • devmem读写物理内存和devkmem读取内核虚拟内存
  • Linux内核性能分析利器之trace-cmd和kernelshark
  • 在 Linux 中把用户添加到组的四个方法
  • 如何在Ubuntu中更改用户密码
  • 如何在Ubuntu中通过PPA安装Kodi 18.2并设置中文界面
  • Ubuntu 18.04 下搭建 C/C++编译开发环境及GCC多版本切换
  • MySQL 报 ERROR 1030 Got error 28 from 解决
  • Linux dmesg命令使用示例
  • 关于MySQL触发器new和old
  • MySQL数据导出及mysqldump命令参数
  • MySQL 8.0新特性之原子DDL
  • MySQL slow_log表不能修改成innodb引擎
  • MySQL的可重复读级别能解决幻读吗
  • MySQL slow_log日志表出现非法字段值
  • MySQL数据库多实例介绍及安装
  • Oracle synonym 同义词创建与删除
  • Linux下MySQL多实例的安装部署
  • CentOS 7下Oracle 12C 无图形界面静默安装
  • Java集合之HashMap详解
  • MySQL 非空约束位置不同对自增列造成的影响
  • MySQL字符集utf8和utf-8的关系
  • 关于 Java 依赖注入
  • 通过 mysqlbinlog 和 grep 命令定位binlog文件中指定操作
  • shell控制多个进程并发执行实例
  • MariaDB数据库性能优化与中文乱码解决
  • Python 与 C/C++混合编程的应用
  • Python实现将文本生成二维码示例代码
  • C/C++ 动态库与静态库的制作和使用
  • 广域网访问NFS
  • Python下利用QR Code模块生成二维码示例
  • C/C++的静态库与动态库
  • CentOS 7集群间实现NFS文件共享
  • 使用Python pygal模块绘制世界地图示例
  • C/C++ open函数的阻塞和非阻塞
  • Samba服务权限配置案例
  • 关于numpy.rollaxis函数
  • Linux stat函数和stat命令
  • 使用Jenkins Pipeline自动化构建发布Java项目
  • Ubuntu下使用Python的pygal库创建SVG矢量图形
  • Python文件和目录操作示例
  • memcached架构及缓存策略
  • 狮子会
  • 大乐透走势图带坐标
  • 真人现场娱乐
  • 中彩网双色球走势图
  • 网上娱乐场
  • bvlgari官网
  • 大乐透走势图浙江