Apache Arrow 0.9.0 发布,内存数据交换格式

栏目: 软件资讯 · 发布时间: 6年前

内容简介:Apache Arrow 0.9.0 发布了。Apache Arrow 是 Apache 基金会的顶级项目之一。它的目的是作为一个跨平台的数据层来加快大数据分析项目的运行速度。它包含一组规范的内存中的平面和分层数据表示,以及多种语言绑定以...

Apache Arrow 0.9.0 发布了。Apache Arrow 是 Apache 基金会的顶级项目之一。它的目的是作为一个跨平台的数据层来加快大数据分析项目的运行速度。它包含一组规范的内存中的平面和分层数据表示,以及多种语言绑定以进行结构操作。 它还提供低架构流式传输和批量消息传递,零拷贝进程间通信(IPC)和矢量化的内存分析库。

更新内容:

新特性和改进

  • ARROW-1021 - [Python] Add documentation about using pyarrow from other Cython and C++ projects

  • ARROW-1035 - [Python] Add ASV benchmarks for streaming columnar deserialization

  • ARROW-1394 - [Plasma] Add optional extension for allocating memory on GPUs

  • ARROW-1463 - [JAVA] Restructure ValueVector hierarchy to minimize compile-time generated code

  • ARROW-1579 - [Java] Add dockerized test setup to validate Spark integration

  • ARROW-1580 - [Python] Instructions for setting up nightly builds on Linux

  • ARROW-1623 - [C++] Add convenience method to construct Buffer from a string that owns its memory

  • ARROW-1632 - [Python] Permit categorical conversions in Table.to_pandas on a per-column basis

  • ARROW-1643 - [Python] Accept hdfs:// prefixes in parquet.read_table and attempt to connect to HDFS

  • ARROW-1705 - [Python] Create StructArray from sequence of dicts given a known data type

  • ARROW-1706 - [Python] StructArray.from_arrays should handle sequences that are coercible to arrays

  • ARROW-1712 - [C++] Add method to BinaryBuilder to reserve space for value data

  • ARROW-1757 - [C++] Add DictionaryArray::FromArrays alternate ctor that can check or sanitized “untrusted” indices

  • ARROW-1815 - [Java] Rename MapVector to StructVector

更多内容请完整更新列表下载地址


【声明】文章转载自:开源中国社区 [http://www.oschina.net]


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

高性能网站

高性能网站

(美)苏德 / 东南大学出版社 / 2008年 / 28.00元

《高性能网站》中的规則向你解释了可以怎样优化网站中包含的Ajax、CSS、JavaScript、Flash和图片。每个规则都可以在本书的网站上找到对应的特别例子和代码片段。这些规則包括以下内容:减少HTTP连接请求、使用内容分发网络(ContentDeliveryNetwork)、在HTTP协议头添加过期时间、把部分内容变成Gzip格式、把样式表(stylesheets)放在顶部、将脚本放在底部、......一起来看看 《高性能网站》 这本书的介绍吧!

Base64 编码/解码
Base64 编码/解码

Base64 编码/解码

MD5 加密
MD5 加密

MD5 加密工具

SHA 加密
SHA 加密

SHA 加密工具