Apache Arrow 0.9.0 发布,内存数据交换格式

栏目: 软件资讯 · 发布时间: 7年前

内容简介:Apache Arrow 0.9.0 发布了。Apache Arrow 是 Apache 基金会的顶级项目之一。它的目的是作为一个跨平台的数据层来加快大数据分析项目的运行速度。它包含一组规范的内存中的平面和分层数据表示,以及多种语言绑定以...

Apache Arrow 0.9.0 发布了。Apache Arrow 是 Apache 基金会的顶级项目之一。它的目的是作为一个跨平台的数据层来加快大数据分析项目的运行速度。它包含一组规范的内存中的平面和分层数据表示,以及多种语言绑定以进行结构操作。 它还提供低架构流式传输和批量消息传递,零拷贝进程间通信(IPC)和矢量化的内存分析库。

更新内容:

新特性和改进

  • ARROW-1021 - [Python] Add documentation about using pyarrow from other Cython and C++ projects

  • ARROW-1035 - [Python] Add ASV benchmarks for streaming columnar deserialization

  • ARROW-1394 - [Plasma] Add optional extension for allocating memory on GPUs

  • ARROW-1463 - [JAVA] Restructure ValueVector hierarchy to minimize compile-time generated code

  • ARROW-1579 - [Java] Add dockerized test setup to validate Spark integration

  • ARROW-1580 - [Python] Instructions for setting up nightly builds on Linux

  • ARROW-1623 - [C++] Add convenience method to construct Buffer from a string that owns its memory

  • ARROW-1632 - [Python] Permit categorical conversions in Table.to_pandas on a per-column basis

  • ARROW-1643 - [Python] Accept hdfs:// prefixes in parquet.read_table and attempt to connect to HDFS

  • ARROW-1705 - [Python] Create StructArray from sequence of dicts given a known data type

  • ARROW-1706 - [Python] StructArray.from_arrays should handle sequences that are coercible to arrays

  • ARROW-1712 - [C++] Add method to BinaryBuilder to reserve space for value data

  • ARROW-1757 - [C++] Add DictionaryArray::FromArrays alternate ctor that can check or sanitized “untrusted” indices

  • ARROW-1815 - [Java] Rename MapVector to StructVector

更多内容请完整更新列表下载地址


【声明】文章转载自:开源中国社区 [http://www.oschina.net]


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

老码识途

老码识途

韩宏 / 电子工业出版社 / 2012-8 / 56.00元

《老"码"识途:从机器码到框架的系统观逆向修炼之路》以逆向反汇编为线索,自底向上,从探索者的角度,原生态地刻画了对系统机制的学习,以及相关问题的猜测、追踪和解决过程,展现了系统级思维方式的淬炼方法。该思维方式是架构师应具备的一种重要素质。《老"码"识途:从机器码到框架的系统观逆向修炼之路》内容涉及反汇编、底层调试、链接、加载、钩子、异常处理、测试驱动开发、对象模型和机制、线程类封装、跨平台技术、插......一起来看看 《老码识途》 这本书的介绍吧!

JS 压缩/解压工具
JS 压缩/解压工具

在线压缩/解压 JS 代码

XML 在线格式化
XML 在线格式化

在线 XML 格式化压缩工具

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具