ScalavroScala 数据序列化
Scalavro 是一个使用反射技术实现的 Avro 库。
Avro是一个数据序列化系统,设计用于支持大 批量数据交换的应用。它的主要特点有:支持二进制序列化方式,可以便捷,快速地处理大量数据;动态语言友好,Avro提供的机制使动态语言可以方便地处理 Avro数据。
示例代码:
import com.gensler.scalavro.types.AvroType import scala.util.{ Try, Success, Failure } // obtaining an instance of AvroType val intSeqType = AvroType[Seq[Int]] // obtaining an Avro schema for a given AvroType intSeqType.schema // obtaining an AvroTypeIO object for a given AvroType (via the `io` method) val io: AvroTypeIO[Seq[Int]] = intSeqType.io // binary I/O io.write(Seq(1, 2, 3), outputStream) val Sucess(readResult) = io read inputStream // json I/O val json = io writeJson Seq(1, 2, 3) // [1,2,3] val Success(readResult) = io readJson json
评论
Apache Avro数据序列化系统
Avro(读音类似于[ævrə])是Hadoop的一个子项目,由Hadoop的创始人DougCutting(也是Lucene,Nutch等项目的创始人)牵头开发。Avro是一个数据序列化系统,设计用于
Apache Avro数据序列化系统
0
Bond数据序列化和传输框架
Bond是一个扩展框架,用来处理系统化数据,特别适合用来处理与大数据存储和处理服务的通讯。Bond定义了一个丰富的类型系统和schema版本化规则,允许向前向后兼容。核心特性包括高性能序列化和反序列化
Bond数据序列化和传输框架
0