搜索 - 腾讯云开发者社区-腾讯云

文章/答案/技术大牛

发布

来自专栏ApacheHudi
真香！PySpark整合Apache Hudi实战
org.apache.spark:spark-avro_2.11:2.4.4 \ --conf 'spark.serializer=org.apache.spark.serializer.KryoSerializer' spark-avro 模块需要在--packages显示指定 spark-avro和spark的版本必须匹配本示例中，由于依赖spark-avro2.11，因此使用的是scala2.11构建hudi-spark-bundle
2.2K20发布于 2021-04-13
来自专栏我是攻城师
Spark 1.3更新概述：176个贡献者，1000+ patches
/bin/spark-shell --packages databricks/spark-avro:0.2 Spark Packages 还为开发者建立了一个SBT插件来简化包的发布，并为发布包提供了自动地兼容性检查
89240发布于 2018-05-11
来自专栏ApacheHudi
Apache Hudi 0.6.0版本重磅发布
后续的0.6.x版本将应用到其他的写操作以使得schema管理更为轻松，彻底避免spark-avro的转化。
81020发布于 2021-04-13
来自专栏大数据成神之路
Apache Hudi 0.11 版本重磅发布，新特性速览!
Spark 或 Utilities 包在运行时不再需要额外spark-avro的包；可以删除--package org.apache.spark:spark-avro_2.1*:*选项。
4.4K30编辑于 2022-06-05
来自专栏ApacheHudi
Apache Hudi 0.11.0版本重磅发布！
Spark 或 Utilities 包在运行时不再需要额外spark-avro的包；可以删除--package org.apache.spark:spark-avro_2.1*:*选项。
4.7K40编辑于 2022-05-18