类
ArrowDatasetPartitioningFactoryOptions
属性
ArrowDataset.PartitioningFactoryOptions:infer-dictionary
在推断分区字段的模式时,生成字典编码类型而不是普通类型。这在物化虚拟列时效率更高,并且由完成的 Partitioning 解析的表达式将包含每个字段所有唯一检查值的字典。
自:11.0.0 起
ArrowDataset.PartitioningFactoryOptions:schema
可以选择提供预期的模式,在这种情况下,推断将仅根据模式检查发现的字段并更新内部状态(例如字典)。
自:11.0.0 起