James 发表于 2015-9-15 12:43:21

bboss v4.0.9 发布,大数据抽取工具

  实现db到hadoop hdfs数据导入功能,提供高效的分布式并行处理能力,可以采用数据库表分区、按字段分区、表分区+分区字段二次分区三种方式并行抽取db数据到hdfs文件系统中;能有效解决按字段分区抽取数据时,各分区数据不均匀导致作业任务处理节点负载不均衡的问题,分区字段可以是数字类型和日期类型(采用日期类型时,每个任务块的数据分布更加均匀)。
页: [1]
查看完整版本: bboss v4.0.9 发布,大数据抽取工具