大小

hive迁移数据(hive迁移数据到另一个集群)

1、评估磁盘空间大小、调整副本数、设置heapsize大小 2、distcp -i -skipcrccheck 源端到目标端，迁移 3、元数据迁移，建表，替换location地址，或者导出db 4、表分区修复 5、配置增量T-1迁移或者T-2 6、校验历史分区脚本，表结构，大小，文件数 7、根据ditcp不对的，进行补数脚本，删分区，重拉 8、任务校验，客户跑完任务后，校验指定分区的count数和…
大数据
- 2
- 0
考高分2025-03-03 10:15:40