[求助] 求千万数据量表的抽取方案
问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作有20+张表。
1.安全起见,不允许试用DBLINK.
2.之前通过WebService实现,效率太低。
3.目前考虑B端查询数据生成CSV文件,zip压缩,调用A端接口修改A端状态表“准备状态”及“zip的URL”。A端扫描后下载ZIP,解压、解析入库。
请问有更好的方法吗?最好能提供资料(java)。谢谢! 邮箱:andsion@foxmail.com
------解决方案--------------------应该是oracle吧,你的第三条可以改成import出来dump文件,不用csv,如果非用这种平面文件的话,改用ldr去做速度能快些
另外压缩平面文件可以考虑其他的压缩算法
------解决方案--------------------不可以导入导出么?