首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > JAVA > J2EE开发 >

[] 求千万数据量表的抽取方案

2013-07-01 
[求助] 求千万数据量表的抽取方案问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作

[求助] 求千万数据量表的抽取方案
问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作有20+张表。
1.安全起见,不允许试用DBLINK.
2.之前通过WebService实现,效率太低。
3.目前考虑B端查询数据生成CSV文件,zip压缩,调用A端接口修改A端状态表“准备状态”及“zip的URL”。A端扫描后下载ZIP,解压、解析入库。

请问有更好的方法吗?最好能提供资料(java)。谢谢! 邮箱:andsion@foxmail.com 数据抽取?java?
[解决办法]
应该是oracle吧,你的第三条可以改成import出来dump文件,不用csv,如果非用这种平面文件的话,改用ldr去做速度能快些

另外压缩平面文件可以考虑其他的压缩算法
[解决办法]
不可以导入导出么?

热点排行