JAVA程序处理大量数据问题 - Java / Java SE
情况是这样的：
我需要从2000W的表中读数据
对其中一个数据操作（只能写JAVA程序，不能SQL）
然后update
目前采用的是按范围读取-------基本上处理10个左右的200W数据
通过ROWNUM读取200W中的各个10W条放入ResultSet
处理放入batch
10W条处理完毕executeBatch()一下
ps：即处理200W数据需要executeBatch() 20次
我自己分析了一下，在RS的时候比较慢，update平均100ms
由于是通过java程序对磁盘的读写，所以整体时间较长
有没有更好的解决方案啊？？？？
大家帮帮忙 谢谢啦
java程序怎么写，最终也是底层要用sql，顶多就是你用那个框架，而这个框架把sql封装了起来。
而系统的主要瓶颈就是I/O所以减少I/O所消耗的时间，你的程序就可以提高n倍，所以在取数据时就要尽量精确，尽量取少的数据。
而你的问题，2000W条数据你都去了出来，可是你只需要这2000W条数据中的一条对这一条数据进行操作，其他都是无用的数据。这就是你的问题
对fenshen的回答，先谢过。
我解释一下，我是分范围200W一次性取出
我还要对2000W数据都做处理，而不是其中一条做处理
那I/O消耗怎么减少呢？
{ResultSet rs=executeQuery(sql); }???
貌�
相关问答：
我已经按照教程上配置tomcat的server.xml
<Context path = "/POS" docBase = "POS" debug = "5" reloadable = "true" crossContext = "true" workDir = &quo ......
代码如下 ，我想通过代理访问一些网址，但是不知道如何测试代理成功，我想通过访问“http://www.blogger.com/”来看看是否代理成功，但是也不能访问，出现异常“Unexpected end of file from server”，但是如果不这 ......
<?xml version="1.0" encoding="utf-8" ?>
- <LinearLayout xmlns:android="http://schemas.android.com/apk/res/android" android:orientation="vertical&q ......
我在 java核心技术上 看了一个 利用 Java socket email的例子 可是怎么也 不成功 为什么？
源码
Java code:
package cn.com.test.email;
import java.awt.GridBagLayout;
import java.awt.event.Action ......
table怎么绑定数据库，并且用JavaScript实现翻页。。。。。。。。。。JavaScript能向JSP页面传递参数吗
你说的问题有点那个。。，不好回答。。。。
jsp中table是需要html代码与页面端获取数据库查询后的信息进行 ......
