日期:2014-05-20 浏览次数:20682 次
int count = 0; String who = "b"; Map<String,Integer> map = new HashMap<String,Integer>(); FileReader fr = new FileReader("e:\\a.log"); BufferedReader br = new BufferedReader(fr); String str = null; while((str = br.readLine()) != null) { String userName = str.substring(4, str.indexOf(":")-str.indexOf("[用户名")); if(userName.equals(who)) { count++; } } br.close(); fr.close(); System.out.println(who + "登陆次数为" + count);
------解决方案--------------------
也不是很懂海量数据处理,下面的代码对20G文件可能也无能为力:
public class FilterFile {
public static void main(String[] args) throws Exception {
String infile = "C:\\alluser.log";
String outfile = "C:\\xxx.log";
// 获取源文件和目标文件的输入输出流
FileInputStream fin = new FileInputStream(infile);
FileOutputStream fout = new FileOutputStream(outfile);
// 获取输入输出通道
FileChannel fcin = fin.getChannel();
FileChannel fcout = fout.getChannel();
// 创建缓冲区
ByteBuffer buffer = ByteBuffer.allocate(1024);
while (true) {
// clear方法重设缓冲区,使它可以接受读入的数据
buffer.clear();
// 从输入通道中将数据读到缓冲区
int r = fcin.read(buffer);
// read方法返回读取的字节数,可能为零,如果该通道已到达流的末尾,则返回-1
if (r == -1) {
break;
}
// flip方法让缓冲区可以将新读入的数据写入另一个通道
buffer.flip();
// 从输出通道中将数据写入缓冲区
//如果包含用户信息则写入,否则不写入,可以优化一下看看能否精确到只写一行而不是整个buffer
if(buffer.toString().indexOf("xxx")){
fcout.write(buffer);
}
}
}