会用Java读取文本文件就够了吗?文件超大怎么办?
lipiwang 2024-10-25 15:55 8 浏览 0 评论
Java读取文本文件的几个方法。
读到内存（适合小文件）
Guava方法：
Files.readLines(new File(path), Charsets.UTF_8);
Apache Commons IO方法：
FileUtils.readLines(new File(path));
这种方法的问题在于所有内容都保留在内存中。如果文件太大，这将迅速导致OutOfMemory错误。
此外，通常我们并不需要把一个大文件一次性全部读出来。 一方面，我们可能会对文件逐行做处理；一方面即便是直接显示也会分段呈现。想象一下，一次性给前端（不管是web还是桌面）返回1G的数据，怎么显示？
文件流Scanner
try(Scanner scanner = new Scanner(new File(pathname))) {
while ( scanner.hasNextLine() ) {
String line = scanner.nextLine();
// 逐行处理
}
}
Apache Commons IO的Stream
LineIterator it = FileUtils.lineIterator(theFile, "UTF-8");
try {
while (it.hasNext()) {
String line = it.nextLine();
// 逐行处理
}
} finally {
LineIterator.closeQuietly(it);
}
Java8的Stream
Files.lines(Paths.get(pathname));
利用Files.lines()得到一个Stream，然后逐行处理。
进阶
- 读取文件总行数
// 总行数 long lineCount = Files.lines(Paths.get(pathname)).count();
- 读取指定行或起止行
try (Stream<String> lines = Files.lines(path)) {
List<String> list = lines.skip( 1000 ).limit(10).collect(Collectors.toList());
} catch (IOException e) {
e.printStackTrace();
}
如上，读取1001行到1010行。
利用上面这两段代码，可以用类似分页的方式来读取整个文件。
总页数 = 总行数 / 每页条数 + (总行数 % 每页条数 == 0 ? 0 : 1); 每页内容 = lines.skip( (第几页-1)*每页条数 ).limit(每页条数);
相关推荐
- 前端 JavaScript 字符串中提取数字
-
varstr="4500元";varnum=parseInt(str);alert(num);//4500如果字符串前面有非数字字符，上面这种方法就不行了：var...
- 使用JavaScript如何获取网站网址（js如何获取浏览器信息）
-
在做网站开发时，我们有时候会获取当前页面的完整路径。在网页前端如何实现呢？请在网页脚本代码段中粘贴如下代码。functiongetRootPath(){//获取当前网址，...
- java文本对比工具源码8（java比较文本相似度）
-
/***ParseatextualrepresentationofpatchesandreturnaListofPatch*objects.*@paramtextline...
- JavaScript实现的9大排序算法（js排序方法）
-
笔试面试经常涉及各种算法，本文简要介绍常用的一些算法，并用JavaScript实现。1、插入排序1）算法简介插入排序（Insertion-Sort）的算法描述是一种简单直观的排序算法。它的工作原理是通...
- 使用函数化的Javascript代码编写方式
-
对于Javascript介绍想必大家都耳熟能详啦，基于函数化的编程语言，基于浏览器运行的编程语言，web开发语言，前端开发必备语言，blablabla...Javascript是一个非常灵...
- Js基础31:内置对象（js内置对象是什么意思）
-
js里面的对象分成三大类：内置对象ArrayDateMath宿主对象浏览器提供的对象(如bom、dom等等)自定义对象开发人员自己定义的对象内置对象——所谓内置对象，就是JavaScript自...
- js获取上传文件类型以及大小的方法
-
前端web上传文件时，需要在上传之前判断一下文件的类型以及文件的大小，HTML为前端的标记语言是无法做到这一点，只能使用javascript动态脚本代码来实现。js获取上传文件大小的方法示例代码：&...
- 黑客入门实践:如何绕过前端过滤上传文件
-
今天开始，我们就要开始学习具体的漏洞了，但是希望大家学完后，不要轻易"入侵"网站哦，当时测试环境下除外。今天的课程是关于“文件上传漏洞”，据安界网的老师介绍，文件上传漏洞仅次于命令执行...
- Java文件上传细讲（java文件夹上传）
-
什么是文件上传？文件上传就是把用户的信息保存起来。为什么需要文件上传？在用户注册的时候，可能需要用户提交照片。那么这张照片就应该要进行保存。免费学习资料获取方式上传组件(工具)为什么我们要使用上传工具...
- 鸿蒙上实现“翻译”功能（鸿蒙宴全文翻译）
-
本章节我们来制作中文翻译成英文的实例（运行在HarmonyOS上），通过HTTP去配合API进行实现。需求分析如下：文字输入HTTP协议使用文字翻译控件介绍①HTTP数据请求官方文档请求...
- JavaScript从入门到精通（javascript 入门教程）
-
前几天，我们学习了JavaScript的入门课程，但是要想做网站，仅仅学会入门是不够的，今后的几天，我将带领大家精通JavaScript，希望大家好好学习！JS内置对象String对象：字符串对象，提...
- 第15天|16天搞定前端，javascript语法篇(干货)
-
JavaScript是互联网上最流行的脚本语言，这门语言可用于HTML和web，可广泛用于服务器、PC、笔记本电脑、平板电脑和智能手机等设备。它是一个脚本语言，它是一个轻量级，但功能强大的编程...
- 通过js来实现打字效果（js如何输入）
-
有时候浏览网页经常会看见一些页面出现一些打字的效果，那么是怎么实现的呢？逻辑确定目标容器，在哪个容器进行输出确定输出内容，当前直接根据目标容器确定输出内容即可需要控制输出频率，因此需要循环输出完毕代码...
- 手把手教你学会一键还原混淆js原理
-
1.短变量名在以下示例代码中，我们将变量“customerName”替换为“a”：vara="JohnSmith";console.log(a);2.随机变量名在以下示例代码...
- sql中常用的字符串函数详解（sql字符串函数有哪些）
-
在日常开发中遇到处理最多的可能字符串要算其中一个了，什么替换啊截取啊大小写转换啊、删除空格啊等等，这些操作我们可以在前端操作，也可以直接在数据库的sql中操作，那么我们来看一下sql中处理字符串的...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- maven镜像 (69)
- undefined reference to (60)
- zip格式 (63)
- oracle over (62)
- date_format函数用法 (67)
- 在线代理服务器 (60)
- shell 字符串比较 (74)
- x509证书 (61)
- localhost (65)
- java.awt.headless (66)
- syn_sent (64)
- settings.xml (59)
- 弹出窗口 (56)
- applicationcontextaware (72)
- my.cnf (73)
- httpsession (62)
- pkcs7 (62)
- session cookie (63)
- java 生成uuid (58)
- could not initialize class (58)
- beanpropertyrowmapper (58)
- word空格下划线不显示 (73)
- jar文件 (60)
- jsp内置对象 (58)
- makefile编写规则 (58)