java 文件操作(I/O流)(java文件流写入文件)
wptr33 2025-06-10 18:39 19 浏览
一、文件操作技术演进
二、核心类对比分析
1. 传统IO vs NIO
特性 | java.io | java.nio |
数据流方向 | 单向流 | 通道双向传输 |
缓冲机制 | 需手动包装缓冲流 | 内置Buffer机制 |
非阻塞支持 | 不支持 | Selector非阻塞模型 |
元数据操作 | 有限 | 完整属性支持 |
符号链接处理 | 不支持 | 支持 |
文件系统操作 | 基础功能 | 高级文件树遍历 |
2. 主要工具类对比
类名 | 用途 | 典型方法 |
java.io.File | 传统文件元数据操作 | exists(), mkdir(), listFiles() |
java.nio.file.Path | NIO2路径操作核心类 | toAbsolutePath(), resolve() |
java.nio.file.Files | 文件操作工具类(推荐使用) | copy(), readAllLines(), walk() |
三、基础文件操作全解
1. 文件读写操作
文本文件处理
// 传统IO写法(需处理编码)
try (BufferedReader reader = new BufferedReader(
new InputStreamReader(new FileInputStream("data.txt"), StandardCharsets.UTF_8))) {
String line;
while ((line = reader.readLine()) != null) {
process(line);
}
}
// NIO2改进写法(Java8+)
List<String> lines = Files.readAllLines(Paths.get("data.txt"), StandardCharsets.UTF_8);
Files.write(Paths.get("output.txt"), lines, StandardOpenOption.CREATE);
二进制文件处理
// 小文件快速读写
byte[] fileContent = Files.readAllBytes(Paths.get("image.jpg"));
Files.write(Paths.get("copy.jpg"), fileContent);
// 大文件分块处理(内存优化)
try (InputStream is = new FileInputStream("large.dat");
OutputStream os = new FileOutputStream("copy.dat")) {
byte[] buffer = new byte[8192];
int bytesRead;
while ((bytesRead = is.read(buffer)) != -1) {
os.write(buffer, 0, bytesRead);
}
}
2. 目录操作
// 创建多级目录
Path newDir = Paths.get("data/2023/08");
Files.createDirectories(newDir);
// 遍历目录树
try (Stream<Path> paths = Files.walk(Paths.get("."))) {
paths.filter(Files::isRegularFile)
.forEach(System.out::println);
}
// 文件搜索(Java8+)
PathMatcher matcher = FileSystems.getDefault()
.getPathMatcher("glob:**/*.{java,class}");
Files.walk(Paths.get("src"))
.filter(matcher::matches)
.forEach(System.out::println);
四、NIO高级特性
1. 内存映射文件(大文件处理)
try (RandomAccessFile raf = new RandomAccessFile("huge.data", "rw");
FileChannel channel = raf.getChannel()) {
MappedByteBuffer buffer = channel.map(
FileChannel.MapMode.READ_WRITE, 0, channel.size());
// 直接操作内存缓冲区
while (buffer.hasRemaining()) {
byte b = buffer.get();
// 处理字节数据
}
}
2. 文件锁机制
try (FileChannel channel = FileChannel.open(Paths.get("data.lock"),
StandardOpenOption.WRITE)) {
FileLock lock = channel.tryLock();
if (lock != null) {
try {
// 执行排他操作
} finally {
lock.release();
}
}
}
3. 异步IO(Java7+)
AsynchronousFileChannel asyncChannel = AsynchronousFileChannel.open(
Paths.get("async.data"), StandardOpenOption.READ);
ByteBuffer buffer = ByteBuffer.allocate(1024);
asyncChannel.read(buffer, 0, buffer, new CompletionHandler<Integer, ByteBuffer>() {
@Override
public void completed(Integer result, ByteBuffer attachment) {
// 处理读取完成
}
@Override
public void failed(Throwable exc, ByteBuffer attachment) {
// 处理异常
}
});
五、最佳实践指南
1. 文件操作规范
- 路径处理:使用Paths.get()代替字符串拼接
- 异常处理:捕获FileSystemException及其子类
- 资源释放:优先使用try-with-resources
- 符号链接:使用Files.isSymbolicLink()检测
2. 性能优化技巧
// 缓冲区大小选择(经验值)
int bufferSize = 64 * 1024; // 64KB
try (BufferedInputStream bis = new BufferedInputStream(
new FileInputStream("large.iso"), bufferSize)) {
// 读取操作
}
// 并行处理文件(Java8+)
Files.list(Paths.get("input"))
.parallel()
.forEach(this::processFile);
3. 安全注意事项
// 路径注入防护
String userInput = "malicious/../../etc/passwd";
Path safePath = Paths.get("baseDir").resolve(userInput).normalize();
if (!safePath.startsWith(Paths.get("baseDir"))) {
throw new SecurityException("非法路径访问");
}
// 文件权限控制
Set<PosixFilePermission> perms = EnumSet.of(
OWNER_READ, OWNER_WRITE, GROUP_READ);
Files.setPosixFilePermissions(Paths.get("secret.txt"), perms);
六、特殊场景处理
1. 临时文件管理
// 自动删除临时文件
Path tempFile = Files.createTempFile("data_", ".tmp");
try {
// 使用临时文件
} finally {
Files.deleteIfExists(tempFile); // 显式删除
}
// 使用ShutdownHook删除
Runtime.getRuntime().addShutdownHook(new Thread(() -> {
try {
Files.delete(tempFile);
} catch (IOException e) {
logger.error("临时文件删除失败", e);
}
}));
2. 文件监控(WatchService)
try (WatchService watcher = FileSystems.getDefault().newWatchService()) {
Path dir = Paths.get("monitor");
dir.register(watcher,
ENTRY_CREATE,
ENTRY_DELETE,
ENTRY_MODIFY);
while (!Thread.currentThread().isInterrupted()) {
WatchKey key = watcher.take();
for (WatchEvent<?> event : key.pollEvents()) {
Path changedFile = (Path) event.context();
System.out.println("文件变更: " + changedFile);
}
key.reset();
}
}
七、常见问题解决方案
Q1:如何正确比较文件内容?
// 高效比较大文件(Java12+)
long mismatch = Files.mismatch(Paths.get("file1"), Paths.get("file2"));
if (mismatch == -1L) {
System.out.println("文件内容完全相同");
}
// 传统MD5校验方法
MessageDigest md = MessageDigest.getInstance("MD5");
try (InputStream is = Files.newInputStream(file)) {
byte[] buffer = new byte[8192];
int len;
while ((len = is.read(buffer)) != -1) {
md.update(buffer, 0, len);
}
}
byte[] digest = md.digest();
Q2:如何处理中文文件名乱码?
// 指定文件系统编码
Path path = Paths.get("中文目录");
String fileName = new String(path.getFileName().toString().getBytes("GBK"), "ISO-8859-1");
// 统一使用UTF-8编码
System.setProperty("sun.jnu.encoding", "UTF-8");
System.setProperty("file.encoding", "UTF-8");
Q3:如何高效复制大文件?
// NIO零拷贝技术(推荐)
try (FileChannel source = FileChannel.open(src, StandardOpenOption.READ);
FileChannel dest = FileChannel.open(dst, StandardOpenOption.WRITE)) {
dest.transferFrom(source, 0, source.size());
}
// Java9优化版
Files.copy(src, dest, StandardCopyOption.REPLACE_EXISTING);
八、扩展工具推荐
1. Apache Commons IO
// 文件工具类
FileUtils.copyFile(srcFile, destFile);
List<String> lines = FileUtils.readLines(file, "UTF-8");
// 目录监控
FileAlterationMonitor monitor = new FileAlterationMonitor(5000);
FileAlterationObserver observer = new FileAlterationObserver("watchDir");
observer.addListener(new FileAlterationListenerAdaptor() {
@Override
public void onFileCreate(File file) {
// 处理新建文件
}
});
2. Java ZIP压缩
try (ZipOutputStream zos = new ZipOutputStream(new FileOutputStream("out.zip"))) {
Files.walk(Paths.get("compressDir"))
.filter(Files::isRegularFile)
.forEach(path -> {
ZipEntry entry = new ZipEntry(path.toString());
zos.putNextEntry(entry);
Files.copy(path, zos);
zos.closeEntry();
});
}
掌握Java文件操作的关键要点:
- 优先使用NIO2(Files和Paths)API
- 正确处理字符编码和换行符差异
- 针对文件规模选择合适处理方式
- 严格管理资源释放和异常处理
- 重要操作添加事务回滚机制
建议在项目中:
- 统一文件操作工具类
- 建立文件路径白名单机制
- 对大文件操作实施监控和日志记录
- 定期进行文件系统安全审计
相关推荐
- MySQL进阶五之自动读写分离mysql-proxy
-
自动读写分离目前,大量现网用户的业务场景中存在读多写少、业务负载无法预测等情况,在有大量读请求的应用场景下,单个实例可能无法承受读取压力,甚至会对业务产生影响。为了实现读取能力的弹性扩展,分担数据库压...
- 3分钟短文 | Laravel SQL筛选两个日期之间的记录,怎么写?
-
引言今天说一个细分的需求,在模型中,或者使用laravel提供的EloquentORM功能,构造查询语句时,返回位于两个指定的日期之间的条目。应该怎么写?本文通过几个例子,为大家梳理一下。学习时...
- 一文由浅入深带你完全掌握MySQL的锁机制原理与应用
-
本文将跟大家聊聊InnoDB的锁。本文比较长,包括一条SQL是如何加锁的,一些加锁规则、如何分析和解决死锁问题等内容,建议耐心读完,肯定对大家有帮助的。为什么需要加锁呢?...
- 验证Mysql中联合索引的最左匹配原则
-
后端面试中一定是必问mysql的,在以往的面试中好几个面试官都反馈我Mysql基础不行,今天来着重复习一下自己的弱点知识。在Mysql调优中索引优化又是非常重要的方法,不管公司的大小只要后端项目中用到...
- MySQL索引解析(联合索引/最左前缀/覆盖索引/索引下推)
-
目录1.索引基础...
- 你会看 MySQL 的执行计划(EXPLAIN)吗?
-
SQL执行太慢怎么办?我们通常会使用EXPLAIN命令来查看SQL的执行计划,然后根据执行计划找出问题所在并进行优化。用法简介...
- MySQL 从入门到精通(四)之索引结构
-
索引概述索引(index),是帮助MySQL高效获取数据的数据结构(有序),在数据之外,数据库系统还维护者满足特定查询算法的数据结构,这些数据结构以某种方式引用(指向)数据,这样就可以在这些数据结构...
- mysql总结——面试中最常问到的知识点
-
mysql作为开源数据库中的榜一大哥,一直是面试官们考察的重中之重。今天,我们来总结一下mysql的知识点,供大家复习参照,看完这些知识点,再加上一些边角细节,基本上能够应付大多mysql相关面试了(...
- mysql总结——面试中最常问到的知识点(2)
-
首先我们回顾一下上篇内容,主要复习了索引,事务,锁,以及SQL优化的工具。本篇文章接着写后面的内容。性能优化索引优化,SQL中索引的相关优化主要有以下几个方面:最好是全匹配。如果是联合索引的话,遵循最...
- MySQL基础全知全解!超详细无废话!轻松上手~
-
本期内容提醒:全篇2300+字,篇幅较长,可搭配饭菜一同“食”用,全篇无废话(除了这句),干货满满,可收藏供后期反复观看。注:MySQL中语法不区分大小写,本篇中...
- 深入剖析 MySQL 中的锁机制原理_mysql 锁详解
-
在互联网软件开发领域,MySQL作为一款广泛应用的关系型数据库管理系统,其锁机制在保障数据一致性和实现并发控制方面扮演着举足轻重的角色。对于互联网软件开发人员而言,深入理解MySQL的锁机制原理...
- Java 与 MySQL 性能优化:MySQL分区表设计与性能优化全解析
-
引言在数据库管理领域,随着数据量的不断增长,如何高效地管理和操作数据成为了一个关键问题。MySQL分区表作为一种有效的数据管理技术,能够将大型表划分为多个更小、更易管理的分区,从而提升数据库的性能和可...
- MySQL基础篇:DQL数据查询操作_mysql 查
-
一、基础查询DQL基础查询语法SELECT字段列表FROM表名列表WHERE条件列表GROUPBY分组字段列表HAVING分组后条件列表ORDERBY排序字段列表LIMIT...
- MySql:索引的基本使用_mysql索引的使用和原理
-
一、索引基础概念1.什么是索引?索引是数据库表的特殊数据结构(通常是B+树),用于...
- 一周热门
-
-
C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)
-
程序员的开源月刊《HelloGitHub》第 71 期
-
详细介绍一下Redis的Watch机制,可以利用Watch机制来做什么?
-
假如有100W个用户抢一张票,除了负载均衡办法,怎么支持高并发?
-
Java面试必考问题:什么是乐观锁与悲观锁
-
如何将AI助手接入微信(打开ai手机助手)
-
redission YYDS spring boot redission 使用
-
SparkSQL——DataFrame的创建与使用
-
一文带你了解Redis与Memcached? redis与memcached的区别
-
如何利用Redis进行事务处理呢? 如何利用redis进行事务处理呢英文
-
- 最近发表
- 标签列表
-
- git pull (33)
- git fetch (35)
- mysql insert (35)
- mysql distinct (37)
- concat_ws (36)
- java continue (36)
- jenkins官网 (37)
- mysql 子查询 (37)
- python元组 (33)
- mybatis 分页 (35)
- vba split (37)
- redis watch (34)
- python list sort (37)
- nvarchar2 (34)
- mysql not null (36)
- hmset (35)
- python telnet (35)
- python readlines() 方法 (36)
- munmap (35)
- docker network create (35)
- redis 集合 (37)
- python sftp (37)
- setpriority (34)
- c语言 switch (34)
- git commit (34)