百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

php文件分片上传,并发时遇到合并文件失败问题

wptr33 2025-01-03 19:18 11 浏览

说说文件分片上传!

1. 今天来给大家讲一下文件分片上传的原理和它所遇到的问题以及问题的解决办法,先来演示一下分片上传的功能,可见当前目录没有文件,点击上传文件,选择一个 7.8 兆的图片,目录下已把图片上传上来,就是所选的 7.8 兆图片。

2. 其原理是前端选择图片时把图片分割成多个小部分,一个小部分发送一次请求传到服务端,服务端接收后把这些文件合并起来。前端用的插件是 web upload,分片大小是 1 兆,超过 1 兆的文件就开启分片上传,如 5 兆的就分成五次,先判断有没有传过来,分片数就是浏览器这边的两个值,若分片,这两个值代表总片数分成八片,chok 代表当前是第几片。

3. 这里判断出分片就把文件的分片保存,然后进行合并,判断所有分片都上传完了再进行合并,合并方式是把文件读出来再重新写入,原理简单,但有个重要问题,即前端上传是并发操作,很多分片文件块是并发传过来的,比如第一、第四个还没完,可能第三、第五个就完了。

4. 如果没有锁功能,可能第二、第四次和第五次同时进来,同时进来会两次都执行,会重复把两次分片都写入总文件,会出现问题,如原本 7.8 兆或 7.2 兆的文件,传重复了可能十几兆,文件就不对了,多传数据显示不了,就损坏了,还有一种是其中一个把文件删了但没写完,第二个又写入不够,就写少了,但这种很少,一般是写多了,文件就废了。

5. 后来调试很久加了文件锁,foppen 打开要保存的总文件,用 foppen 锁起来,之前有一期讲过用独占锁形式锁起来,不让其他进程操作,只让当前进程操作,操作完解锁。锁起来后如果后面进程过来判断是失败的,就不会进去合并,不会合并重复,就是这样解决的。合并完解锁。

6. 所以做分片上传时一定要注意这个问题,并发处理一定要锁住,不然最后合并的文件可能有问题。这期就讲到这里,谢谢大家,下期见。

相关推荐

针对 MySQL 数据库的 HikariCP 数据库连接池 配置详解

HikariCP是当前性能最优异的数据库连接池之一,尤其适用于高并发场景。以下是针对MySQL数据库的HikariCP配置详解,包含常用参数及其优化建议。HikariCP是当前性能最优异的...

MySQL 数据同步神器 - Canal 入门篇

前言想必做过商品服务都是将商品相关的信息和价格保存在数据库中,例如...

MySQL之慢查询日志分析

一、慢查询设置与测试1、慢查询介绍MySQL的慢查询,全名是慢查询日志,是MySQL提供的一种日志记录,用来记录在MySQL中响应时间超过阈值的语句。...

「MySQL学习」MySQL的变量

MySQL的变量分为四种:局部变量、用户变量、会话变量和全局变量,其中局部变量只存在于函数和存储过程,这里不多了解。其中会话变量和全局变量在MySQL中统称为系统变量用户...

MySQL日志篇

今天我们介绍一下MySQL中特别重要的一项内容——日志!MySQL中日志有很多,我们前文提到的redolog、undolog、以及今天要提到的binlog。...

MySQL--视图

介绍视图是指计算机数据库中的视图,是一个虚拟表,其内容由查询定义。同真实的表一样,视图包含一系列带有名称的列和行数据。但是,视图并不在数据库中以存储的数据值集形式存在。行和列数据来自由定义视图的查询所...

MySQL中like会不会走索引?

先说结论:like"%关键字":不会;like"%关键字%":不会like"关键字%":会说明:...

MySQL正则 rlike(regexp)

在MySQL中,like、rlike和regexp都不区分大小写,如果需要区分,可以在WHERE后添加关键字段binary1.LIKE可以使用以下两个通配符:%...

开源文档预览项目 kkFileView (9.9k star) ,快速入门

kkFileView是一款文件文档在线预览解决方案,采用流行的SpringBoot框架构建,易于上手和部署。该项目基本支持主流办公文档的在线预览,包括但不限于doc、docx、xls、xls...

帮你打造一个私有化的在线个人文档系统

前言最近开发的过程中总是需要找寻一些资料,但是某些资料或者是某段可用的代码,已经忘记放在了哪个文档中了,看着电脑上搜索出来的几百个txt文件,我陷入了一阵无力感中,于是我想能不能搞个在线文档,就像“语...

Container 命令ctr、crictl 命令使用说明

一、ctr命令使用Container命令ctr,crictl的用法版本:ctrcontainerd.io1.4.3containerd相比于docker,多了...

Docker常用命令(2)

目录Docker重启策略配置容器环境变量...

快速搭建自己的镜像仓库

搭建docker镜像仓库1.准备找一台机器为镜像仓库的主机.创建好存放镜像数据文件的目录.例如...

整合 kkfile 实现文件预览

一、简介...

隐私计算FATE-核心概念与单机部署

一、说明Fate是一个工业级联邦学习框架,所谓联邦学习指的就是可以联合多方的数据,共同构建一个模型;...