亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

java實(shí)現(xiàn)文件切片上傳百度云+斷點(diǎn)續(xù)傳的方法

 更新時(shí)間:2021年12月22日 11:55:13   作者:笨小孩的幸福  
文件續(xù)傳在很多地方都可以用的到,本文主要介紹了java實(shí)現(xiàn)文件切片上傳百度云+斷點(diǎn)續(xù)傳的方法,?文中通過示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下

前言:

本文代碼通過dubbo進(jìn)行遠(yuǎn)程調(diào)用的接口,如果不使用dubbo,直接將service放到你的service,并稍作修改,redis替換成自己封裝的工具即可。下方代碼有點(diǎn)多,但基本上都加注釋了。

切片上傳百度云和上傳到本地有所不同,上傳到本地是需要前端給個(gè)唯一標(biāo)識(shí),通過自定義唯一標(biāo)識(shí)保存到本地,最后在合并文件。而上傳百度云則需要直接把切片傳到百度云,唯一標(biāo)識(shí)uploadId是百度云提供的,上傳及合并都是直接調(diào)用百度云提供的接口。下方為百度云的使用文檔。

對(duì)象存儲(chǔ)BOS - 文件管理 | 百度智能云文檔 (baidu.com)

1.定義一個(gè)實(shí)體類

用于接收前臺(tái)傳過來的信息,信息應(yīng)該包括總切片數(shù),當(dāng)前切片數(shù),文件名稱,文件總大小。

import com.geely.tcm.common.annotation.Excel;
import lombok.Data;
 
import javax.validation.constraints.Max;
import javax.validation.constraints.Min;
import javax.validation.constraints.NotNull;
import java.io.Serializable;
 
 
@Data
public class MutilFileInfo implements Serializable {
    private static final long serialVersionUID = 1L;
 
    @NotNull(message = "車型不能為空")
    @Excel(name = "車型")
    private String model;
 
    @Excel(name = "文件名稱")
    private String name;
 
    @Excel(name = "文件總大小")
    private Long totalSize;
 
    @Min(value = 1, message = "不能小于1")
    @Max(value = 10000, message = "不能大于10000")
    @Excel(name = "當(dāng)前分片序號(hào)")
    private Integer chunk;
 
    @Min(value = 1, message = "不能小于1")
    @Max(value = 10000, message = "不能大于10000")
    @Excel(name = "分片總數(shù)")
    private Integer chunks;
}

2.創(chuàng)建controller

用于處理前端過來的文件及信息

import com.alibaba.fastjson.JSON;
import com.baidubce.services.bos.model.PartETag;
import com.geely.tcm.common.annotation.Log;
import com.geely.tcm.common.bean.MutilFileInfo;
import com.geely.tcm.common.bean.baidu.CustomPartETag;
import com.geely.tcm.common.bean.measure.Cmm3dModel;
import com.geely.tcm.common.configuration.RedisUtils;
import com.geely.tcm.common.enums.BusinessType;
import com.geely.tcm.common.util.StringUtils;
import com.geely.tcom.remote.api.baidu.BaiduCloudBosService;
import io.swagger.annotations.Api;
import io.swagger.annotations.ApiImplicitParam;
import io.swagger.annotations.ApiImplicitParams;
import io.swagger.annotations.ApiOperation;
import lombok.extern.slf4j.Slf4j;
import org.apache.dubbo.config.annotation.DubboReference;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;
import org.springframework.web.multipart.MultipartFile;
 
import java.util.*;
import java.util.concurrent.Semaphore;
import java.util.stream.Collectors;
 
@Api(tags = "文件上傳下載服務(wù)")
@RequestMapping("/threeModel")
@RestController
@Slf4j
public class Model3DController1  {
    //DubboReference這個(gè)是遠(yuǎn)程調(diào)用,如果沒有遠(yuǎn)程調(diào)用,直接Autowired就可以
    @DubboReference(version = "${sheet.service.version}")
    private BaiduCloudBosService baiduCloudBosService;
    //通過加鎖保證線程安全
    private Semaphore lock = new Semaphore(1);
 
    //api開頭的這些是swagger用到的,如果沒使用swagger可以刪到PostMapping上邊
    @ApiOperation(value = "obj模型上傳")
    @ApiImplicitParams({
            @ApiImplicitParam(name = "totalSize", value = "文件總大小",dataTypeClass = Long.class),
            @ApiImplicitParam(name = "chunks", value = "總切片數(shù)",dataTypeClass = Integer.class),
            @ApiImplicitParam(name = "chunk", value = "當(dāng)前切片數(shù)",dataTypeClass = Integer.class),
            @ApiImplicitParam(name = "model", value = "車型",dataTypeClass = String.class),
            @ApiImplicitParam(name = "file", value = "切片文件",dataTypeClass = MultipartFile.class)
    })
    @Log(title = "obj模型上傳", businessType = BusinessType.INSERT)
    @PostMapping("/upload3DToBos")
    public Object upload3DToBos( MutilFileInfo fileinfo, @RequestParam(required=false,value="file") MultipartFile multipartFile) {
        String model=fileinfo.getModel().trim();
        Map<String,Object> m=new HashMap();
        String fileName=fileinfo.getName();
        if (StringUtils.isEmpty(fileName)) {//判斷文件名稱是否為空
            m.put("key","error");
            m.put("value","文件名不能為空");
            return m;
        }
        if (multipartFile == null) {//判斷上傳過來的切片是否為空
            m.put("key","error");
            m.put("value","請(qǐng)上傳文件");
            return m;
        }
        try{
            String filePath="/test/"+model+"/"+fileName;//拼接百度云地址
            String redisKey="partETags-"+model+"-"+fileName;//緩存的鍵
            Integer current =fileinfo.getChunk();//當(dāng)前切片數(shù)
            Integer total = fileinfo.getChunks();//總切片數(shù)
            Long size=multipartFile.getSize();//文件大小
            String uploadId = getUploadId(redisKey, filePath);//該方法獲取百度云的唯一標(biāo)識(shí)uploadId
            byte[] file = multipartFile.getBytes();//將切片過來的文件轉(zhuǎn)成字節(jié)數(shù)組
            if(current==1){//這塊進(jìn)行斷點(diǎn)續(xù)傳,如果是第一個(gè)切片,查詢一下緩存中是否有數(shù)據(jù)了,如果有返回給前臺(tái),如果沒有進(jìn)行上傳
                if(getCurrentEqualsOne(redisKey).size()>0) {
                    //給前臺(tái)提供是否緩存中已有數(shù)據(jù)
                    return getCurrentEqualsOne(redisKey);
                }
            }
            //切片上傳百度云
            List<CustomPartETag> customPartETags = getPartEtags(redisKey, uploadId, filePath, file, size, current);
            //如果緩存中成功的切片數(shù)等于總數(shù),那么進(jìn)行合并
            if (customPartETags.size() == total) {
                customPartETags = customPartETags.stream().sorted(Comparator.comparing(PartETag::getPartNumber)).collect(Collectors.toList());//進(jìn)行排序
                baiduCloudBosService.completePart(uploadId, customPartETags, filePath);//執(zhí)行合并
                RedisUtils.hdel(redisKey,"uploadId","customPartETags");//如果合并成功,刪除緩存中的數(shù)據(jù)
                // 入庫做記錄
                m.put("key","success");
                m.put("value","上傳成功");
                return m;
            }
            m.put("key","continue");
            m.put("value",current+1);
            return m;
        }catch (Exception e){
            e.printStackTrace();
            m.put("key","error");
            m.put("value","上傳失敗");
            return m;
        }
    }
 
    /**
     * 獲取 part
     *
     * @param redisPartKey redisKey
     * @return
     */
    private List<CustomPartETag> getPartEtags(String redisPartKey, String uploadId, String filePath,  byte[] file, long size, int current) {
        List<CustomPartETag> customPartETags = null;
        try {
            lock.acquire();
            //因?yàn)槊看紊蟼鞒晒蠖紩?huì)把成功的切片存進(jìn)百度云,如注解下方第四行代碼,所以每次上傳之前需要先取出來,將成功的切片放進(jìn)去
            customPartETags = RedisUtils.hget(redisPartKey, "customPartETags") == null ? new ArrayList<>() : JSON.parseArray((String) RedisUtils.hget(redisPartKey, "customPartETags"), CustomPartETag.class);
            //上傳百度云成功之后會(huì)返回一個(gè)PartETagg對(duì)象,由于項(xiàng)目中存在dubbo,顧將CustomPartETag類繼承PartETagg進(jìn)行序列化
            CustomPartETag customPartETag = baiduCloudBosService.uploadCustomPartETag(uploadId, filePath, file, size, current);
            customPartETags.add(customPartETag);
            setPartEtagsToRedis(redisPartKey, customPartETags);
 
        } catch (InterruptedException e) {
            e.printStackTrace();
        } finally {
            lock.release();
        }
        return customPartETags;
    }
 
    /**
     * 獲取 uploadId
     *
     * @param redisPartKey redisKey
     * @param filePath     filePath
     * @return
     */
    private String getUploadId(String redisPartKey, String filePath) {
        String uploadId = null;
        try {
            lock.acquire();//線程鎖
            uploadId = (String) RedisUtils.hget(redisPartKey, "uploadId");//先去redis中找,是否已經(jīng)有uploadId
            if (StringUtils.isEmpty(uploadId)) {//判斷是否為空,如果為空,說明之前沒上傳過,為首次上傳,如果已經(jīng)存在,返回該uploadId
                uploadId = baiduCloudBosService.initMultipartUpload(filePath);//進(jìn)行初始化,返回一個(gè)唯一標(biāo)識(shí)uploadId
                RedisUtils.hset(redisPartKey, "uploadId", uploadId, 60 * 60);//將返回來的uploadId放到緩存中,下個(gè)切片上傳直接使用這個(gè)uploadId
            }
        } catch (InterruptedException e) {
            e.printStackTrace();
        } finally {
            lock.release();
        }
        return uploadId;
    }
 
    /**
     * 薄墩 partKey到redis
     *
     * @param redisPartKey
     * @param customPartETags
     */
    private void setPartEtagsToRedis(String redisPartKey, List<CustomPartETag> customPartETags) {
        RedisUtils.hset(redisPartKey, "customPartETags", JSON.toJSONString(customPartETags), 60 * 60);
    }
    public Map<String,Object> getCurrentEqualsOne(String redisKey){
        Map<String,Object> m=new HashMap<>();
        List<CustomPartETag>  customPartETags = RedisUtils.hget(redisKey, "customPartETags") == null ? new ArrayList<>() : JSON.parseArray((String) RedisUtils.hget(redisKey, "customPartETags"), CustomPartETag.class);
        //給前臺(tái)提供是否緩存中已有數(shù)據(jù)
        if(customPartETags.size()==0){
            return m;
        }else{
                //緩存中有數(shù)據(jù),返回緩存中數(shù)據(jù)
                int t=  customPartETags.get(customPartETags.size()-1).getPartNumber();
                m.put("key","hasValue");
                m.put("value",t);
                return  m;
            }
    }
}

3.遠(yuǎn)程的service

(如果不用遠(yuǎn)程調(diào)用,直接創(chuàng)建一個(gè)service就可以)

package com.geely.tcm.sheet.service;
 
import com.baidubce.services.bos.BosClient;
import com.baidubce.services.bos.model.*;
import com.geely.tcm.common.bean.baidu.BosResult;
import com.geely.tcm.common.bean.baidu.CustomPartETag;
import com.geely.tcm.common.util.StringUtils;
import com.geely.tcom.remote.api.baidu.BaiduCloudBosService;
import lombok.extern.slf4j.Slf4j;
import org.apache.dubbo.config.annotation.DubboService;
import org.springframework.beans.factory.annotation.Autowired;
 
import java.io.*;
import java.net.URL;
import java.util.ArrayList;
import java.util.List;
 
/**
 * 百度私有云服務(wù)操作
 *
 * @author : wangbin
 * @date : 2021/9/24
 * @since : 1.0.0
 */
@Slf4j
@DubboService(version = "${sheet.service.version}")
public class BaiduCloudBosServiceImpl{
 
    @Autowired
    private BosClient bosClient;
 
   
    public String initMultipartUpload(String filePath) {
        // 開始Multipart Upload
        InitiateMultipartUploadRequest initiateMultipartUploadRequest = new InitiateMultipartUploadRequest(null, filePath);
        InitiateMultipartUploadResponse initiateMultipartUploadResponse = bosClient.initiateMultipartUpload(initiateMultipartUploadRequest);
        // 打印UploadId,它是區(qū)分分塊上傳事件的唯一標(biāo)識(shí)
        String uploadId = initiateMultipartUploadResponse.getUploadId();
        log.info("filePath= {},uploadId = {}", filePath, uploadId);
        return uploadId;
    }
 
 
    public CustomPartETag uploadCustomPartETag(String uploadId, String filePath, byte[] file, long partSize, int partNumber) {
        UploadPartRequest uploadPartRequest = new UploadPartRequest();
        uploadPartRequest.setBucketName(null);
        uploadPartRequest.setKey(filePath);
        uploadPartRequest.setUploadId(uploadId);
        InputStream input= new ByteArrayInputStream(file);
        uploadPartRequest.setInputStream(input);
        uploadPartRequest.setPartSize(partSize);
        uploadPartRequest.setPartNumber(partNumber );
        uploadPartRequest.setMd5Digest("");
        UploadPartResponse uploadPartResponse = bosClient.uploadPart(uploadPartRequest);
        PartETag partETag = uploadPartResponse.getPartETag();
        CustomPartETag  customPartETag = new CustomPartETag();
        customPartETag.setETag(partETag.getETag());
        customPartETag.setPartNumber(partETag.getPartNumber());
        return customPartETag;
    }
 
    /**
     * 分塊上傳結(jié)束之后,當(dāng)所有的數(shù)據(jù)Part驗(yàn)證通過后,BOS將把這些數(shù)據(jù)part組合成一個(gè)完整的Object
     *
     * @param uploadId
     * @param customPartETags
     * @param filePath
     */
    public void completePart(String uploadId, List<CustomPartETag> customPartETags, String filePath) {
        //for循環(huán)轉(zhuǎn)一下 CustomPartETag 轉(zhuǎn)PartETag
        if(customPartETags.size()>0){
            List<PartETag> partETags=new ArrayList<>();
            for(CustomPartETag c:customPartETags){
                PartETag partETag=new PartETag();
                partETag.setETag(c.getETag());
                partETag.setPartNumber(c.getPartNumber());
                partETags.add(partETag);
            }
            CompleteMultipartUploadRequest completeMultipartUploadRequest = new CompleteMultipartUploadRequest(null, filePath, uploadId, partETags);
            CompleteMultipartUploadResponse completeMultipartUploadResponse = bosClient.completeMultipartUpload(completeMultipartUploadRequest);
            log.info("完成分片上傳 , filePath = {},uploadId = {}, etag = {}", filePath, uploadId,completeMultipartUploadResponse.getETag());
        }
    }
}

4.定義一個(gè)實(shí)體類

繼承,實(shí)現(xiàn)序列化,(dubbo不序列化就會(huì)傳不過去)

import com.baidubce.services.bos.model.PartETag;
import java.io.Serializable;
 
public class CustomPartETag extends PartETag implements Serializable {
}

5.這里提供一個(gè)臨時(shí)測(cè)試的前端代碼

<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>upload</title>
    <script src="https://cdn.bootcss.com/jquery/3.2.1/jquery.min.js"></script>
</head>
<body>
    <input type="file" name="file" id="file">
    <button id="upload" onClick="upload()">upload</button>
    <script type="text/javascript">
        var bytesPerPiece = 1024 * 1024; // 每個(gè)文件切片大小定為1MB .
        var totalPieces;
        
        function upload() {
            var blob = document.getElementById("file").files[0];
            var start = 0;
            var end;
            var index = 1;
            var filesize = blob.size;
            var filename = blob.name;
 
            //計(jì)算文件切片總數(shù)
            totalPieces = Math.ceil(filesize / bytesPerPiece);
            while(start < filesize) {
                end = start + bytesPerPiece;
                if(end > filesize) {
                    end = filesize;
                }
 
                var chunk = blob.slice(start,end);//切割文件    
                var sliceIndex= blob.name + index;
                var formData = new FormData();
                formData.append("file", chunk, filename);
    formData.append("totalSize",filesize);
    formData.append("chunks",totalPieces);
    formData.append("chunk",index);
    formData.append("model",'kx11');
                $.ajax({
//路徑換成你的路徑
                    url: 'http://127.0.0.1:6300/threeModel/upload3DToBos',
                    type: 'POST',
     dataType:'json',
                    cache: false,
                    data: formData,
                    processData: false,
                    contentType: false,
     mimeType: "multipart/form-data",
     success: function (result){
      console.log(result.value);
     }
    });
    
    
                start = end;
                index++;
            }
        }
    </script>
</body>
</html>

到此這篇關(guān)于java實(shí)現(xiàn)文件切片上傳百度云+斷點(diǎn)續(xù)傳的方法的文章就介紹到這了,更多相關(guān)java 文件切片上傳 內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • linux系統(tǒng)下查看jdk版本、路徑及配置環(huán)境變量

    linux系統(tǒng)下查看jdk版本、路徑及配置環(huán)境變量

    在Linux系統(tǒng)中,配置JDK環(huán)境變量是非常重要的,它可以讓你在終端中直接使用Java命令,這篇文章主要給大家介紹了關(guān)于linux系統(tǒng)下查看jdk版本、路徑及配置環(huán)境變量的相關(guān)資料,需要的朋友可以參考下
    2024-01-01
  • Mybatis利用OGNL表達(dá)式處理動(dòng)態(tài)sql的方法教程

    Mybatis利用OGNL表達(dá)式處理動(dòng)態(tài)sql的方法教程

    這篇文章主要給大家介紹了關(guān)于Mybatis利用OGNL表達(dá)式處理動(dòng)態(tài)sql的方法教程的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面跟著小編一起來學(xué)習(xí)學(xué)習(xí)吧。
    2017-06-06
  • 23種設(shè)計(jì)模式(5) java適配器模式

    23種設(shè)計(jì)模式(5) java適配器模式

    這篇文章主要為大家詳細(xì)介紹了23種設(shè)計(jì)模式之java適配器模式,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2017-11-11
  • Mybatis-Plus將字段設(shè)置為null解決方法

    Mybatis-Plus將字段設(shè)置為null解決方法

    MyBatis-Plus是一個(gè)MyBatis的增強(qiáng)工具,在MyBatis的基礎(chǔ)上只做增 強(qiáng)不做改變,為簡(jiǎn)化開發(fā)、提高效率而生,下面這篇文章主要給大家介紹了關(guān)于Mybatis-Plus將字段設(shè)置為null的解決方法的相關(guān)資料,需要的朋友可以參考下
    2023-04-04
  • Java身份證驗(yàn)證方法實(shí)例詳解

    Java身份證驗(yàn)證方法實(shí)例詳解

    這篇文章主要介紹了Java身份證驗(yàn)證方法實(shí)例詳解的相關(guān)資料,需要的朋友可以參考下
    2017-04-04
  • 解決SpringBoot整合RocketMQ遇到的坑

    解決SpringBoot整合RocketMQ遇到的坑

    這篇文章主要介紹了解決SpringBoot整合RocketMQ遇到的坑,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2021-07-07
  • 一文帶你了解微服務(wù)架構(gòu)中的"發(fā)件箱模式"

    一文帶你了解微服務(wù)架構(gòu)中的"發(fā)件箱模式"

    微服務(wù)架構(gòu)如今非常的流行,這個(gè)架構(gòu)下可能經(jīng)常會(huì)遇到“雙寫”的場(chǎng)景。本文就和大家分享一個(gè)“發(fā)件箱模式”,?感興趣的小伙伴可以了解一下
    2023-01-01
  • Java高版本Api在Android中的使用方法詳解

    Java高版本Api在Android中的使用方法詳解

    API(Application?Programming?Interface)應(yīng)用程序編程接口,java?API是一本程序員字典,是JDK提供給我們使用的類的說明文檔,下面這篇文章主要給大家介紹了關(guān)于Java高版本Api在Android中的使用方法,需要的朋友可以參考下
    2022-05-05
  • java 模仿拼多多紅包遞減算法的實(shí)現(xiàn)

    java 模仿拼多多紅包遞減算法的實(shí)現(xiàn)

    這篇文章主要介紹了java 模仿拼多多紅包遞減算法的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2020-02-02
  • SpringBoot+Elasticsearch實(shí)現(xiàn)數(shù)據(jù)搜索的方法詳解

    SpringBoot+Elasticsearch實(shí)現(xiàn)數(shù)據(jù)搜索的方法詳解

    Elasticsearch是一個(gè)基于Lucene的搜索服務(wù)器。它提供了一個(gè)分布式多用戶能力的全文搜索引擎,基于RESTful?web接口。本文將利用SpringBoot整合Elasticsearch實(shí)現(xiàn)海量級(jí)數(shù)據(jù)搜索,需要的可以參考一下
    2022-05-05

最新評(píng)論