www.27111.com【转】文件下充斥之断点续传(客户端和劳务端的贯彻)

【转】文件下充斥的断点续传(客户端与劳务端的贯彻)

前方说了文件的及传,今天来拉文件的下载。

常规,还是由极度简便易行粗暴的开端。那么基本上简单算简单?多有点暴算粗暴?我报您可免写一词代码,你信也?直接将一个文本为IIS服务器上同样丢,就支持下载。还TM么可以断点续传(IIS服务端默认支持)。

每当贴代码之前先行来打探下什么是断点续传(此间说之凡下载断点续传)?怎么落实之断点续传?
断点续传就是生充斥了一半断网或者暂停了,然后可以就下载。不用从头开始下载。

颇神奇吗,其实简单得生,我们考虑呢是好想到的。
率先客户端向服务端发送一个告(下载文件)。然后服务端响应请求,信息包含文件到底大小、文件流开始与了结位置、内容大小相当于。那现实是怎落实的也罢?
HTTP/1.1生身材属性Range。比如您发送请求的时节带达Range:0-199,等于你是伸手求0到199里边的数目。然后服务器响应请求Content-Range: bytes 0-199/250
,表示你得到了0到199之内的数据,总大小是250。(也即是告诉您还有数尚未下载了)。

咱们来作画个图吧。
www.27111.com 1

凡是无是大简单?这么神奇的事物吧即是个“约定”而已,也就是所谓的HTTP协议。
不过,协议就东西你守其就在,不守其便无设有。就比如民国时期的钱大家还信其,它便起因此。如果大部分人数不信它,也尽管不曾卵用了。
其一断点续传也是这么。你服务端遵守就支持,不听命也便不支持断点续传。所以我们写下载工具的时光要判定响应报文里发出无起Content-Range,来规定是不是支持断点续传。
废话够多了,下面撸起袖子开干。

文本下充斥-服务端

用a标签提供文件下充斥

下a标签来下充斥文件,也便是咱眼前说的非写代码就可实现下载。直接将文件于iis服务器上同样抛,然后把链接贴到a标签及,完事。

<a href="/新建文件夹2.rar">下载</a>

大概、粗暴不用说了。如确得这么好那大家吧无见面寸步难行去形容其他下载逻辑了。这里来只致命之欠缺。这种艺术提供的下载不敷安全。谁都足以下载,没有权力决定,说不定还见面叫人文件扫描(好像csdn就时有发生了这档子事)。

用Response.TransmitFile提供文件下充斥

方说直接a标签提供下载不足够安全。那我们怎么提供相对安全之下载呢。asp.net默认App_Data文件夹是无能够为直接看的,那我们管下载文件放这之中。然后下载的时刻我们读取文件于回来到响应流。

//文件下载
public void FileDownload5()
{          
    //前面可以做用户登录验证、用户权限验证等。

    string filename = "大数据.rar";   //客户端保存的文件名  
    string filePath = Server.MapPath("/App_Data/大数据.rar");//要被下载的文件路径 

    Response.ContentType = "application/octet-stream";  //二进制流
    Response.AddHeader("Content-Disposition", "attachment;filename=" + filename);
    Response.TransmitFile(filePath); //将指定文件写入 HTTP 响应输出流
}

外方文件下充斥

在网上找C#文件下充斥一般还见面搜到所谓的“四种方式”。其实那些代码并无可知用来一直运用,有坑的。
第一种:(Response.BinaryWrite)

 public void FileDownload2()
 {
     string fileName = "新建文件夹2.rar";//客户端保存的文件名  
     string filePath = Server.MapPath("/App_Data/新建文件夹2.rar");//要被下载的文件路径   

     Response.ContentType = "application/octet-stream";//二进制流
     //通知浏览器下载文件而不是打开  
     Response.AddHeader("Content-Disposition", "attachment;  filename=" + HttpUtility.UrlEncode(fileName, System.Text.Encoding.UTF8));

     //以字符流的形式下载文件  
     using (FileStream fs = new FileStream(filePath, FileMode.Open, FileAccess.Read))
     {
         Response.AddHeader("Content-Length", fs.Length.ToString());
         //这里容易内存溢出
         //理论上数组最大长度 int.MaxValue 2147483647 
         //(实际分不到这么多,不同的程序能分到值也不同,本人机器,winfrom( 2147483591 相差56)、iis(也差不多2G)、iis Express(只有100多MB))
         byte[] bytes = new byte[(int)fs.Length];
         fs.Read(bytes, 0, bytes.Length);
         Response.BinaryWrite(bytes);
     }
     Response.Flush();
     Response.End();
 }

先是数组最可怜长为int.MaxValue,然后正常程序是休会见分开这么好内存,很轻行挂服务器。(为就是是可下载的文书,极限值最多吗即2G不顶。)【不推荐】

第二种:(Response.WriteFile)

public void FileDownload3()
{
    string fileName = "新建文件夹2.rar";//客户端保存的文件名  
    string filePath = Server.MapPath("/App_Data/新建文件夹2.rar");//要被下载的文件路径  
    FileInfo fileInfo = new FileInfo(filePath);
    Response.Clear();
    Response.ClearContent();
    Response.ClearHeaders();
    Response.AddHeader("Content-Disposition", "attachment;filename=\"" + HttpUtility.UrlEncode(fileName, System.Text.Encoding.UTF8) + "\"");
    Response.AddHeader("Content-Length", fileInfo.Length.ToString());//文件大小
    Response.AddHeader("Content-Transfer-Encoding", "binary");
    Response.ContentType = "application/octet-stream";
    Response.WriteFile(fileInfo.FullName);//大小参数必须介于零和最大的 Int32 值之间(也就是最大2G,不过这个操作非常耗内存)
    //这里容易内存溢出
    Response.Flush();
    Response.End();
}

题材跟第一种类似,也是匪可知下载过2G的文件。然后下载差不多2G文书时,机器也是地处被高悬的边缘,相当恐怖。【不推荐】

第三种:(Response.OutputStream.Write)

public void FileDownload4()
{
    string fileName = "大数据.rar";//客户端保存的文件名  
    string filePath = Server.MapPath("/App_Data/大数据.rar");//要被下载的文件路径   

    if (System.IO.File.Exists(filePath))
    {
        const long ChunkSize = 102400; //100K 每次读取文件,只读取100K,这样可以缓解服务器的压力  
        byte[] buffer = new byte[ChunkSize];

        Response.Clear();
        using (FileStream fileStream = System.IO.File.OpenRead(filePath))
        {
            long fileSize = fileStream.Length; //文件大小  
            Response.ContentType = "application/octet-stream"; //二进制流
            Response.AddHeader("Content-Disposition", "attachment; filename=" + HttpUtility.UrlEncode(fileName, System.Text.Encoding.UTF8));
            Response.AddHeader("Content-Length", fileStream.Length.ToString());//文件总大小
            while (fileSize > 0 && Response.IsClientConnected)//判断客户端是否还连接了服务器
            {
                //实际读取的大小  
                int readSize = fileStream.Read(buffer, 0, Convert.ToInt32(ChunkSize));
                Response.OutputStream.Write(buffer, 0, readSize);
                Response.Flush();//如果客户端 暂停下载时,这里会阻塞。
                fileSize = fileSize - readSize;//文件剩余大小
            }
        }
        Response.Close();
    }
}

此肯定看出了凡当循环读博输出,比较灵敏。下载好文件时没压力。【推荐】

第四种:(Response.TransmitFile)
啊便直达起举例说的那种,下充斥大文件为不曾压力。【推荐】

public void FileDownload5()
{          
    //前面可以做用户登录验证、用户权限验证等。

    string filename = "大数据.rar";   //客户端保存的文件名  
    string filePath = Server.MapPath("/App_Data/大数据.rar");//要被下载的文件路径 

    Response.ContentType = "application/octet-stream";  //二进制流
    Response.AddHeader("Content-Disposition", "attachment;filename=" + filename);
    Response.TransmitFile(filePath); //将指定文件写入 HTTP 响应输出流
}

文本下充斥-客户端

点实现了文本下载的服务端实现,接下去我们实现文件下载的客户端实现。客户端的下载好直接是浏览器提供的下载,也可以是迅雷或者我们友好写的下载程序。这里为重新好之解析,我们来所以winfrom程序自己写单下载客户端。

直下载

private async void button1_ClickAsync(object sender, EventArgs e)
{
    using (HttpClient http = new HttpClient())
    {
        var httpResponseMessage = await http.GetAsync("http://localhost:813/新建文件夹2.rar");//发送请求 (链接是a标签提供的)
        var contentLength = httpResponseMessage.Content.Headers.ContentLength;//读取文件大小
        using (var stream = await httpResponseMessage.Content.ReadAsStreamAsync())//读取文件流
        {
            var readLength = 1024000;//1000K  每次读取大小
            byte[] bytes = new byte[readLength];
            int writeLength;
            while ((writeLength = stream.Read(bytes, 0, readLength)) > 0)//分块读取文件流
            {
                using (FileStream fs = new FileStream(Application.StartupPath + "/temp.rar", FileMode.Append, FileAccess.Write))//使用追加方式打开一个文件流
                {
                    fs.Write(bytes, 0, writeLength);//追加写入文件
                    contentLength -= writeLength;
                    if (contentLength == 0)//如果写入完成 给出提示
                        MessageBox.Show("下载完成");
                }
            }
        }
    } 
}

在押在如此可以的代码,好像没有问题。可现实为往事与愿违。
www.27111.com 2

咱们看出了一个十分“System.Net.Http.HttpRequestException:“不可知于缓冲区勾勒副于所安排最酷缓冲区大小
2147483647
更多的字节。”,什么鬼,又是2147483647之数字。因为我们下载的文件大小超过了2G,无法缓冲下充斥。
只是“缓冲下充斥”下又是啊鬼。我也未晓。那咱们尝试可以合这个东东吗?答案是必之。

var httpResponseMessage = await http.GetAsync("http://localhost:813/新建文件夹2.rar");//发送请求

变更成为下面就是足以了

var httpResponseMessage = await http.GetAsync("http://localhost:813/新建文件夹2.rar",HttpCompletionOption.ResponseHeadersRead);//响应一可用且标题可读时即应完成的操作。 (尚未读取的内容。)

www.27111.com 3
俺们看出枚举HttpCompletionOption的有限只价。一个是响应读取内容,一个凡是应读取标题(也就是是Headers里的内容)。

异步下载

我们发现在下载好文件的上会招界面假死。这是UI单线程程序的弱点。当然,这么差的用户体验是咱无可知容忍的。下面我们啊下充斥开一个线程,避免造成UI线程的阻隔。

/// <summary>
/// 异步下载
/// </summary>
/// <param name="sender"></param>
/// <param name="e"></param>
private async void button2_ClickAsync(object sender, EventArgs e)
{
    //开启一个异步线程
    await Task.Run(async () =>
    {
        //异步操作UI元素
        label1.Invoke((Action)(() =>
                {
                    label1.Text = "准备下载...";
                }));

        long downloadSize = 0;//已经下载大小
        long downloadSpeed = 0;//下载速度
        using (HttpClient http = new HttpClient())
        {
            var httpResponseMessage = await http.GetAsync("http://localhost:813/新建文件夹2.rar", HttpCompletionOption.ResponseHeadersRead);//发送请求
            var contentLength = httpResponseMessage.Content.Headers.ContentLength;   //文件大小                
            using (var stream = await httpResponseMessage.Content.ReadAsStreamAsync())
            {
                var readLength = 1024000;//1000K
                byte[] bytes = new byte[readLength];
                int writeLength;
                var beginSecond = DateTime.Now.Second;//当前时间秒
                while ((writeLength = stream.Read(bytes, 0, readLength)) > 0)
                {
                    //使用追加方式打开一个文件流
                    using (FileStream fs = new FileStream(Application.StartupPath + "/temp.rar", FileMode.Append, FileAccess.Write))
                    {
                        fs.Write(bytes, 0, writeLength);
                    }
                    downloadSize += writeLength;
                    downloadSpeed += writeLength;
                    progressBar1.Invoke((Action)(() =>
                    {
                        var endSecond = DateTime.Now.Second;
                        if (beginSecond != endSecond)//计算速度
                        {
                            downloadSpeed = downloadSpeed / (endSecond - beginSecond);
                            label1.Text = "下载速度" + downloadSpeed / 1024 + "KB/S";

                            beginSecond = DateTime.Now.Second;
                            downloadSpeed = 0;//清空
                        }
                        progressBar1.Value = Math.Max((int)(downloadSize * 100 / contentLength), 1);
                    }));
                }

                label1.Invoke((Action)(() =>
                {
                    label1.Text = "下载完成";
                }));
            }
        }
    });
}

效果图:
www.27111.com 4

断点续传

地方的法子我们发现,如果生充斥及一个半断网了下次会重头开始下载。这与我们今天底主题明确不符嘛。下面我们初步正儿八经入正题文件下载之断点续传。把前我们说及之头属性Range用起来。

var request = new HttpRequestMessage { RequestUri = new Uri(url) };
request.Headers.Range = new RangeHeaderValue(rangeBegin, null); //【关键点】全局变量记录已经下载了多少,然后下次从这个位置开始下载。
var httpResponseMessage = await http.SendAsync(request, HttpCompletionOption.ResponseHeadersRead);

完整代码:

/// <summary>
/// 是否暂停
/// </summary>
static bool isPause = true;
/// <summary>
/// 下载开始位置(也就是已经下载了的位置)
/// </summary>
static long rangeBegin = 0; //(当然,这个值也可以存为持久化。如文本、数据库等)

private async void button3_ClickAsync(object sender, EventArgs e)
{
    isPause = !isPause;
    if (!isPause)//点击下载
    {
        button3.Text = "暂停";

        await Task.Run(async () =>
        {
            //异步操作UI元素
            label1.Invoke((Action)(() =>
           {
               label1.Text = "准备下载...";
           }));

            long downloadSpeed = 0;//下载速度
            using (HttpClient http = new HttpClient())
            {
                var url = "http://localhost:813/新建文件夹2.rar";
                var request = new HttpRequestMessage { RequestUri = new Uri(url) };
                request.Headers.Range = new RangeHeaderValue(rangeBegin, null); //【关键点】全局变量记录已经下载了多少,然后下次从这个位置开始下载。
                var httpResponseMessage = await http.SendAsync(request, HttpCompletionOption.ResponseHeadersRead);
                var contentLength = httpResponseMessage.Content.Headers.ContentLength;//本次请求的内容大小
                if (httpResponseMessage.Content.Headers.ContentRange != null) //如果为空,则说明服务器不支持断点续传
                {
                    contentLength = httpResponseMessage.Content.Headers.ContentRange.Length;//服务器上的文件大小
                }

                using (var stream = await httpResponseMessage.Content.ReadAsStreamAsync())
                {
                    var readLength = 1024000;//1000K
                    byte[] bytes = new byte[readLength];
                    int writeLength;
                    var beginSecond = DateTime.Now.Second;//当前时间秒
                    while ((writeLength = stream.Read(bytes, 0, readLength)) > 0 && !isPause)
                    {
                        //使用追加方式打开一个文件流
                        using (FileStream fs = new FileStream(Application.StartupPath + "/temp.rar", FileMode.Append, FileAccess.Write))
                        {
                            fs.Write(bytes, 0, writeLength);
                        }
                        downloadSpeed += writeLength;
                        rangeBegin += writeLength;
                        progressBar1.Invoke((Action)(() =>
                        {
                            var endSecond = DateTime.Now.Second;
                            if (beginSecond != endSecond)//计算速度
                            {
                                downloadSpeed = downloadSpeed / (endSecond - beginSecond);
                                label1.Text = "下载速度" + downloadSpeed / 1024 + "KB/S";

                                beginSecond = DateTime.Now.Second;
                                downloadSpeed = 0;//清空
                            }
                            progressBar1.Value = Math.Max((int)((rangeBegin) * 100 / contentLength), 1);
                        }));
                    }

                    if (rangeBegin == contentLength)
                    {
                        label1.Invoke((Action)(() =>
                        {
                            label1.Text = "下载完成";
                        }));
                    }
                }
            }
        });
    }
    else//点击暂停
    {
        button3.Text = "继续下载";
        label1.Text = "暂停下载";
    }
}

效果图:
www.27111.com 5

暨如今得了,你看我们的断点续传就形成了呢?
蹭,你闹没有来发现我们用的下载链接是a标签的。也就是咱协调写服务端提供的下载链接是不是吧可以支持断点续传呢?下面我换个下充斥链接试试就知道。

断点续传(服务端的支撑)

测试结果如下:
www.27111.com 6

意识并无支持断点续传。为什么a标签链接可以一直支持,我们刻画的下载却休支持啊。
a标签的链接指向的第一手是iis上的文本(iis默认支持),而我辈形容的却并未举行响应报文表头Range的处理。(没想象着之那么智能嘛
>_<)

面前我们说过,断线续传是HTTP的一个磋商。我们遵守其,它便有,我们无遵从其吧就是不存。
这就是说下面我们修改前的文本下充斥代码(服务端):

public void FileDownload5()
{          
    //前面可以做用户登录验证、用户权限验证等。

    string filename = "大数据.rar";   //客户端保存的文件名  
    string filePath = Server.MapPath("/App_Data/大数据.rar");//要被下载的文件路径 

    var range = Request.Headers["Range"];
    if (!string.IsNullOrWhiteSpace(range))//如果遵守协议,支持断点续传
    {
        var fileLength = new FileInfo(filePath).Length;//文件的总大小
        long begin;//文件的开始位置
        long end;//文件的结束位置
        long.TryParse(range.Split('=')[1].Split('-')[0], out begin);
        long.TryParse(range.Split('-')[1], out end);
        end = end - begin > 0 ? end : (fileLength - 1);// 如果没有结束位置,那我们读剩下的全部

        //表头 表明  下载文件的开始、结束位置 和文件总大小
        Response.AddHeader("Content-Range", "bytes " + begin + "-" + end + "/" + fileLength);
        Response.ContentType = "application/octet-stream";
        Response.AddHeader("Content-Disposition", "attachment;filename=" + filename);
        Response.TransmitFile(filePath, begin, (end - begin));//发送 文件开始位置读取的大小
    }
    else
    {
        Response.ContentType = "application/octet-stream";
        Response.AddHeader("Content-Disposition", "attachment;filename=" + filename);
        Response.TransmitFile(filePath);
    }
}

接下来还测试断点续传,完美支持。

基本上线程同时下载(分片下载)

文件之断点续传已经分析了了。不过中间略细节的东西而可以根据实际需要去圆。如:文件命名、断点续传的文书是否发了变动、下载完成后证实文件以及服务器上之是否相同。
再有我们得以依据表头属性Range来实现多线程下载,不过此虽不贴代码了,贴个效益图吧。和直达平等首文件上污染里的多线程上传同理。您也可根据提供的demo代码下载查看,内产生完全兑现。
www.27111.com 7

 

参考资料

  • http://www.cnblogs.com/yank/p/HTTP-Range.html
  • http://www.cnblogs.com/sparkdev/p/6141539.html

demo

  • https://github.com/zhaopeiym/BlogDemoCode/tree/master/上传下载

 

发表评论

电子邮件地址不会被公开。 必填项已用*标注