• 请不要在回答技术问题时复制粘贴 AI 生成的内容
lsk569937453
V2EX  ›  程序员

多线程分段下载文件时,为什么不下载到同一个大文件中?而是要分别下载到单独的文件然后再合并。

  •  
  •   lsk569937453 · May 11, 2024 · 17965 views
    This topic created in 760 days ago, the information mentioned may be changed or developed.

    https://gist.github.com/lsk569937453/e0496754cf3ebe740a33a7759516015e

    我自己写了个 demo ,假设开 50 个线程下载,每个线程下载时间为 10s 钟,可以看到最后写入文件的时间才 1s 不到。

    所以下载文件时,瓶颈是网络 IO 吧,操作文件 IO 的时间可以忽略不计了。所以是不是下载到一个文件中更优?

    103 replies    2024-05-13 17:05:24 +08:00
    1  2  
    huixia0010
        101
    huixia0010  
       May 13, 2024
    哦~~~~~~涨姿势了,谢谢 @AsAsSaSa

    你说的对,这个不知道最终尺寸,两个确实都不适用。 @guo4224
    augustheart
        102
    augustheart  
       May 13, 2024
    @GrayXu 不做配置文件,分段下载情况下断点续传的时候确实会有问题。
    下载软件必须考虑断点续传啊。
    playboy0
        103
    playboy0  
       May 13, 2024
    @monkeyWie #43 您好,请问您说的`单线程高性能网络开发的(epoll 、eventloop )`这两点可以给个关键字吗 ,我想学习一下这方面,谢谢
    1  2  
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2499 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 16:09 · PVG 00:09 · LAX 09:09 · JFK 12:09
    ♥ Do have faith in what you're doing.