如何使用 Express.js 和 Node.js 实现大文件上传

AI 编程助手,豆包旗下的编程助手,提供智能补全、智能预测、智能问答等能力,节省开发时间,释放脑海中的创造力,支持 VSCode,点击体验 AI

在现代 Web 应用中,大文件上传是非常常见的需求。但是,由于 HTTP 协议的限制,上传大文件时会需要很长的时间而且很容易出错。本文将介绍如何使用 Express.js 和 Node.js 来实现大文件上传,并提供示例代码以供参考。

HTTP 协议限制

HTTP 协议的请求和响应都是基于 TCP/IP 协议的,而 TCP/IP 协议是一个面向连接的协议。这意味着在 HTTP 协议中,一个请求必须发送完整才能获得响应,即使是在上传文件时也是如此。

因此,上传大文件时需要将整个文件加载到内存中,然后以单个请求的方式发送给服务器。这对于大型文件来说是非常低效的,并且会增加强制停止上传之类的风险。

使用 Express.js 和 Node.js 实现大文件上传

为了解决 HTTP 协议的限制,我们可以使用流式上传,即将文件分成多个块,每个块被单独上传,并在服务器上进行重新组成。这种方法使得上传大文件变得更加高效,同时也更安全,因为如果上传过程中出现故障,可以重新启动上传而不必从头开始。

以下是如何使用 Express.js 和 Node.js 实现大文件上传的基本步骤:

  1. 安装 multerformidable 这两个模块。
--- ------- ------ ----------
  1. 创建一个新的 Express.js 应用程序。
----- ------- - -------------------
----- --- - ----------
  1. 创建一个上传路由,使用 multerformidable 模块处理上传的文件块。
----- ------ - ------------------
----- - ------------ - - ----------------------

----- ------- - -----------------------

----- ------ - -------- ------- ---------

------------------- ----- ----- ---- -- -
  
  ----- ------ - ---
  ----- ----- - ---

  ----- ---- - --- ---------------

  ---------------- ------- ------ -- -
    ------------- - ------
  ---

  --------------- ------- ----- -- -
    ------------ - -----
  ---

  -------------- ----- -- -
    -- ----- -
      -------------------
      --------------------
    -

    --------------------- --------
    -------------------- -------

    --------------------
  ---

  ----------------
---

在上面的代码中,multer 负责处理上传的文件块,而 formidable 负责从上传的文件块中提取信息,如文件名、文件类型、文件大小等。在这个例子中,我们使用了 memoryStorage,这会将上传的文件块存储在内存中,但是你也可以将这些块存储在磁盘上。

  1. 接收文件块,将其保存在内存中。
------------------- ----- ----- ---- -- -
  
  ----- ------ - ---
  ----- ----- - ---

  ----- ---- - --- ---------------

  ---------------- ------- ------ -- -
    ------------- - ------
  ---

  --------------- ------- ----- -- -
    ------------ - -----
  ---

  -------------- ----- -- -
    -- ----- -
      -------------------
      --------------------
    -

    --------------------- --------
    -------------------- -------

    --------------------
  ---

  --- ---------- - --

  -------------- ------- -- -
    -------------- - ----------- - ------
    -------------
  ---

  ------------- -- -- -
    ----------------
  ---
---

在上面的代码中,我们在 req.on("data", ...) 中接收上传的块并将其保存在内存中,然后在 req.on("end", ...) 事件中调用 form.parse(req) 来提取信息。

  1. 收集所有块并将它们合并到一个文件中。
------------------- ----- ----- ---- -- -
  
  ----- ------ - ---
  ----- ----- - ---

  ----- ---- - --- ---------------

  ---------------- ------- ------ -- -
    ------------- - ------
  ---

  --------------- ------- ----- -- -
    ------------ - -----
  ---

  -------------- ----- -- -
    -- ----- -
      -------------------
      --------------------
      -------
    -

    --------------------- --------
    -------------------- -------

    ----- ---- - --- ------------------------------------------- -- ---------------------- -- -- ------ --------

    --------------------
  ---

  --- ---------- - --

  -------------- ------- -- -
    -------------- - ----------- - ------
    -------------
  ---

  ------------- -- -- -
    ----------------
  ---
---

在上面的代码中,我们使用 Object.values(files) 返回一个数组,其中包含所有上传的块,然后使用 map 函数将每个块转换为一个 Uint8Array,最后使用 reduce 函数将它们合并在一起。注意:在将块合并到一个文件中之前,你需要确保它们按正确的顺序排列,否则文件可能会损坏。

  1. 配置上传路由和启动服务器。
----- ---- - ---------------- -- -----

---------------- -- -- -
  ------------------- -- ------- -- ---- ----------
---

启动应用程序后,使用你最喜欢的 HTTP 客户端发送带有块数据的 POST 请求即可将大文件上传到服务器。

结论

本文介绍了如何使用 Express.js 和 Node.js 实现大文件上传的基本原理,并提供了示例代码。通过这种方法,你可以为你的 Web 应用程序提供稳健而高效的上传机制,同时还可以防止不必要的下载时间和服务器不必要的负担。

来源:JavaScript中文网 ,转载请联系管理员! 本文地址:https://www.javascriptcn.com/post/671eb1262e7021665ef93637


猜你喜欢

  • Node.js 中使用 Webpack 打包前端代码的方法和优化技巧

    前端开发中经常需要使用工具进行代码打包,其中 Webpack 是目前较为常用的打包工具之一。本文将介绍在 Node.js 环境中如何使用 Webpack 打包前端代码,以及一些优化技巧。

    14 天前
  • 使用 Fastify 自定义错误处理函数

    介绍 Fastify 是一个非常快速的 Web 框架,它提供了一个简单而强大的路由系统。在一些使用场景下,错误信息对于开发者来说非常重要。Fastify 允许我们自定义错误信息,从而更容易地调试和排除...

    14 天前
  • 如何在 Serverless 框架中使用 CodeCommit 进行代码版本管理

    在 Serverless 架构中,代码版本管理非常重要。Version Control System(VCS)能够帮助我们记录每次代码的修改以及其作者和修改时间,同时可以很好地协同开发并保留历史版本,...

    14 天前
  • 解决 Jest 遇到的 "Jest encountered an unexpected token" 错误

    在使用 Jest 对 JavaScript 代码进行测试时,有时会遇到错误信息:"Jest encountered an unexpected token"。这种错误会让我们的测试无法正常运行,导致我...

    14 天前
  • Hapi.js 的使用方法总结(二)

    在上一篇文章中,我们介绍了 Hapi.js 的一些基础知识和使用方法。在本篇文章中,我们将更深入地探究 Hapi.js 的用法。我们将主要讨论以下三个方面: 路径参数 认证和授权 插件和中间件 路...

    14 天前
  • 使用 Node.js 和 Express 构建 RESTful API:配置和调试

    在Web开发中,API是一种用于不同应用程序之间交换数据的技术。使用API,可以使不同的应用程序之间进行通信并共享数据,从而实现更强大、更灵活的应用程序。 RESTful API是目前比较流行的一种A...

    14 天前
  • Koa 框架中间件开发详解及实践分享

    前言 如今,随着互联网技术的不断发展和进步,前端 web 开发也变得日益重要。而在这个领域中,Koa 框架无疑是一个非常流行的技术。Koa 框架是一个轻量级的 Node.js web 框架,它基于 E...

    14 天前
  • 为什么 Material Design 的颜色更加鲜活、明亮?

    Material Design 是 Google 推出的一种现代化的设计语言,该语言具有鲜活、明亮的颜色风格,深受众多设计师和开发者的喜爱。那么,为什么 Material Design 的颜色更加鲜活...

    14 天前
  • ECMAScript 2018 中 Generator 函数的应用场景与实例演示

    前言 Generator 函数作为 ECMAScript 2018 的新特性,在 ES6 的基础上进一步增强了 JavaScript 的编程能力。本文将会详细介绍 Generator 函数的应用场景以...

    14 天前
  • 使用 Tailwind CSS 解决响应式设计的问题

    在现代 Web 开发中,响应式设计已经成为必备技能。对于前端开发人员而言,实现网站或应用程序在不同屏幕尺寸之间的平滑过渡是一项重要任务。但是,在大多数情况下,响应式设计需要大量的 CSS 编写,这会导...

    14 天前
  • Headless CMS 的优势与劣势分析

    Headless CMS 是一种新型的内容管理系统,近年来在前端开发领域中越来越流行。与传统 CMS 不同的是,Headless CMS 是一种无头 CMS,它通过提供 API 端点,让前端开发者可以...

    14 天前
  • Redis 在分布式系统中的使用及常见问题及处理方法

    前言 随着分布式系统的兴起和应用场景的不断扩大,分布式系统中数据的管理和处理越来越受到关注。Redis 作为一种高性能的键值存储数据库,已经成为分布式系统数据存储和缓存的重要选择之一。

    14 天前
  • Cypress 中如何模拟 fetch 时返回异常的情况

    在前端开发中,我们经常会使用 fetch 方法来与后端API进行数据交互。在测试前端页面时,我们需要模拟 fetch 方法返回异常的情况,以便测试我们的应用程序在处理错误时的表现。

    14 天前
  • 优化 Elasticsearch 性能的几种方法

    Elasticsearch 是一个基于 Lucene 的分布式搜索引擎,它是现代 Web 应用、日志聚合、企业搜索等领域的重要组成部分。对于任何开发人员来说,优化 Elasticsearch 的性能是...

    14 天前
  • 避免 RxJS 中的内存泄漏问题

    RxJS 是一个流式编程的库,它提供了一系列方便的工具和函数,帮助我们处理异步数据流。它在前端开发中被广泛地应用,但是在使用 RxJS 时也有一些需要注意的问题,比如它与内存泄漏的关系。

    14 天前
  • 如何在 Deno 中优化大批量数据处理

    前言 Deno 是一个安全、现代化的 JavaScript 和 TypeScript 运行时环境。它内置了一些常见的工具,可以使我们尽可能简单、快速地实现我们的各种愿望。

    14 天前
  • 如何利用 ECMAScript 2018 中的 Object.defineProperty 实现双向绑定

    如何利用 ECMAScript 2018 中的 Object.defineProperty 实现双向绑定 随着前端技术的发展,双向绑定成为了开发中的一项重要功能需求。

    14 天前
  • ESLint:如何提高所有开发者代码规范性?

    在前端开发的过程中,代码风格的一致性和规范性一直是一个非常重要的问题。如果没有一个统一的风格规范,那么代码会显得混乱无章,可读性也会变得很差。为了解决这个问题,我们通常会使用一些工具来自动化检查和修复...

    14 天前
  • Next.js 中如何使用 GraphQL 及其优化

    简介 在 Web 开发中, GraphQL 作为一种新兴的 API 查询语言,具有多种优势。在前端的开发过程中,我们经常需要通过查询接口获取后端返回的数据,而 GraphQL 可以让你的应用程序更直接...

    14 天前
  • 使用 Server-sent Events(SSE)进行大规模数据推送的最佳实践

    Server-sent Events(SSE)是一种基于 HTTP 的推送技术,它允许服务器实时向客户端推送事件数据,而无需客户端发送请求。相比于 WebSocket 等技术,SSE 更加简洁易用,适...

    14 天前

相关推荐

    暂无文章