Nodejs文件流并发

文章/答案/技术大牛

发布

1回答

javascript、node.js、file-io、concurrency

在我看来，我在nodejs中遇到了并发问题。我知道这是不可能的。我正在逐行处理文件中的数据，并将其写入到另一个文件中。在输出文件中，我注意到行正在被覆盖，这意味着我经常看到输出中的行似乎被其他行覆盖了一半。我从读取流中读取数据。

浏览 22提问于2017-02-16得票数 0

回答已采纳

2回答

NodeJS -长时间的投票/推送/rejeverse？我需要什么才能将实时数据推送到网络上？

node.js、push、long-polling、requirements

我对NodeJS(使用c9.io)相当陌生，最近对它有一种病态的痴迷。谢谢

浏览 2提问于2012-11-11得票数 2

回答已采纳

1回答

一种检测异步递归文件搜索结束的优雅方法？

node.js、recursion、search、file-handling、asynchronous-programming

给定单线程环境中的递归子程序，该子程序启动大量异步I/O操作，并为每个操作注册回调函数。此回调将在操作完成后调用。由于代码运行在单个线程上，最基本的解决方案是将计数器变量初始化为0，并在每次I/O操作之前增加计数器，并在回调函数的尾部将其递减。您可以使用事件或操作(如在elm中)，然而，该解决方案将非常相似。一种可能的优化:如果多个I/O操作链接在一起(因此在另一个I/O操作回调函数中启动一个I/O操作)，则在链开始时增加计数器并在链结束时减少就足够了，但是当多个I/O操作在一个回调函数中启动时，则应该将所有分支

浏览 0提问于2017-12-26得票数 0

回答已采纳

1回答

基于node.js的可扩展体系结构

node.js、nginx、architecture、load-balancing、devops

作为下一个任务的一部分，我需要准备一个可扩展和完全并发的支持节点架构。我对kubernetes/containers的概念感到困惑，真的需要一些帮助。我不能使用任何付费服务！基本上需要一个基本的草图/想法/解释/指向体系结构的指针，它应该解释API端点、数据服务连接性以及数据库、服务器和客户端之间的数据流！以下是我心中的想法：因此，我相信，上面是基于nodejs的REST的标准设置。

浏览 1提问于2018-05-18得票数 0

回答已采纳

1回答

从s3下载文件而不将其写入nodejs中的文件系统

node.js、amazon-s3、stream

我有一个使用Hapi运行的Nodejs服务器。所有文件都存储在s3中。我的问题是，当我试图将缓冲区转换为流并发送给它时，API拒绝它，当我使用createReadStream()结果时也是如此，但是当我使用FS保存文件，然后FS读取API时，则接受流及其工作。因此，我需要帮助，如何在不保存和读取文件的情况下创建相同的结

浏览 0提问于2018-10-17得票数 4

1回答

nodejs作为WebRTC服务器

node.js、webrtc

我需要建立解决方案时，客户端从浏览器连接到WebRTC服务器，并发送\接收一些数据(为ex音频)。在服务器端，我需要有可能控制流。(例如：保存用户音频并将一些音频发送给用户) 有没有什么解决方案可以在nodeJS上构建这样的服务器端？

浏览 33提问于2021-03-20得票数 0

1回答

密钥掩蔽认证流程NodeJS

keycloak

我希望只使用基于JavaScript的技术来创建自定义的密钥披风身份验证流。如有任何帮助或参考资料，敬请见谅。

浏览 3提问于2022-08-04得票数 0

回答已采纳

2回答

Java是否适合多租户SAAS架构？

java、performance、architecture、concurrency、saas

就其他语言而言，据说grails中的多租户已经相当成熟，基于事件的NodeJS也很不错。我关心的是工作流的框架可用性，安全的基于角色的访问控制，应用程序接口设计，ORM....because我们正在构建的软件自动化系统是面向商业企业的。我更喜欢Java语言，Spring框架，工作流，也许GWT...But想象一下，有一天，一旦SAAS卖得很好，我们有成千上万的租户，高并发发生了，Java能够解决高并发I/O成本，并且可以大规模扩展吗？(高并发) 无论如何，给出我正在尝试实现的非

浏览 1提问于2013-07-09得票数 3

1回答

NodeJS究竟如何处理高并发请求？

node.js、multithreading、concurrency

我试图了解与基于线程的方法(如Servlet服务器)相比，nodejs如何实现更高的并发性。我已经知道，在nodejs中，“除了代码之外，所有东西都是并行运行的”，而且在libuv中还有一个后端线程池来处理文件IO或数据库调用，这通常是瓶颈。下面是我的问题:如果nodejs使用线程池来处理数据库调用，那么它如何处理比Tomcat这样的Servlet服务器更高的并发请求，因为Tomcat也可以使用由epoll/kqueue支持的NIO来实现高并发性例如，如果有一

浏览 5提问于2017-07-16得票数 1

1回答

Node.js更新客户端访问的JSON文件

javascript、json、node.js、mean-stack

我正在使用平均堆栈，并在服务器中编写一个JSON文件，以便向任何连接的客户端提供一些天气信息。我每小时使用节点调度库更新JSON文件。如果客户端同时尝试访问文件数据，来自服务器的文件的不断更新会导致任何并发问题吗？

浏览 7提问于2017-10-13得票数 2

回答已采纳

3回答

如何在nodejs中创建临时文件

javascript、node.js

我想附加一个xml文件，并作为电子邮件发送。我有一个想要写在xml文件中的文本字符串。但我不想每次都创建一个文件。流是否意味着它必须实际创建一个文件？我不能不创建文件就用stream把它作为附件发送吗？我有像这样的xml字符串，我想把它放在xml文件中并发送电子邮件： const xmlStringStart = `<ENVELOPE> <TALLYREQUEST>ImportSVCUR

浏览 196提问于2021-04-21得票数 0

回答已采纳

2回答

React和Node应用程序从REST API下载zip文件

javascript、node.js、reactjs、express、axios

当我单击download按钮时，它会向节点app发出一个请求，让它调用REST API在浏览器中下载一个zip文件。我设法通过直接从React链接REST API url来下载zip文件，但是我的经理告诉我不要暴露API url并通过Node屏蔽它。我尝试了在网上找到的不同方法，但都不起作用，只有一种方法下载了一个压缩文件，其中包含的文件可能包含文件的base64。我想为React和Node如何从REST API下载的解决方案。

浏览 45提问于2021-11-08得票数 0

1回答

如何将.csv文件从Postgres容器导出到宿主NodeJS容器(可能像流)？

postgresql、docker、docker-compose

保存mytable.csv到主机(或其他容器从码头-撰写)你知道如何做这件事的信息吗？第三中的主要问题是:我无法将.csv文件返回给NodeJS或将其保存到NodeJS容器中。我可以做两件事：返回用于在NodeJS中形成文件的行(但是NodeJS服务器将缓慢地

浏览 3提问于2020-07-31得票数 0

1回答

API到API文件传输

node.js、amazon-web-services、api、google-drive-api、file-transfer

我需要把1000的文件(图像，pdf)从第三方API服务到谷歌驱动API服务。我已经为每个API工作了。我的问题是，这可以直接做吗？例如，我的代码访问第一个API中的文件列表并遍历列表，将每个文件传递到google服务，而不需要中间存储，比如AWS S3桶。我正在考虑使用nodeJS后端和棱角前端来创建应用程序。

浏览 5提问于2022-04-13得票数 0

1回答

在node.js中存储请求流中的文件

node.js、amazon-s3、audio、stream

我想创建Web，在那里，我从客户端上传音频流，在nodejs服务器中，我想将音频流保存为文件，然后我想将文件上传到S3。如何将流作为文件保存到硬盘中？

浏览 8提问于2020-01-24得票数 0

1回答

如何使用nodejs模块将数据放入map中，并保持数据的不重复和同步

node.js、hashtable、concurrenthashmap

我需要从文件中读取一些数据，并将一些不重复的键放入映射中，以保持其同步。我应该使用hashtable或hashmap和sync block还是nodejs模块？你有什么建议吗？nodejs中是否有可用的并发hashmap模块？

浏览 1提问于2015-06-17得票数 0

2回答

使用Fetch API和fs.createWriteStream对文件进行流响应

javascript、electron、fs、fetch-api

我正在创建一个Electron应用程序，我想将一个图像流式传输到一个文件中(所以基本上是下载它)。我想使用原生的Fetch API，因为请求模块的开销会很大。

浏览 19提问于2017-06-21得票数 9

回答已采纳

1回答

从nodejs高效序列化(并读取) int数组

javascript、arrays、node.js、serialization、node.js-stream

我正在考虑在nodejs中构建一个应用程序，它需要流大(>GB)文件，其中包含一个整数数组。这个问题可能不仅仅是关于nodejs的，但是在nodejs中如何解决这个问题呢？是否有现成的解决方案可用于具有来自磁盘的自定义字节编码的流文件？还是更好的整数数组？理想情况下，应该可以将流的每个部分解码为磁盘绑定，而不是cpu绑定，即使使用ssd。

浏览 1提问于2013-12-07得票数 5

回答已采纳

1回答

骡子GZip压缩

mule、mule-studio

嗨，我正在使用anypoint studio 2014发行版，我需要创建两个流，第一个流需要接收一个固定宽度的文件，然后将它压缩成一个gzip文件并发送出去，第二个流应该得到一个gzip文件，解压缩它，并发送到固定宽度的文件上。我还没有完成第二个流，但是当我试图压缩固定宽度的文件时，我遇到了第一个流的问题--这会返回正常形式的文件，但是当我打开文件</em

浏览 1提问于2015-03-20得票数 0

回答已采纳

1回答

将八位流数据保存为javascript中的PDF文件。

node.js、express、pdf、node-streams

场景1:流数据示例：需要使用reactjs框架将下面提到的流数据转换为浏览器中的文件注意：的最终输出应该是一个PDF文件，并且应该是空白文档。

浏览 0提问于2020-03-25得票数 2

回答已采纳

点击加载更多