在每个请求上打开文件句柄,一次只能打开一次

如何解决在每个请求上打开文件句柄,一次只能打开一次

这与SFTP协议有关,可以从服务器下载文件。

SFTP客户端将发出多个“读取”请求,可能会以多段速度更快地下载文件。

在正常情况下,服务器会先收到一个OPEN请求,然后再相乘READ请求,然后再关闭。

因此,在OPEN请求中,服务器“打开”本地文件句柄(fs.open),在CLOSE请求中,服务器将其关闭(fs.close)...但是如果客户端很顽皮该怎么办并想做讨厌的事情,只是发送多个文件的多个OPEN请求以使服务器用尽内存?

在那种情况下,我认为最好的解决方案是让服务器在READ请求中打开文件句柄,并在完成读取后立即将其关闭。但是会产生其他问题吗?我的意思是因为多个READ请求可以并行运行,所以可能有很多文件句柄打开,指向同一个本地文件。

解决方法

要向客户端发送文件,您可以使用createReadStream代替fs.openfs.close,就像这样

// in response section...
res.writeHead(200,headers);
fs.createReadStream(file).pipe(res)
,

fs.createReadStream()可以处理开始和结束字节,以处理每个后续的READ请求。见下文。此外,为确保没有恶意用户发出请求,您应在读取文件数据之前进行处理。如果这将是匿名SFTP,则可以对请求者的IP进行检查,并将单个IP限制为每个IP单个OPEN / READ流...或限制单个IP /文件路径组合。只需将其存储在本地变量中,然后在“打开”中将其添加到日志中,并在完成下载后将其删除。

fs.createReadStream('sample.txt',{
  'flags': 'r',//<string> See support of file system flags. Default: 'r'.
  'encoding': null,// <string> Default: null
  'autoClose': true,// <boolean> Default: true
  'emitClose': false,// <boolean> Default: false
  'start': 0,// <integer>
  'end': Infinity,// <integer> Default: Infinity
  'highWaterMark': (64 * 1024),// <integer> Default: 64 * 1024
});

An example to read the last 10 bytes of a file which is 100 bytes long:

fs.createReadStream('sample.txt',{ start: 90,end: 99 });

来源:Node.js


代替使用:ftp-srv

话虽这么说,我认为使用一个名为 ftp-srv 的强大FTP程序包会更好,它可以处理所有这些以及更多内容。我在生产中使用过它,每天有成百上千的用户,每天有数千次的下载/上传而没有任何问题。基于帖子中考虑的因素,您将无法防范恶意用户。尤其是涉及FTP / SFTP时,扫描机器人几乎每秒都会收到大量恶意请求。您需要找到一种发现恶意的BAN IP的方法。 ftp-srv将处理所有这些以及更多内容。

以我的经验来看,最好的Node FTP Server是:ftp-srv

请参阅:https://www.npmjs.com/package/ftp-srv

我与该软件包没有任何关系。

,

在这种情况下,我认为最好的解决方案是让服务器在READ请求中打开文件句柄,并在完成读取后立即将其关闭。

可以肯定!

但是会带来其他问题吗?

为什么要这么做?

我的意思是,由于多个READ请求可以并行运行,因此可能有许多打开到同一本地文件的文件句柄。

唯一的问题是,一旦达到打开文件的限制(我想您知道ulimit),您的服务器将在下次打开尝试时收到错误消息。在达到该限制之前,如果描述符用于不同的文件(或套接字,管道,设备...)或全部用于同一文件,则完全没有区别。

,

我相信您有一台SFTP服务器,并且需要授予其他访问权限以从该服务器读取信息,

您必须创建公用密钥-专用密钥,并将公用密钥提供给客户端,和/或创建密码。只有真正的客户端才可以在您的服务器上打开连接(限制DDOS攻击类型),

此外,即使必须对SFTP进行编码,也必须将其视为数据库,并且应该共享连接(连接池),我的意思是说一次打开连接,然后进行多次读写,然后关闭连接。因此,即使需要异步读写文件,也必须首先打开连接并进行异步读写,并在完成后关闭连接,如果用例允许,也可以在流中进行读写。

我没有详细说明如何进行流读写,因为先前的答案已经很好地提到了它们。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


依赖报错 idea导入项目后依赖报错,解决方案:https://blog.csdn.net/weixin_42420249/article/details/81191861 依赖版本报错:更换其他版本 无法下载依赖可参考:https://blog.csdn.net/weixin_42628809/a
错误1:代码生成器依赖和mybatis依赖冲突 启动项目时报错如下 2021-12-03 13:33:33.927 ERROR 7228 [ main] o.s.b.d.LoggingFailureAnalysisReporter : *************************** APPL
错误1:gradle项目控制台输出为乱码 # 解决方案:https://blog.csdn.net/weixin_43501566/article/details/112482302 # 在gradle-wrapper.properties 添加以下内容 org.gradle.jvmargs=-Df
错误还原:在查询的过程中,传入的workType为0时,该条件不起作用 &lt;select id=&quot;xxx&quot;&gt; SELECT di.id, di.name, di.work_type, di.updated... &lt;where&gt; &lt;if test=&qu
报错如下,gcc版本太低 ^ server.c:5346:31: 错误:‘struct redisServer’没有名为‘server_cpulist’的成员 redisSetCpuAffinity(server.server_cpulist); ^ server.c: 在函数‘hasActiveC
解决方案1 1、改项目中.idea/workspace.xml配置文件,增加dynamic.classpath参数 2、搜索PropertiesComponent,添加如下 &lt;property name=&quot;dynamic.classpath&quot; value=&quot;tru
删除根组件app.vue中的默认代码后报错:Module Error (from ./node_modules/eslint-loader/index.js): 解决方案:关闭ESlint代码检测,在项目根目录创建vue.config.js,在文件中添加 module.exports = { lin
查看spark默认的python版本 [root@master day27]# pyspark /home/software/spark-2.3.4-bin-hadoop2.7/conf/spark-env.sh: line 2: /usr/local/hadoop/bin/hadoop: No s
使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams[&#39;font.sans-serif&#39;] = [&#39;SimHei&#39;] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -&gt; systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping(&quot;/hires&quot;) public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate&lt;String
使用vite构建项目报错 C:\Users\ychen\work&gt;npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-