如何解决在每个请求上打开文件句柄,一次只能打开一次
这与SFTP协议有关,可以从服务器下载文件。
SFTP客户端将发出多个“读取”请求,可能会以多段速度更快地下载文件。
在正常情况下,服务器会先收到一个OPEN请求,然后再相乘READ请求,然后再关闭。
因此,在OPEN请求中,服务器“打开”本地文件句柄(fs.open
),在CLOSE请求中,服务器将其关闭(fs.close
)...但是如果客户端很顽皮该怎么办并想做讨厌的事情,只是发送多个文件的多个OPEN请求以使服务器用尽内存?
在那种情况下,我认为最好的解决方案是让服务器在READ请求中打开文件句柄,并在完成读取后立即将其关闭。但是会产生其他问题吗?我的意思是因为多个READ请求可以并行运行,所以可能有很多文件句柄打开,指向同一个本地文件。
解决方法
要向客户端发送文件,您可以使用createReadStream
代替fs.open
和fs.close
,就像这样
// in response section...
res.writeHead(200,headers);
fs.createReadStream(file).pipe(res)
,
fs.createReadStream()可以处理开始和结束字节,以处理每个后续的READ请求。见下文。此外,为确保没有恶意用户发出请求,您应在读取文件数据之前进行处理。如果这将是匿名SFTP,则可以对请求者的IP进行检查,并将单个IP限制为每个IP单个OPEN / READ流...或限制单个IP /文件路径组合。只需将其存储在本地变量中,然后在“打开”中将其添加到日志中,并在完成下载后将其删除。
fs.createReadStream('sample.txt',{
'flags': 'r',//<string> See support of file system flags. Default: 'r'.
'encoding': null,// <string> Default: null
'autoClose': true,// <boolean> Default: true
'emitClose': false,// <boolean> Default: false
'start': 0,// <integer>
'end': Infinity,// <integer> Default: Infinity
'highWaterMark': (64 * 1024),// <integer> Default: 64 * 1024
});
An example to read the last 10 bytes of a file which is 100 bytes long:
fs.createReadStream('sample.txt',{ start: 90,end: 99 });
来源:Node.js
代替使用:ftp-srv
话虽这么说,我认为使用一个名为 ftp-srv 的强大FTP程序包会更好,它可以处理所有这些以及更多内容。我在生产中使用过它,每天有成百上千的用户,每天有数千次的下载/上传而没有任何问题。基于帖子中考虑的因素,您将无法防范恶意用户。尤其是涉及FTP / SFTP时,扫描机器人几乎每秒都会收到大量恶意请求。您需要找到一种发现恶意的BAN IP的方法。 ftp-srv将处理所有这些以及更多内容。
以我的经验来看,最好的Node FTP Server是:ftp-srv
请参阅:https://www.npmjs.com/package/ftp-srv
我与该软件包没有任何关系。
,在这种情况下,我认为最好的解决方案是让服务器在READ请求中打开文件句柄,并在完成读取后立即将其关闭。
可以肯定!
但是会带来其他问题吗?
为什么要这么做?
我的意思是,由于多个READ请求可以并行运行,因此可能有许多打开到同一本地文件的文件句柄。
唯一的问题是,一旦达到打开文件的限制(我想您知道ulimit
),您的服务器将在下次打开尝试时收到错误消息。在达到该限制之前,如果描述符用于不同的文件(或套接字,管道,设备...)或全部用于同一文件,则完全没有区别。
我相信您有一台SFTP服务器,并且需要授予其他访问权限以从该服务器读取信息,
您必须创建公用密钥-专用密钥,并将公用密钥提供给客户端,和/或创建密码。只有真正的客户端才可以在您的服务器上打开连接(限制DDOS攻击类型),
此外,即使必须对SFTP进行编码,也必须将其视为数据库,并且应该共享连接(连接池),我的意思是说一次打开连接,然后进行多次读写,然后关闭连接。因此,即使需要异步读写文件,也必须首先打开连接并进行异步读写,并在完成后关闭连接,如果用例允许,也可以在流中进行读写。
我没有详细说明如何进行流读写,因为先前的答案已经很好地提到了它们。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。