x-ray

编程之家收集整理的这个编程导航主要介绍了x-ray编程之家,现在分享给大家,也给大家做个参考。

x-ray 介绍

x-ray安装:

npm install x-ray

示例:

var Xray = require('x-ray');

var x = Xray();

x('https://blog.ycombinator.com/','.post',[{

title: 'h1 a',

link: '.article-title@href'

}])

.paginate('.nav-previous a@href')

.limit(3)

.write('results.json')

特点:

灵活的架构:支持字符串,数组,对象数组和嵌套对象结构。

可组合: API完全可组合,为您提供了每页抓页的灵活性。

分页支持:通过网站分页,抓取每一页。

抓取工具支持:从一页开始,轻松移动到下一页。在广度优先爬行每个页面之后,流程是可预测的。

负责任:支持并发,限制,延迟,超时和限制,以帮助您负责任地抓取任何页面。

可插拔驱动程序:根据您的需要切换不同的

网站地址:https://github.com/matthewmueller/x-ray

GitHub:https://github.com/matthewmueller/x-ray

网站描述:基于Node.js 的HTML 内容抓取工具

x-ray

官方网站:https://github.com/matthewmueller/x-ray

小编说

以上是编程之家为你收集整理的x-ray全部内容。

如果觉得编程之家网站内容还不错,欢迎将编程之家推荐给好友。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


node-crawler,一款最好的node.js爬虫工具
consolidate.js,一个Node.js 模板引擎的集合
nodemon,一个node调试工具
rxdb,Web 实时数据库,支持Node.js等多个终端
axios,基于http客户端的promise,面向浏览器和nodejs
Agenda,基于 node 的一个轻量级任务调度类库
Nodal.js,一个可扩展的,以意见为依据的全服务框架
node-mongodb-native,用于连接操作mongodb的nodejs驱动
Koa,基于 Node.js 平台的下一代 web 开发框架
synaptic,用于 Node.js 和浏览器的自由结构神经网络库
node-postgres【pg】,在nodejs中用来连接PostgreSql数据库的模块
Lass.js,搭建基于 Node.js 的脚手架工具
bluebird,一个第三方Promise规范实现库
nlp.js,基于node自然语言处理的一个库
Feathers.js,一个非常高效灵活的,可以从零构建应用的框架
Cheerio.js,是nodejs特别为服务端定制的,能够快速灵活的对JQuery核心进行实现
Roarr,一个Node.js和浏览器的JSON logger
Kue,一款为 node.js 而构建,由 redis 支持的优先级队列
Mean.js,一种全栈 Javascript 开发架构
SuperAgent,一个轻量的,渐进式的ajax api