如何从网页中提取文本内容?

发布时间:2019-12-09 发布网站:脚本之家
脚本之家收集整理的这篇文章主要介绍了如何从网页中提取文本内容?脚本之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
我正在开发一个java应用程序,它可以从不同的网页获取文本信息,并将其汇总到一个页面.例如,假设我在不同的网页上有新闻,如印度教,印度时报,政治家等.现在我的应用程序应该从这些页面的每一个中提取重要点,并将它们作为单个新闻组合在一起.应用程序基于Web内容挖掘的概念.作为该领域的初学者,我无法理解从哪里开始我已经通过研究论文解释了噪声去除作为建立这个应用程序的第一步.

所以,如果给我一个新闻网页,第一步是从页面中提取主要新闻,不包括超链接,广告,无用图像等.我的问题是我该怎么做?请给我一些很好的教程,解释使用Web内容挖掘实现这种应用程序.或者至少给我一些提示如何实现它?

解决方法

您可以使用 readabilityboilerpipe这两个开源工具完成此任务.对于教程,您应该阅读代码&这两个项目的文档.

总结

以上是脚本之家为你收集整理的如何从网页中提取文本内容?全部内容,希望文章能够帮你解决如何从网页中提取文本内容?所遇到的程序开发问题。

如果觉得脚本之家网站内容还不错,欢迎将脚本之家网站推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:76874919,请注明来意。

脚本之家官方公众号

微信公众号搜索 “ 程序精选 ” ,选择关注!

微信公众号搜索 “ 程序精选 ” ,选择关注!
精选程序员所需精品干货内容!

标签: