文档 1 分钟阅读

OpsIQ 可以爬取网站以建立知识吗?

本文是自动翻译的。

是的,授权的网站可以通过受控爬虫被发现。页面可以在成为可信知识之前被分类、选择、审查和改进。重要的是要注意,爬取不应自动发布每个页面。这是因为导航元素、法律文本、重复页面、动态账户页面、过时内容和垃圾可能需要排除。

相关文章

讨论

正在加载讨论…