机器人爬行iframe吗? [英] Do robots crawl iframes?

查看:118
本文介绍了机器人爬行iframe吗?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

机器人在iframe内爬行是否常见?他们是如何做到的?他们是立即对其进行索引,还是只是记住这些网址并稍后继续?

Is it common for robots to crawl inside iframes? And how do they do that? Do they index it instantly or do they just 'remember' the URL and continue sometimes later?

推荐答案

如果有href / src链接在索引(即抓取的)HTML / XHTML页面的某处,它将被索引。是否通过iFrame向用户显示该页面无关紧要。

If there is an href/src link somewhere on an indexed (i.e. crawled) HTML/XHTML page, it will get indexed. Whether or not the page is presented to the user via an iFrame is irrelevant.

这篇关于机器人爬行iframe吗?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆