帮助中心
40
最新文章
  • 如何设置百度站内搜索功能
  • php5.4版本的环境中提示mysql_escape_string()错误的解决方法
  • php源码的install安装源或者.bak结尾的php文件没有删除将带来的严重的后果
  • shopnc后台功能之规格管理介绍
  • shopnc后台功能之商品分类的管理和新增介绍
  • shopnc后台功能之商品分类的导入和导出介绍
  • shopnc后台功能之清理缓存介绍
  • shopnc后台功能之配送地区介绍
  • shopnc后台功能之操作日志介绍
  • shopnc后台功能之支付方式介绍
  • 文章分类
  • 171CMS_711CMS
  • BIWEB商务智能网站系统
  • BO-BLOG开源博客系统相关
  • cmseasy易通企业系统相关
  • Cscms程氏内容管理系统
  • dedecms教程_织梦系统帮助文档_dedecms虚拟主机空间
  • Destoon开源b2b系统相关
  • DirectAdmin(DA)用户面板相关
  • discuz论坛_discuz x3.0教程_discuz x3.2教程_DZ论坛
  • DouPHP轻量级企业网站管理系统
  • drupal开源内容管理系统(CMS)
  • ecmall商城系统教程-ecmall最新版本-ecmall模版教程
  • Ecshop开源网店系统相关
  • ECTouch程序相关教程
  • ESPCMS_易思
  • ftp教程_ftp上传工具_ftp软件_ftp是什么
  • iwebshop开源网店系统相关
  • joomla开源cms相关
  • KingCMS内容管理系统
  • Lifetype开源博客相关
  • Magento开源电子商务系统
  • mambors开源cms相关
  • mediawiki开源百科系统相关
  • Metinfo(米拓)CMS教程-米拓模版安装教程
  • modoer3.2_modoer点评系统_modoer模版
  • MvMmall多用户商城系统
  • mysql数据库相关
  • opensns开源社交系统
  • oscommerce电子商务系统
  • PHPBB开源论坛程序相关
  • phpcms教程_phpcms漏洞修复_phpcms技术中心
  • phpmyfaq开源问答(FAQ)系统相关
  • phpweb程序_phpweb教程_phpweb成品网站
  • PHPWIND开源论坛系统相关
  • phpyun
  • php主机产品
  • Pmwiki开源百科程序
  • SemCms开源程序
  • ShopEx网店程序_shopex模板教程_shopex虚拟主机空间
  • ShopNc开源商城系统教程_电子商务系统教程
  • Thinkphp中文WEB应用开发框架相关
  • thinksns全平台综合型社交系统
  • Typecho开源博客系统相关
  • WordPress博客中文教程_wordpress模板教程_wordpress虚拟主机空间
  • XOOPS内容管理系统(CMS)
  • YOUDIANCMS内容管理系统
  • zblog博客程序教程_zblog模版问题解决方法
  • Zen Cart开源商城系统相关
  • 主机环境配置相关
  • 其他资料
  • 域名相关
  • 安全资讯
  • 宏博cms企业系统相关
  • 帝国CMS教程_帝国CMS常见问题解决方法
  • 建站之星教程_建站之星程序常见问题解决方案
  • 无忧主机原创视频教程
  • 无忧主机用户部署安装网站
  • 无忧主机超级用户管理系统相关
  • 易企cms企业系统相关
  • 最土团购程序_最土团购程序模板教程_最土团购虚拟主机空间
  • 海盗云商系统
  • 网站SEO教程_SEO是什么?_SEO博客-无忧主机
  • 网站迁移和数据备份相关
  • 资源目录
  • 骑士cms_骑士人才系统教程
  • 解决谷歌搜索引擎无法访问robots.txt文件方法-由于无法访问 robots.txt 文件,因此 Google 无法抓取您的网站。

    首先大家对robots.txt文件的作用都知道吧,蜘蛛首先要爬取你网站中的robots.txt文件,如果无法访问的robots.txt文件,那么你的网站就无法控制所有的蜘蛛抓取,像一些小有名气的爬虫,我们是可以避免让其爬行的,禁止的话,就需要在这个文件操作。那么我不想完好控制谷歌爬虫来爬取,而谷歌爬虫无法访问robots.txt文件,并且提示如下英文信息。

    现象描述:google提示:Unreachable: robots.txt Using a web browser, attempt to access http://www.fc2hermes.com/robots.txt. If you are able to access it from your browser, then your site may be configured to deny access to googlebot. Check the configuration of your firewall and site to ensure that you are not denying access to googlebot.

    查看错误记录:登陆你的谷歌站长工具,并选中你想查询网站的域名,左边的信息中心>>抓取>>Google抓取方式,内容如下图所示:r1 解决谷歌搜索引擎无法访问robots.txt文件方法 由于无法访问 robots.txt 文件,因此 Google 无法抓取您的网站。

    问题分析:这个是网站设置目标地理区域不同,导致google蜘蛛的IP地址无法访问到你的网站文件。
    解决方法:
    登陆你的谷歌站长工具,选中点你要设置的域名。
    然后在右上角“帮助”边上的齿轮点一下r2 解决谷歌搜索引擎无法访问robots.txt文件方法 由于无法访问 robots.txt 文件,因此 Google 无法抓取您的网站。,会出现“网站设置”,进去后,就可以看到“目标地理位置”,改成“香港”。如下图所示:r31 解决谷歌搜索引擎无法访问robots.txt文件方法 由于无法访问 robots.txt 文件,因此 Google 无法抓取您的网站。

    注:目标地理区域默认是美国,用户使用的是无忧主机香港空间,所以这个需要设置成“香港”即可,也可以选择大陆,这个主要看你的选择,因为谷歌在不同的地区有不同蜘蛛来爬去内容。更重要的是,谷歌在大陆的事件,做站长的都懂的,大陆就不太建议选择。大家可以尝试变更网站的区域,引导谷歌的蜘蛛来爬取网站。

    本文地址:http://www.51php.com/others/13086.html