在nginx中从robots.txt重定向到robots.php

文章/答案/技术大牛

发布

1回答

php、nginx、redirect、centos、robots.txt

我在nginx中使用CentOS7。为此我需要动态robots.txt，我尝试使用从robots.txt到robots.php的重定向。但是如果是site.com/robots.txt，我会看到robots.php文件中的文本，如果是site.com/robots.php，我会看到运行这个程序的结果。我如何修复site.com/robots.t

浏览 18提问于2021-02-26得票数 0

1回答

.htaccess OnRewriteRule保持相同的扩展

.htaccess

在我的.htaccess文件中，我有以下内容：RewriteRule ^robots.txt http://domain.com/directory/robots.php[R=301,L] 上面的代码将robots.txt请求重定向到robots.php。

浏览 0提问于2012-05-04得票数 0

回答已采纳

3回答

如何从google索引中删除链接到主域的子域

subdomain、cdn、google-index

谁能告诉我如何从谷歌索引删除子域，这链接到主域。假设我的域是www.myweb.com，我的子域是cdn.myweb.com。现在，子域的Document Root与主域相同。我也在谷歌、必应和stackoverflow上搜索，但我找不到这个问题的完美答案。你这边有没有解决的办法？

浏览 0提问于2013-02-10得票数 2

回答已采纳

2回答

在Yii框架中使用robots.txt

php、oop、yii、robots.txt

robots.txt文件是只应用于目录文件夹，还是可以应用于OOP中的视图？我没有成功地将它应用于Yii中的实际视图路径(网址)或urlManager路径(网址)。

浏览 0提问于2012-03-26得票数 0

1回答

供应商已进行重构并删除所有php文件，并将所有调用重定向到index.phpRewriteRule ^dbeS/(.*)\.php$ dbeS/index.php?.htaccess工作正常，因为如果我在<IfModule mod_rewrite.c>中粘贴Test.，我会收到500个错误。但是这个人不想从apache迁移到nginx 示例:必须调用https://example.com&#

浏览 0提问于2021-07-02得票数 0

8回答

动态robots.txt

seo

每个线程都有自己的页面，但是所有的线程都列在同一个文件夹中，所以我不能将搜索引擎排除在某个文件夹之外。必须是每页。一个传统的robots.txt文件会变得很大，所以我如何才能做到这一点？

浏览 31提问于2008-09-04得票数 10

回答已采纳

1回答

[NGINX]无法使用proxy_pass和robots.txt

nginx、robots.txt

我在NGINX后面运行Kibana，我想添加一个robots.txt。我将robots.txt添加到/var/www/example.com，但无论我怎么尝试，当我访问example.com/robots.txt时，它都会重定向到Kibana。/example.com/; if ($request_uri ~* "^/robots.tx

浏览 20提问于2019-09-09得票数 1

回答已采纳

1回答

Django nginx和附加斜杠问题

django、apache、nginx

如果我让apache监听nginx，我的urls就会中断。# Nginx conf (/etc/ng

浏览 3提问于2010-10-21得票数 1

回答已采纳

2回答

生成一个动态的robots.txt，但系统是附加正斜杠的

htaccess、seo、robots.txt

我正在动态地创建robots.txt，而不是创建物理robots.txt文件。我是从CMS和系统是附加一个正斜杠的每一页。在robots.txt的例子中，我编写了.htaccess代码，以便从mysite.com/robots.txt重定向到mysite.com/robots.txt/。以这种方式进入robots.txt会有什么问题吗？

浏览 0提问于2014-04-25得票数 1

1回答

将robots.txt从http重定向到https

.htaccess、redirect、mod-rewrite

我需要将我的robots.txt从http重定向到https in .htaccesshttp://spb.example.com/robots.txt to https://ekb.example.com/

浏览 3提问于2021-10-12得票数 0

2回答

Nginx一直在无限地重定向

ssl、redirect、nginx

我遵循设置nginx将所有非www请求重定向到www，但是当我试图访问任何页面时，我一直在浏览器中获取ERR_TOO_MANY_REDIRECTS。我的目标有两个： upstream mywebsite_proxy { server unix:/home/dep

浏览 2提问于2017-05-25得票数 0

2回答

使用.htaccess将.html重定向到.php

php、mod-rewrite

我在我的服务器的“/my_template.php/”目录中创建了一个“home”，并在我的模板目录中创建了另一个"2012_orange.php“文件，其中”包含“来自"/home/”的"my_template.php我的目标是让我在"/home/“目录中的"my_template.php”文件用于控制5个不同站点的布局，但是我不知道如何让特定的.html文件调用.php。我使用下面的代码对我的

浏览 2提问于2012-12-23得票数 0

1回答

如何在使用Easy Engine创建的WordPress安装中使用Nginx将所有非www重定向到www

wordpress、.htaccess、redirect、nginx

我需要在wordpress / nginx中配置重定向的帮助。但不幸的是，到目前为止还没有一个起作用。我不知道会发生什么。我使用安装Nginx的Easy引擎在来自Digital Ocean的Ubuntu 16.04.2 64x服务器上进行了安装。安装出来完美了，这一切都是funcionano，而不是在我的WordPress中重定向不是www。我想知道

浏览 1提问于2017-05-04得票数 0

1回答

robots.txt可以重定向到不同的域吗？

seo、301-redirect、web-crawlers、robots.txt

我想知道是否可以将301重定向到robots.txt文件中，并将其托管在不同的位置。我想把它放在云层上。示例：https://www.mydomain.example/robots.txt重定向到https://differentdomain.example/example/robots.txt

浏览 0提问于2020-03-11得票数 4

2回答

我可以将robots.txt放在上下文路径中并提供301重定向吗？

http-status-code-301、robots.txt

robots.txt可以在www.example.com/abc/robots.txt上找到，我在webserver中给出了301重定向，将www.example.com/robots.txt重定向到www.example.com/abc/robots.txt。我的问题是，搜索引擎是否能够读取robots.txt文件，因为它有301重定向</

浏览 3提问于2017-04-06得票数 0

6回答

我可以在iframe标签中添加rel nofollow吗？

iframe、seo

我有一个窗口小部件分布在一些网站通过iframe。但我不想让google bot索引url。在iframe标签中添加nofollow能解决这个问题吗？Iframe tag支持nofollow吗?

浏览 8提问于2012-09-27得票数 5

回答已采纳

1回答

PHP -用于读写TXT文件的函数

php、wordpress

我正在WordPress上创建一个函数来获取robots.txt文件的内容。如果该文件不存在，则使用默认内容创建它。我会用它作为我的选项页。'robots.txt'; //The robots file.在else之后。我也不确定有什么权限。需要777吗？WordPress根目录的默认设置是744吗？提前谢谢。

浏览 6提问于2014-07-17得票数 1

回答已采纳

2回答

移动到新域时重定向robots.txt

seo、redirects、search-engine-indexing、robots.txt

除了robots.txt之外，我已经成功地将所有内容重定向到新域。我的问题是，是否需要用301号重定向将olddomain.com/robots.txt重定向到newdomain.com/robots.txt？这种情况有什么共同的做法吗？

浏览 0提问于2017-06-09得票数 7

回答已采纳

2回答

不允许重定向的Python请求

python、web-scraping、python-requests、request

我正在使用Python库来从URL列表中刮取 robots.txt数据： url = urllib.parse.urljoin(url, "robots.txtexceptions.RequestException, exceptions.HTTPError, exceptions.Timeout) as err:在我的urls列表中，我有一个网页：。当我请求时，我被直接<em

浏览 4提问于2021-11-14得票数 0

5回答

如何将nginx配置为重定向到robots.txt* & sitemap.xml的url*

nginx、robots.txt

我运行nginx 0.6.32作为couchdb的代理前端。我的robots.txt在数据库中，可以作为访问。我也有我的sitemap.xml，它是动态生成的，在一个类似的url上。example.com; if ($request_method = DELETE) { } rewrite ^/<em

浏览 4提问于2009-07-07得票数 22

回答已采纳

点击加载更多