众所周知，绝大多数网站都会有一个首选域名，从用户体验考虑，通常站长们还会另外解析一个域名，并设置 301 重定向。例如，用户未输入 www 的时候，仍然可以访问到我们的网站，就像访问 http://b
个别网站可能会出现以下类似困扰： ①、百度收录了自己不想收录的域名，造成内容重复，比如张戈博客，百度近一半的收录是 www 的域名，而且收录的内容还是重复的！实际上张戈博客的首选域名是不带 www，就算一开始就做了 301，也被百度无视了； ②、网站中途才设置的伪静态，收录正常后发现依然存在旧的动态链接，想删除之； ③、百度收录了虚拟主机自带的三级域名，想删除之； ④、网站改版，如精简分类数量、修改分类名称，造成了 url 死链，想删除之； 先具体说一下张戈博客是如何解决第①个困扰的： 前些天分享的《彻底禁
什么是seo，即为搜索引擎优化，目的是为了让网站做到更好的收录量，以及排名和提升流量，一个网站单有页面是不够的，必须去很好贴合搜索引擎做好规则，才能在各大搜索引擎取得很好的排名以及收录量，网站搜索引擎优化任务主要是认识与了解其它搜索引擎怎样紧抓网页、怎样索引、怎样确定搜索关键词等相关技术后，以此优化本网页内容，确保其能够与用户浏览习惯相符合，这样，你的网站获得展现量将会有着很大的提升。本人在seo领域摸爬滚打了很多年，总结了一些优化的方法，分享给你们，对你有帮助的话，记得收藏本站哦。
这个插件灵感起源是来自typecho的模板中，但是emlog却没有，于是就想着开发一个emlog版本的。这样一来也可以促进emlog文章的收录，也能让站长更好地了解文章是否被收录。
最近张戈博客收录出现异常，原因并不明朗。我个人猜测存在如下几个直接原因： 更换主题，折腾时带来过多错误页面或间歇性访问错误； 直接线上折腾 Nginx 缓存和缩略图，可能导致间歇性大姨妈； 新发文章瞬间被转载，甚至是整站被采集，可能导致“降权”； 百度居然开始收录动态页面，而且还在持续抓取动态页面。 对于前三个，已发生的已无法改变，要发生的也无法阻止。对于转载和采集，我也只能在 Nginx 加入 UA 黑名单和防盗链机制，略微阻碍一下了，但是实际起不到彻底禁止作用，毕竟整个天朝互联网大环境就是这样一个不好
发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/113888.html原文链接：https://javaforall.cn
一、真实IP：核心点在CDN上，CDN的存在是为了使用户的网络体验效果更佳，CDN是可以存放一些动态/静态页面的，但是价钱也会更高，同时可以部署WAF等，寻找的真实IP的思路就是绕过CDN，那么绕过CDN又有很多种方式： step1确定是否存在CDN，很简单，使用不同地方的 ping 服务，查看对应 IP 地址是否唯一，如果不唯一则极有可能是使用了CDN。 ping测试网站： 超级ping 爱站ping 国外ping有些网站不会在国外设置CDN 全球ping step2 绕过方式 1、查看网站的DNS历史解析记录，然后IP反查看能否解析出域名。也许目标很久之前没有使用CDN，所以可能会存在使用 CDN 前的记录 。 DNS解析 2、可能只会对主站或者流量大的子站点做了 CDN，而很多小站子站点又跟主站在同一台服务器或者同一个C段内，此时就可以通过查询子域名对应的 IP 来辅助查找网站的真实IP。 3、www有cdn，无3w没有cdn。 4、邮件服务器，通过对目标网站注册或者RSS订阅，查看邮件，寻找邮件头中的邮件服务器IP，ping这个邮件服务器域名，可以获得真实IP。 5、Nslookup查询看域名的NS记录、MX记录、TXT记录等很可能指向真实IP或C段服务器。
SEO诊断就是SEOer在对网站进行优化推广前，先要对网站本身的整体情况进行诊断，SEO诊断是网站优化推广的基础。SEO诊断是针对客户已经做好的网站，从搜索引擎优化技术策略角度分析都存在什么问题，以及应该如何改进，如何让网站更符合搜索引擎习惯，如何利用最少外链、最少时间、最少金钱快速提高网站关键词排名的一项服务。
俗话说，酒香不怕巷子深，可是对于我们写技术文章的小伙伴，酒香也怕巷子深呀，为什么呢？
全站被K无疑是让SEO们头痛的问题，网上很多都说全站被K需要稳定更新，持续发外链，其实这种方式微乎其微，可以说网站很难快速被搜索引擎重新检测到，当网站被K搜索引擎会将网站列入了黑名单，网站所有数据将从数据库中删除，这个时候稳定更新是不会有多大成效的。
各位小伙伴们好，从Apple宣布禁止http方式接入后，各大厂商紧跟潮流，Google，鹅厂，猫厂等也相继宣布仅支持https接入平台，相对应的，百度也给力的配合了一把，给予了很大程度的支持，对于内容性网站，之前会担心接入https后收录会存在减少的问题，确实也是，采用了https的网站之前收录相对来说会少很多，可是现在不用担心这样的问题了，百度站长平台也有了个洋气的名字——搜索资源开放平台，在搜索资源平台内的站点管理里有https站点验证按钮，相对于站长平台之前的https验证来说，新平台的验证可能更强大，因为个人感觉只要验证成功后，之前收录的所有链接都穿上了漂亮的https的“衣裳”。
这些工具各有特定的应用场景，但都是用来控制网站内部结构的，容易混淆，经常需要配合使用。SEO必须准确理解这些工具的机制和原理，否则容易出错。
什么是恶意搜索攻击？这种恶意搜索攻击，其实非常简单，就是通过既定的网址结构不断对网站发起不良关键词搜索访问，比如 WordPress 的搜索网址结构为 域名/?s=搜索词，而且可能还会顺便将访问的地址
之所以叫做简易优化指南，是因为emlog网站程序本身并不支持多么复杂的优化手段，比如说尽管5.0.0版实现了首页的网页标题和浏览器标题（也即title）分开设置，但栏目页和作者页还是老样子网页标题和浏览器标题只能一起弄。此外还有缺少二级分类支持啦、无法单独提取置顶和带图文章啦——修改数据库之类的主意就免了吧，可以的话咱尽量只动模板，实在不行稍微改动一下程序文件就够了。
概念 301 Moved Permanently 被请求的资源已永久移动到新位置，并且将来任何对此资源的引用都应该使用本响应返回的若干个URI之一。如果可能，拥有链接编辑功能的客户端应当自动把请求的地址修改为从服务器反馈回来的地址。除非额外指定，否则这个响应也是可缓存的。 新的永久性的URI应当在响应的Location域中返回。除非这是一个HEAD请求，否则响应的实体中应当包含指向新的URI的超链接及简短说明。 如果这不是一个GET或者HEAD请求，因此浏览器禁止自动进行重定向，除非得到用户的确认，因为请
百度：新网站收录慢，很多时候有一个漫长的考核期，没有收录自然就谈不上什么排名了，不过百度一旦开始被收录，是比较容易获得搜索引擎展现结果的排名和流量的。
宝塔服务器管理是现在非常流行的一款免费的Linux管理应用，作为不想做过多运维操作的可以使用这个可视化操作
影响搜索引擎排名8大因素： 1、服务器：即网站存储空间（是否被惩罚或稳定及速度） 2、网站导航结构 3、域名和文件名 4、网页标签的设置（Title、keywords、discription） 5、优秀网页的内容（一般都是伪原创） 6、关键词在网页中的密度（一般为2%~8%） 7、反链（友情链接及在论坛、贴吧、博客、知道发布的有关网站的连接都算） 8、robots.txt文件（这个是禁止搜索引擎收录的）
树形结构对大部分网站来说是最优化的，若是域名权重比较低，就算网站扁平，最终产品页还是权重过低，无法达到搜索引擎蜘蛛抓取的最低标准，这个时候可以考虑彻底改变树形结构了。
在做网站优化的过程中，我们非常明确一个事实，任何一个页面的排名，前提都是需要百度收录，虽然我们可以有大量的渠道进行百度网址提交，但如果你的URL，并不能符合百度收录的标准化，它就很难参与到百度收录的序列，因此，创建具有良好描述性、规范、简单的url，有利于用户更方便的记忆和判断网页的内容，也有利于搜索引擎更有效的抓取您的网站。网站设计之初，就应该有合理的url规划。
信息收集对于渗透测试前期来说是非常重要的，因为只有我们掌握了目标网站或目标主机足够多的信息之后，我们才能更好地对其进行漏洞检测。正所谓，知己知彼百战百胜！
由于GitHub Pages是拒绝百度爬虫爬取的，包括用Hexo或Jekyll搭建的博客，因此你的站点再怎么SEO优化，这在国内也是收录和搜索不到的。本文介绍的方案同大多数一样，利用DNS将国内的线路请求到Coding Pages，然后国外的线路还是走GitHub Pages。
当自己搭建了一个个人网站或者是商业性质的网站时,我们通常希望在百度等搜索引擎上可以直接搜索到,提高网站的曝光率和流量.
刚入门SEO都需要了解哪些SEO基础知识呢？今天，在这里给各位同学讲解下SEO基础入门专业词汇都有哪些，从新思考它们在我们实际操作中都有哪些用途及意义。 白帽SEO（White hat SEO） 1 白帽SEO是通过正规优化手法，来对网站进行优化，是符合搜索引擎优化的规则。它与黑帽SEO是相反，它是业界主流的优化手法，避免了一切风险进行操作的优化手法。虽然白帽SEO见效时间周期要长，但往往成功后，就可以稳定的带来流量，它也是SEO从业者最高道德标准。 黑帽SEO（Black hat SEO） 2 对于黑帽
在国内，网站管理者似乎对robots.txt并没有引起多大重视，应一些朋友之请求，今天想通过这篇文章来简单谈一下robots.txt的写作。
有很多博客站长都经常问明月如何申请 Google AdSense 账号获批通过，明月的 AdSense 账号申请的太久了，久到我已经回忆不起来细节了，所以能给大家提供的帮助非常的少，今天在【多思多金】博客发现了好多高质量的有关 AdSense 文章，我就借花献佛节选了部分内容分享给大家，明月强烈建议大家抽空到【多思多金】博客的"AdSense 文章专辑"里多阅读一些，里面还有不少通过 AdSense 提高收入的实践技巧哦！
我们要知道一个网站有多少访问量除了其它因素之外，跟一个好的域名也是有很大的关系的。特别是对喜欢通过域名直接打开网站的用户来说就显得更为重要。但是关于域名被人恶意解析的事件也是时常发生，域名被恶意解析轻
Robots协议(又称爬虫协议、机器人协议等)全称为网络爬虫排除标准（Robots Exclusion Protocol），是国际互联网界通行的道德规范，Robots是站点与spider重要的沟通渠道，网站通过robots告诉搜索引擎哪些页面可以捕获，哪些页面不能捕获。其目的是保护网站数据和敏感信息，确保用户的个人信息和隐私不受侵犯。搜索引擎需要自觉遵守，因为它不是命令。
在一些类似验证网站所有权的场景下，需要配置二级目录映射静态文件。比如提交Google收录时，需要将Google提供的页面上传到网站。
对于做国内站的我来说，我不希望国外蜘蛛来访问我的网站，特别是个别垃圾蜘蛛，它们访问特别频繁。这些垃圾流量多了之后，严重浪费服务器的带宽和资源。通过判断user agent，在nginx中禁用这些蜘蛛可以节省一些流量，也可以防止一些恶意的访问。
最近有朋友询问：用谷歌site你的站发现Google没收录你的tag页，我的怎么？有还大部分是 ？站长认为，很多新手估计都不明其中的道理，索性就写篇文章吧。
第一选择域名：新域名优化方法。找一个5年老域名做引导。 老域名购买选择4年以上的最好 第二查询域名历史记录《注册局屏蔽的域名不要，红了的域名不要。》《历史收录有棋牌菠菜等的不要》
现在很多的人在建设网站的时候会选择用一些老域名，老域名也就是曾经被用过的网站，也曾经被各种搜索引擎收录其中。搜索引擎对老域名网站有一定的记忆，所以选择用老域名建站的话，对于很多站长来说是一个便捷的选择。可是有些网站建设者却发现了一个问题，用旧的域名建设的网站，搜索引擎却不收录网站，为什么旧域名建设的网站不收录呢？
域名后缀是指不同结尾的域名，百度官方工作人员曾在百度站长大会中明确，使用何种形式的域名后缀对百度网页搜索没有影响，但域名后缀也需要考虑方便用户记忆，域名后缀会间接影响网站收录排名。
最近我发现搜索引擎收录了很多“夏末浅笑博客”的重复页面，当然了这跟我前一段时间，将站点根目录下的Robots.txt文件删除掉有直接的关系，Robots.txt文件是一个用来告诉搜索引擎执行Robots协议的文件，我们将Robots协议写在Robots.txt文件里面，告诉搜索引擎我的网站哪些页面可以收录，哪些页面不可以收录。
通常做网站的目标就是让搜索引擎收录，扩大推广面，但是如果你的网站涉及个人隐私或者机密性非公开的网页而需要禁止搜索引擎收录抓取的话，该如何操作呢？比如淘宝网就是禁止搜索引擎收录的一个例子，本文将教你几种做法来实现屏蔽或禁止搜索引擎收录抓取网站的内容。
robots.txt 文件规定了搜索引擎抓取工具可以访问网站上的哪些网址，并不禁止搜索引擎将某个网页纳入索引。如果想禁止索引（收录），可以用noindex，或者给网页设置输入密码才能访问(因为如果其他网页通过使用说明性文字指向某个网页，Google 在不访问这个网页的情况下仍能将其网址编入索引/收录这个网页)。
# 本文已被官方文档收录https://cloud.tencent.com/document/product/400/71710
以前总是说，怎样让搜索引擎收录我们的网站，如何让搜索引擎带来流量，但是总有小伙伴不走寻常路，或者这种不寻常路是对的，百度为什么不收录我的网站呢？我也提交了啊，也有外链啊，也有实质性的内容啊，也没屏蔽“蜘蛛”啊。今天我们就来稍稍分析下呗，或许有的小伙伴还指望网站不被收录呢。我们主要说说百度的，其它搜索引擎也是大同小异的。
你是否发现，你买的域名不论如何写原创百度就是不给收录。你是否发现，你买的域名不论如何学优化做优化站长之家就是没收录。一个月过去了，首页不收录。两个月过去了……7个月过去了……大哥，沙盒期才多久，7个月了！真不是你文章不行，也不是你能力不行，是域名不行。一定要选择com域名，如果不懂SEO优化，千万别贪便宜选择别的域名。大多数人刚开始认为瞎玩玩，没必要买com域名，但是当你把所有的精力放在LaJi域名上，后期更换com域名会很麻烦，甚至不想换。大多数人都如果买了xyz、top域名，7个月后发现域名不行，会想:”已经花了这么长时间这么多心思在上面，域名还是不换了吧，将就着用吧。”人不能将就，有些事一旦开始了，真的停不下来。
最近，群里又讨论到了关于插件数量的问题，张戈博客的插件不多不少，正好 9 个。个人认为这些插件是目前博客所必需的，或者功能性价比很高的，下面就来晒一晒： 一、SEO 相关 ①、DX-SEO(已用代码替
前言: 在做网站优化时候，网站上线一个月、三个月、甚至更久，都没有很好的收录或者不收录，站长朋友应该都知道，新站上线，百度都会有3个月的扶持期，若3个月的实习期过了依旧没有百度收录那就要检查一下你的网站是否出现下面这些问题了。
1、什么是一级域名？ 一级域名又称为顶级域名，需要注意的是,www.baidu.com这种形式的域名并不是一级域名，它只是一个二级域名，也就是说www只是一个主机名。 真正的一级域名是由一个合法字符串＋域名后缀组成。所以，baidu.com这种形式的域名才是一级域名。baidu是域名主体，.com是域名后缀。可以是.net域名后缀，也可以是其他的域名后缀。 2、什么是二级域名？ 所谓的二级域名实际上就是一个一级域名下面的主机名。顾名思义，他是在一级域名前面加上了一个字符串，比如asdx.iisp.com.，
五一假期如约而至，在此致敬还在一线抗疫的医务人员和志愿者，祝大家五一快乐，愿疫情早日退散！ ???? 既然是节日，就gei大家送点礼物吧～ ???? XG域名防红系统，也算是广告发的比较多的一个域
基于网站安全与盈利的因素，站长并不希望某些目录或页面被抓取和收录，比如付费内容、测试阶段的页面及复制内容页面等。
要知道WordPress robots.txt文件中的“Disallow”命令与页面头部的元描述noindex 的作用不完全相同。您的robots.txt会阻止抓取，但不一定不进行索引，网站文件（如图片和文档）除外。如果搜索引擎从其他地方链接，它们仍然可以索引您的“不允许爬取”的页面。
很多人建好新网站了之后，想要提高网站的流量，所以就会去各家的收录控制台去申请收录，但是结果都不尽人意，都没有收录。那么我们如何让我们的新网站快速且有效被收录呢？
企业推广自己的业务，大部分情况都需要建立一个官方网站，并且希望能够从搜索引擎获得一部分自然流量。网站&内容运营的第一步自然是做好网站的收录，毕竟首先需要被收录了才能进一步去优化排名，目前国内主流的搜索引擎包括百度、360、搜狗、BING、Google等，那么有什么很好的办法去查询网站的收录呢？
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
