当前位置:首页 > 网络科技 > WordPress防采集最佳办法和解决思路

WordPress防采集最佳办法和解决思路

1年前 (2024-08-26)admin网络科技35

要想防止网站被恶意采集,那么就需要了解大多数的采集方式和规则,这样才能够反其道而行之的去屏蔽和防采集,有时候我们辛辛苦苦写的一些文章或者大批量的文章内容成为了别人的嫁衣,同时别人采集还增加服务器负担,想想就觉得不值得啊。

子凡我之所以决定要做这个防采集的想法有很久了,是因为前段时间有个网站不断的换 IP 来采集我们泪雪网的问答内容,我禁用一个 IP,他换一个 IP,我后来把那个地区所有的 IP 段都屏蔽了,这才基本到止为止。我这么忙的人总不能每天把时间都花在去看服务器 IP,去屏蔽 IP 这件事情上吧?

于是终于下定决心来做这件事情了,以前是想通过随机给 WordPress 正文内容中插入网站名称的字词,然后通过内链样式隐藏,但是这样别人依旧能把内容采集过去,所以也迟迟没有这样做,后来突然反应过来,采集最重要的就是采集规则,而想要更好的采集就需要获取到文章列表,这下子就很好做了。

简单的来科普一下,采集时大多数人都是根据文章栏目和列表获取采集文章的 URL 链接,所以最重要的就是翻页,这也是几乎所有网站暴露网站所有文章的一种方式,那么最简单的解决办法就是让网站列表不能无止境的翻页,这样就算能采集几十篇的内容,也无法把整站的内容都采集走了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
//WordPress 禁止翻页屏蔽/防采集
add_filter('pre_get_posts','fanly_basic_query_posts');
function fanly_basic_query_posts($wp_query) {
	if($wp_query->is_admin || !$wp_query->is_main_query()) return;
	if ($wp_query->is_home || $wp_query->is_archive || $wp_query->is_search) {
		$paged = 10;//超过 10 页后就显示 404
		if($paged && $wp_query->get('paged') > $paged){
			//404 页面
			$wp_query->set_404();
			status_header(404);
			nocache_headers();
			include(get_query_template('404'));//需要主题的 404.php
			die();
			//404 页面
		}
	}
}

把以上代码复制放到当前主题的 functions.php 文件中,就可以实现当 WordPress 翻页超过 10 页后就会调用 WordPress 主题的 404 页面,可以通过修改代码的 paged 参数值修改翻页数量来自定义。

代码中会对所有的列表页面都生效,首页、文章归档(分类、标签、日期)、搜索页面等都一视同仁,还可以根据自己需要添加判断,根据不同的列表做不同的限制,子凡这里就不展开分享了。

另外如果你的翻译使用的是 get_next_posts_link(string $label=null, int $max_page) 来翻页下一页,还可以通过设置最大翻页来避免出现翻页死链的情况出现。

别看上面代码行数多,其实 404 页面那整段可以直接使用跳转到首页,甚至直接使用 die 结束,我这里分享只是为了漂亮的结束为 404 页面而已。

如果为了更好的防止 WordPress 被采集,那么还可以针对 feed、站点地图 sitemap 等方面做屏蔽,因为 WordPress 的翻页都有 page 参数所以还可以服务器屏蔽路径的方式。让采集获取不到网站完整的列表链接基本就能防止很大一部分采集。

由于我们 WordPress 交流群有人在问具体的栏目自定义屏蔽页数怎么办,所以就再来稍微修整一下,一下代码中的数字“10”就是可以自定义的,根据后面的备注修改就可以了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
//WordPress 禁止翻页屏蔽/防采集(自动版本)
add_filter('pre_get_posts','fanly_basic_query_posts');
function fanly_basic_query_posts($wp_query) {
	if($wp_query->is_admin || !$wp_query->is_main_query()) return;
	$paged = $wp_query->get('paged');
	if (($wp_query->is_home && $paged > 10)//首页
		|| ($wp_query->is_category('news') && $paged > 10)//指定分类
		|| ($wp_query->is_category && $paged > 10)//分类
		|| ($wp_query->is_tag && $paged > 10)//标签
		|| ($wp_query->is_author && $paged > 10)//作者
		|| ($wp_query->is_archive && $paged > 10)//归档
		|| ($wp_query->is_search && $paged > 10)//搜索
	) {
		//404 页面
		$wp_query->set_404();
		status_header(404);
		nocache_headers();
		include(get_query_template('404'));//需要主题的 404.php
		die();
		//404 页面
	}
}

好啦,以上就是子凡针对 WordPress 防采集提供的一段代码,自我感觉最实用最佳的防止采集的办法及解决思路,如果你有更好的解决方法,欢迎留言告诉我。

更多关于WordPress优化及疑问可以添加留言

w.haolusi.com

本文链接:https://w.haolusi.com/wordpress-prevent-acquisition.html

扫描二维码推送至手机访问。

版权声明:本文由豪鲁斯兴趣网发布,如需转载请注明出处。

本文链接:https://w.haolusi.com/?id=1777

标签: WordPress优化
分享给朋友:

“WordPress防采集最佳办法和解决思路” 的相关文章

百度正式下线“快速收录”功能,VIP可以申请“快速抓取”权限

百度正式下线“快速收录”功能,VIP可以申请“快速抓取”权限

最近可以说是站长们一片哀嚎,清明节前刚经历一次大的波动恢复没两天,让后百度又一次性的在清明节再次送走了,目前又开始缓慢的在恢复,但是似乎情况也并不是很妙。就在这时,百度搜索资源平台发布了一则“关于升级平台「快速收录」工具的通知”的公告,意思就是正式下线快速收录功能,换新上线一个叫做“快速抓取”的工具...

WordPress如何移除登录界面中英文语言切换框

WordPress如何移除登录界面中英文语言切换框

其实早在 WordPress 5.9 版本开始,WordPress 默认登录界面就增加了语言切换选项, 其目的就是允许用户自己选择要使用的语言登录后台。这个功能对于多语言网站或是国际性站点可能还有点用,但是对于国内用户来说就显得有些多余。最近子凡在做更深度的 WordPress 优化,同时也为了丰富...

MYSQL字符集有哪些

MYSQL字符集有哪些

MySQL 中的字符集是用来确定数据库中字符数据的编码方式,它决定了如何存储和检索数据。MySQL 中常用的字符集:UTF8:UTF-8 是一种 Unicode 字符编码方式,它可以表示世界上大部分的文字字符。MySQL 中的 UTF8 字符集最多只能存储 3 字节的 UTF-8 编码字符,...

百度搜索资源平台恢复低质量网站添加管理

百度搜索资源平台恢复低质量网站添加管理

前些天看到新闻消息称百度 10 年老将赵世奇已离开华为回流百度,并且将负责 AI 技术在百度搜索业务方面的产品创新。而今天子凡我通过百度搜索资源平台抱着试一试的态度去添加我们的 TearSnow 泪雪官网,出乎意料的居然能够通过验证并且成功添加上,不会提示“该站点为低质站点,暂不可添加,...

YouTube 油管订阅人数最多的 30 名个人|2024 年第二季度|The 30 Most-Subscribed YouTube Individuals 2024 Q2

YouTube 油管订阅人数最多的 30 名个人|2024 年第二季度|The 30 Most-Subscribed YouTube Individuals 2024 Q2

本篇文章目录|Table of Contents Hide谁是订阅人数最多的 YouTuber?2024 年 6 月订阅人数最多的 30 位 YouTube 博主订阅人数最多的 12 位 YouTube 用户是谁?1.MrBeast2. Like Nastya3.PewDiePie4.Ju...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。