在百度站长平台里，有一个抓取诊断页面，这个页面可以提交链接，提交后百度蜘蛛可以实时来访问，或许可以带来抓取频次的增加。但是每周只能提交70个链接。对于单个域名提交有限制。如果我们有大量的二级域名或者泛域名进行批量自动化提交，那效率都提升了，也许蜘蛛量也能大幅增加。这次做了一个自动化诊断工具，可以多线程批量自动化提交诊断链接。
演示视频
软件界面如下，可以设置打码方式、cookies、站点路径、线程数量，可以进行自动化的提交。打码方面支持云码、图鉴和我个人的识别接口。
cookies批量设置多条，一行一条，软件会循环读取cookies中已经绑定好的域名，并进行诊断提交。
site.txt放入已经绑定好的域名，一行一个，这里软件可以多线程批量读取每一行站点进行自动提交
tsgz.txt中放入要诊断提交的链接，这里支持泛目录，{字母5}，{数字5}html等格式进行泛提交。不过每个域名放70条链接就行了。因为每周只能提交70条链接。
然后软件就可以开始运行了
此次主要是将python生成的sitemap文件，转入到flask做出的api接口上，这样每次进行api请求就可以获取到网站的所有的url并生成sitemap文件。首先看看运行效果。本地地址请求接口url：http://127.0.0.1:5100/sitemap?site=http://www.s...
国庆祝福祖国生日快乐。偶尔间，想做做视频剪辑，需要下载视频素材，但是在平台上的视频似乎不支持手动下载。自然学了python，可以试着用代码去下载视频，在这块找到相应的教学内容，本次内容主要是分享用python如何去获取下载某讯视频。下面为大家讲解一下。就拿最近比较火的昆仑神宫来做下视频解析下载，首先...
平时我们发邮件时，如果用网页端发送邮件那么就需要登录，登录之后需要手动进行邮件发送的一些操作。如果我们用python逆向登录后，就可以在用接口模拟网页进行邮件的发送。问题主要是解决逆向登录，那么后面发送只要保持cookie就可以调用接口发送了。下面讲解一下逆向登录原理。首先是登录企业邮箱网页地址然后...
如果用程序持续查关键词排名的话，肯定会遭遇百度反爬机制，反爬手段就是旋转验证码，需要过了旋转验证码才可以继续爬取，在之前已经逆向解决了旋转验证码，那么查询排名就可以持续性自动化进行。如果不过旋转验证码，那么就要买大量的代理ip去替换ip查询，而且这种做法查询过程中也会遇到反爬，并且查询速度收代理ip...
python多线程有两种，一种是多进程，另一种是多线程，对于线程基础知识层面，线程运行在进程中，一个进程可以有多个线程，而多线程只能在一个进程中运行。所以在多线程并发运行的同时，开启多进程进行并行操作。这样就可以最大化的利用计算机cpu的内核。需要源码的可以在我的商城获取>>>百度...
3个月前 (07-21)
3个月前 (07-17)
3个月前 (07-15)
3个月前 (07-14)
3个月前 (07-13)