5robots.txt已经屏蔽了蜘蛛抓取，为什么还是会搜到网站，求大神帮忙看看

Copyright © 2020-2024 深圳市皓思网络咨询有限公司 版权所有   粤ICP备2021082508号
联系电话： 18038053817   E-mail：3354851267@qq.com
公司地址：深圳市宝安区西乡街道龙腾社区西乡大道230号满京华艺峦大厦3座1001
主营业务：旅游行业代运营、旅游行业抖音推广、旅游行业直播、旅游行业百度竞价托管
友情链接： 旅游网站代运营 广州市佰中杰网络科技有限公司 3友链带https和带http影响大吗？