信科网络 · 11 年只做 WordPress | 建站 / 主题 / 插件 / 商城 / 迁移 / 托管 | 累计服务 3000+ 企业 | 源码全交付
服务热线:13280692153 邮箱:web@wordpressx.com
工作日 08:30-18:0013280692153 免费诊断
首页/WordPress 教程/禁止用户直接访问robots.txt,只允百度等搜索引擎访问
BLOG

禁止用户直接访问robots.txt,只允百度等搜索引擎访问

分类 发布 2023-02-02
location = /robots.txt {
if ($http_user_agent !~* “spider|bot|yahoo|sogou”) {
return 404;
}
}

很多时候robots.txt 包含了很多信息,有些安全软件把robots当漏洞来处理,实际上这个算不上漏洞,充其量是因此泄露而已!
以下代码是禁止直接访问,但匹配并排除搜索引擎蜘蛛

nginx站点配置文件中加入以上节点

禁止用户直接访问robots.txt,只允百度等搜索引擎访问
INDUSTRIAL BELT

扎根中国制造产业带
懂工厂,才懂出海

从胶东半岛到珠三角,从长三角到中原腹地,每一片产业集群都有自己的出口节奏与买家画像。信科网络长期扎根产业一线,把工厂的产品语言翻译成海外采购商听得懂的搜索语言,让每一分投入都对着真实的询盘去。

bishan

璧山外贸网站建设

璧山县位于重庆市以西,东经106°02’至东经106°20’,北纬29°17’至29°53’。东西宽15.5公里,南北长66.5公里,县域面积915平方公里。东邻沙坪坝、九龙坡;南界江津;西连…

shapingba

沙坪坝外贸网站建设

沙坪坝区,隶属重庆市,是重庆主城区,重庆大都市区。位于重庆市西南部,东滨嘉陵江与江北区、渝北区相邻,东南与渝中区接壤,东北与北碚区相连,南与九龙坡区相靠,西抵缙云山接璧山区,紧邻…

kaizhou

开州外贸建站

开州区隶属于重庆市,位于重庆市东北部,三峡库区小江支流回水末端,介于北纬30°49′30″-31°41′30″、东经107°55′48″-108°54′之间,西邻四川省开江县,北依大巴山接城口县和四川省宣汉县,东毗云…

zhongwei

中卫外贸建站

中卫地处黄河前套之首,位于宁夏回族自治区中西部、宁、甘、内蒙古三省区交界点上,辖中宁、海原两县和中卫城区,总面积16986.1平方公里,其中川区面积3681.1平方公里,占21.67%,山区面积1330…

cangxian

沧县WordPress建站

沧县位于河北省东南部,冀中平原东部,北冀京津,东邻渤海,地理坐标在北纬38°5′至38°3′,东经116°27′至117°9′之间。县政府驻沧州市新华区,全县总面积1527平方公里,其中耕地面积129万亩,总…

xingqing

兴庆WordPress建站

金凤区于2002年11月1日成立,是宁夏回族自治区首府银川市的市辖区之一,位于市区中部,东到唐徕渠,西到包兰铁路,南接永宁县,北临贺兰县,辖良田、丰登2个镇,上海西路、北京中路、长城中路…

shizuishan

石嘴山Shopify建站

石嘴山市是宁夏回族自治区直辖市。石嘴山因黄河两岸“山石突出如嘴”而得名。他西依贺兰山,东濒黄河,北连内蒙古自治区,南临宁夏回族自治区首府银川。面积4454平方公里,人口67万。1960年建市,1…

xixia

西夏Shopify建站

西夏区是宁夏回族自治区银川市的一个市辖区,位于银川市西部,地理坐标东经105°49′~106°18′,北纬38°08′~38°52′。西夏区东起包兰铁路,西至贺兰山口轴线(宁蒙界),南临永宁县,北接贺兰县,…

yunyang

云阳外贸推广

云阳县地处东经108°24′-109°14′,北纬30°34′-31°27′。位于重庆市东北部,长江三峡工程库区腹心地带。东与奉节县相连,西与万州区相接,南与湖北省利川市相邻,北与开县、巫溪县为界。县境东…

yongning

永宁外贸推广

永宁县地处宁夏平原中部,东临黄河,西倚贺兰山,是宁夏回族自治区首府银川市的郊县。全县国土面积1020平方公里,辖五镇一乡一个街道办事处,总人口20.4万人,有汉、回、满等13个民族,其中回…

wuyi

武邑Google SEO

武邑县位于河北省中南部。总面积830.1平方千米。总人口31万人(2004年)。武邑县位于华北平原的河北省中南部,所辖6镇3乡,545个行政村。据第五次人口普查统计,总人口31.95万人,其中汉族3194…

yongchuan

永川Google SEO

永川区位于长江上游北岸,重庆西部,东邻江津区,东北靠壁山县,北界铜梁县,西接荣昌县,南与四川省合江县、泸县接壤。地处东经105°38′~106°05′、北纬28°56′~29°34′。幅员面积1576平方公里…

dianjiang

垫江GEO优化

垫江,地处重庆市中部,“上接巴渝之雄,下引蘷巫之胜”,占据渝北咽喉,区位优势突出。幅员面积1518平方公里,总人口85万人。历史悠久,文化昌达。自西魏恭帝2年(公元555年)置县至今1400多年…

tongxin

同心GEO优化

同心县位于宁夏回族自治区中南部, 隶属吴忠市管辖。地理东与盐池县、甘肃庆阳市环县接壤,南与固原市原州区毗连,西与中卫市沙坡头区、中宁县、海原县为邻,北与吴忠市红寺堡区交界,地处鄂尔…

chengkou

城口谷歌SEM

城口县位于重庆市东北边缘,地处四川省、陕西省、重庆市三省(市)交界处,地理坐标为东经108°15′—109°16′、北纬31°37′—32°12′。县境东北与陕西省镇坪县、平利县、岚皋县、紫阳县接壤;南与重…

fengjie

奉节谷歌SEM

奉节县位于重庆市东部,地处四川盆地东端,地理坐标为东经109°1′17″—109°45′58″,北纬30°29′19″—31°22′33″。县境东邻巫山县,南界湖北省恩施土家族苗族自治州,西连云阳县,北接巫溪县。境内有…

beibei

北碚Facebook广告

北碚区位于重庆市区西北郊的缙云山下,嘉陵江畔,幅员面积753平方公里,人口63万,是重庆的风景旅游区和智力型清洁工业基地。本世纪20年代末,由爱国实业家卢作孚先生开拓,抗战时期为陪都重庆…

hongsibao

红寺堡Yandex推广

宁夏吴忠市红寺堡区前身为红寺堡开发区,是宁夏回族自治区吴忠市第二个市辖区。它是国家大型水利枢纽工程——宁夏扶贫扬黄灌溉工程(“1236”工程)的主战场,是全国最大的生态扶贫移民集中区,200…

jiangjin

江津Yandex推广

重庆市江津区,是一个历史文化悠久的城市,以地处长江要津而得名。江津位于重庆西南长江之滨,距渝中区公路里程50公里;铁路里程65公里;水路里程72公里。江津城区气候特征与重庆相近,但综合…

pengshui

彭水TikTok推广

彭水苗族土家族自治县位于重庆直辖市东南部,处武陵山区,居乌江下游。北接湖北省,南连贵州省。全县辖10镇29乡,共274个村、26个居委,1785个村民小组、184个居民小组。2001年底,全县有17.55…

为什么一定要选懂产业带的出海服务商?建材丝网的欧洲建筑商看资质与交期,工业橡塑的中东工程商问耐温与工况,毛皮服饰的俄罗斯分销商算的是季节与毛利。买家不同,决策逻辑就不同;信科网络把这些差异拆进网站结构、关键词地图和投放策略里,用他们习惯的方式出现在他们搜索的地方。