Back to Question Center
0

Semalt 모든 로봇 robots.txt

1 answers:

로봇. txt 파일 내 사이트에서 색인을 생성 할 수없는 로봇의 목록이 있으며 나머지는 다른 모든 로봇을 허용해야하지만이 두 규칙 간의 실제 차이점을 알고 싶습니다.

  사용자 에이전트 : *
Disallow : 

  사용자 에이전트 : *
허용 : / 
4 days ago
Semalt 모든 로봇 robots.txt
Reply