반응형
robots.txt 파일에 아래와 같이 쓰면 검색엔진 크롤링을 차단할 수 있습니다.
User-Agent : *
Disallow : /
https://prettycode.tistory.com
반응형
'기타' 카테고리의 다른 글
| 티스토리 open api 클라이언트 등록하기 (0) | 2018.04.01 |
|---|---|
| VirtualBox로 ie10 테스트 하기 (2) | 2018.02.17 |
| kt 에그 단말기 비교 (0) | 2018.01.30 |
| ie11 user agent (0) | 2018.01.28 |
| 다음 주소 api https (0) | 2017.11.29 |
| 윈도우 탐색기 - 폴더가 항상 위에 있도록 정렬하는 방법 (6) | 2017.11.25 |
| ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2) (0) | 2017.11.05 |
| 쿠쿠밥솥 10인용 비교 (0) | 2017.09.15 |