robots.txt 파일은 사이트의 루트 폴더에 위치하게 됩니다. robots.txt 파일이 없으면 컴퓨터에서 robots.txt 파일을 하나 만들어 FTP를 통해 업로드할 수 있습니다. (FTP를 사용하는 방법은 여기를 참고해보세요.)

그런데, 워드프레스 사이트빌더로 구축한 사이트에서, 이해가 안되는 현상을 직면하게 되었는데, 구글 서치 콘솔에서 살펴보면 워드프레스로 만든 사이트도  robots.txt가 존재하고 그 내용을 볼수도 있는데, ftp로 들어가 보니 워드프레스로 만든 사이트는 루트디렉토리에서 Robots.txt 를 찾을 수 없었습니다. 분명히 어딘가에 있는데 경로를 찾지 못하는 것으로 보입니다.  워드프레스 블로그에 robots.txt 설정 하기 을 살펴보니 , 저와 같은 경험을 하는분들이 있다는 것을 확인할수 있었습니다.

워드프레스의 강점, WP Robots Txt 플러그인으로 이문제를 해결할 수 있습니다.

WP Robots Txt plugin 플러그인

• 이 플러그인은 잘 작동하나 robots.txt를 수동으로 작성하여 ftp로 올린 경우, 작동하지 않습니다. ftp로 접속하여 robots.txt 파일을 수동으로 삭제하거나 아래의 file manager 플러그인을 설치하고 수동으로 작성한 robots.txt 파일을 삭제한 후 이 플러그인을 이용해주세요.
• 24.3.6 memo : 이 플러그인은 평소에 잘 작동되었는데, www.food-ai.kr에서는 잘 작동하지 않았던 경험이 있습니다. 급하게 진행하던 사이트라 이 플러그인을 사용하지 않고 text 편집기로 편집하여 robots.txt를 ftp로 올렸습니다. 이 플러그인이 작동하지 않는 경우를 발견하면 여기에 추가 메모하도록 하겠습니다.

File Manager

WP Robots Txt

• 글쓴이: Christopher Davis
• 최근 업데이트: 5 년 전에
• 요구되는 워드프레스 버전: 3.3 또는 이상
• 호환되는 버전: 3.6.1
• 활성 설치: 50,000+

사용법은 간단하여 워드프레스 관리자 페이지에서 [설정 Settings] -> [읽기 Reading]로 이동하시어 중간에 보시면 새로 생성된 Robots.txt Content 부분이 보이실 것입니다.

편집하시고 저장하시면 끝입니다.

robots.txt 작성팀

좋은 글인데 퍼온글이라 저작권 보호를 위해 보호된 글로 올립니다. 비밀번호는 0021입니다.

[추천]robots.txt 작성팁