[블로그 기록 #2] 색인이 생성되었으나 robots.txt에 의해 차단됨
˙티스토리 블로그를 개설하고, 검색결과로 노출되기 위해 구글 서치 콘솔(Google Search Console)에 사이트맵을 등록하였습니다.
그리고 몇일 뒤 문제가 발견되었다는 메일을 받게 되었습니다.
˙메일 본문을 확인해보니, 오류 단계는 아니고 개선을 위한 경고 메일입니다.
색인이 생성되었으나, 검색 수집 로봇(robots.txt)에 의해 차단되었다고 합니다.
˙자세한 내용을 확인하기 위해 '적용 범위 문제 해결하기'를 클릭해보았습니다.
˙구글 서치 콘솔(Google Search Console) 페이지로 이동하는군요.
그리고 해당 문제에 대해 자세한 내용을 볼 수 있습니다.
˙수집에 영향을 받은 페이지는 2개 URL로 나타났으며, 모두 manage 하위 경로입니다.
첫 번째 URL인 '~~/manage'는 블로그 관리 홈이며, 두 번째 URL '~~/manage/entry/post'로 들어가니 게시글을 쓰는 페이지가
나오네요.
˙직접 확인해보니 검색 노출이 필요없는(해서는 안될) 블로그 관리자 페이지였음을 알 수 있었습니다.
어느 사이트를 운영하던 관리자 페이지는 노출되면 안됩니다. 이번 메일을 통해 티스토리 블로그의 관리자 페이지가 검색으로 노출
되지 않는다는 것을 확인할 수 있는 좋은 기회가 되었습니다.
˙새로 블로그를 개설하신 분들 중에 같은 메일을 받고 당황하실 수 있을텐데, 안심하시고 계속 운영하시면 되겠습니다.
이상으로 '색인이 생성되었으나 robots.txt에 의해 차단됨'에 대한 글을 마치겠습니다.
감사합니다.