Loading...
홈 › 블로그

IT 개발 블로그 — REDINFO

robots.txt만으로 해결 안 되는 검색 노출 차단 - X-Robots-Tag HTTP 헤더 완벽 가이드

HTML 메타 태그나 robots.txt를 올바르게 수정했음에도 특정 PDF 문서가 구글 검색 결과에 계속 노출되거나, 반대로 API 응답 데이터가 검색엔진에 무단 수집되는 경험을 해봤을 것이다. 다만 대부분의 개발자들은 서버 응답 헤더 수준에서 동작하는 X-Robots-Tag의 존재를 모른 채 HTML meta 태그만 고치다가 시간을 허비한다. 이번에는 ···

14 0
민감 페이지 검색 노출 방지 - noindex 메타태그와 X-Robots-Tag 완벽 활용법

개발 중인 테스트 서버나 어드민 페이지, 결제 완료 페이지 같은 민감한 URL이 구글이나 네이버 검색 결과에 버젓이 노출되어 식은땀을 흘려본 경험이 있을 것이다.다만 많은 개발자들이 robots.txt 파일만 설정해두면 검색엔진에서 완전히 사라지는 것으로 오해하곤 한다.이번 글에서는 검색엔진의 '크롤링'과 '색인(Index)'의 차이를 정확히 이해하고, H···

49 0
REDINFO Since 2014
webmaster@redinfo.co.kr
Copyright © Redinfo All Rights Reserved