개발서버가 bing에서 검색됩니다.

Question

현재 운영중인 개발사이트가 bing에서 조회가됩니다.

출판유통통합전산망으로 조회를 하면

Removed PII 가 검색이되는데

출판유통통합전산망 사이트는 https://bnk.kpipa.or.kr/ 입니다.

robots랑 meta태그도 등록을 해놨지만 bing엔진에서는 어째서인지 계속 개발서버를 검색하고 있습니다.

bingwebmaster에서는 개발주소가 등록되지않고있습니다.

조치하려면 어떻게해야할까요?

Answer 1

이 응답은 자동으로 번역되었습니다. 따라서 문법 오류나 어색한 표현이 있을 수 있습니다.

---

안녕하세요 @수진 윤,

Microsoft Q&A 포럼에 오신 것을 환영합니다.

개발 서버가 Bing에 의해 인덱싱되고 있다는 점을 이해하며, 이는 올바르게 문제로 식별되었습니다.

이 문제는 일반적으로 검색 엔진 크롤러(Bingbot 등)가 운영 사이트 코드나 사이트맵에 실수로 포함된 개발 환경 링크를 발견했을 때 발생합니다.

이를 해결하는 가장 효과적인 방법은 서버 수준에서 크롤러를 차단하는 것입니다. 말씀하신 것처럼 Bing Webmaster Tools에 IP 주소를 추가하는 것만으로는 해결되지 않습니다. 해당 도구는 도메인용으로 설계되어 있습니다.

다음 두 가지 해결 방법을 권장합니다. 개발 서버에 이 중 하나를 구현하시기 바랍니다:

1. 비밀번호 보호

가장 안전하고 효과적인 방법입니다. 개발 서버(Apache, Nginx 등)를 구성하여 사용자 이름과 비밀번호(HTTP 기본 인증)를 요구하면, 검색 엔진 봇을 포함한 모든 비인가 접근을 차단할 수 있습니다. 로그인 프롬프트를 우회할 수 없습니다.

2. 개발 서버에 robots.txt 파일 사용

이 방법은 준수하는 크롤러에게 직접 지시하는 방식입니다. 일반 텍스트 파일을 생성하여 개발 서버 루트에 배치하고 다음 경로에서 접근 가능하도록 합니다:

당신의 IP 주소/robots.txt

파일 내용은 다음과 같습니다:

User-agent: *
Disallow: /

이 파일은 모든 웹 크롤러(User-agent: *)에게 해당 서버의 모든 페이지를 크롤링하지 말라고 지시합니다.

위의 해결 방법 중 하나를 적용해 보시기 바랍니다. Bing이 서버를 다시 크롤링하고 새로운 지시사항(또는 비밀번호 차단)을 확인한 후 인덱스에서 페이지를 제거하는 데는 시간이 걸릴 수 있습니다.

해결 방법을 적용하신 후 결과를 알려주실 수 있을까요? 추가 질문이 있으시면 언제든지 도와드리겠습니다.

---

답변이 도움이 되었다면 "답변 수락" 을 클릭하고 친절히 추천해 주세요. 추가 질문이 있으시면 **"댓글"**을 클릭하세요.

참고: 이 스레드에 대한 관련 이메일 알림을 받으려면 문서의 단계에 따라 이메일 알림을 활성화하세요.