📖 약 2분 읽기
경쟁사 모니터링 서비스를 도입할 때 가장 먼저 나오는 질문은 “이 값을 어디서, 어떻게 가져오나요?”예요. 정보보호 담당자는 수집 방식이 적법한지, 마케터는 값을 보고서에 그대로 써도 되는지 궁금해해요. 눈치 : nunchi.biz는 무엇을 읽고 무엇을 읽지 않는지, 무엇을 남기고 무엇을 버리는지 공개 페이지로 정리해 두었어요. 그 핵심을 한 편으로 모았어요.
언제 읽나요
이용자가 주소나 키워드를 넣고 버튼을 누른 그 순간, 그리고 지켜보기 브리핑을 받기로 정한 사이트를 정한 주기에 확인할 때만 요청해요. 눈치 : nunchi.biz가 스스로 사이트 목록을 만들어 돌아다니지 않아요.
무엇을 읽고, 무엇을 읽지 않나요
| 읽는 것 | 읽지 않는 것 |
|---|---|
| 로그인 없이 누구나 열 수 있는 공개 페이지(첫 화면, 상단 메뉴, 소식 목록, 지정한 페이지) | 로그인, 결제, 회원 화면과 입력 양식 |
| 카카오톡 채널의 공개 소식 | 카카오톡 채널 친구에게만 보내는 메시지 |
| 전용 주소로 받은 경쟁사 메일 소식지 | 등록하지 않은 주소로 온 메일 |
| 공공데이터포털 · 네이버 검색 API 등 자격을 받은 자료 | robots.txt로 자동 수집을 막았거나 자동 방문을 거부한 사이트(이런 경쟁사는 기사로만 확인) |
어떻게 읽나요: 이름을 밝힌 봇과 일곱 가지 규율
사이트를 읽는 프로그램은 BizSpringSeedBot/1.0 (+https://nunchi.biz/bot)이라는 이름을 그대로 밝혀요. 브라우저로 가장하지 않아요. 사이트 운영자가 차단 여부를 확인하고 요청을 멈추게 할 수 있어야 하기 때문이에요.
| 규율 | 값 |
|---|---|
| robots.txt | 먼저 읽고 따르며, 차단되어 있으면 한 장도 읽지 않아요 |
| 요청 방식 | HTTP GET만 보내요. 양식 제출과 로그인은 하지 않아요 |
| 동시 요청 | 호스트당 1건 |
| 요청 간격 | 1초 이상 |
| 한 회차 상한 | 사이트맵에 실린 앞 20장까지 |
| 거부 응답 | 401 · 403 · 429 등을 받으면 즉시 멈추고 우회하지 않아요 |
| 원문 보관 | 본문 · 기사 원문 · 이미지를 저장하지 않아요 |
무엇을 남기나요
판정 결과와 수치(있고 없음, 건수, 검색량), 제목과 설명이 있었는지 여부, 직전 회차와 달라졌는지 비교할 지문, 조회한 주소와 시각만 남겨요. 원문을 남기지 않으면서도 “지난번과 무엇이 달라졌는지”는 볼 수 있는 구조예요.
“확인 불가”는 “없음”이 아니에요
눈치 : nunchi.biz는 판정할 수 없던 값을 0이나 “없음”으로 채우지 않고 “확인 불가”로 표시해요. 사이트가 응답하지 않았거나 읽지 못한 회차를 없다고 표시하면 보고서가 사실과 달라지기 때문이에요. 값마다 어느 자료에서 왔는지와 확인한 시각도 함께 표시해요.
| 판정 | 뜻 |
|---|---|
| 있음 | 조건을 충족했어요 |
| 없음 | 확인했고, 없었어요. 어느 주소에 무엇이 없는지 함께 보여 줘요 |
| 확인 불가 | 읽지 못한 회차예요. 집계의 분모에서도 빠져요 |
| 일부 · 해당 없음 | 일부만 충족했거나, 확인할 필요가 없는 항목이에요 |
보고서에 쓸 때 기억할 점
- 값에 붙은 확인 시각과 출처 주소를 함께 적으면 보고서의 근거가 분명해져요.
- “확인 불가”는 변화가 없었다는 뜻이 아니에요. 그 경쟁사는 기사나 다음 회차로 다시 확인하는 편이 정확해요.
- 눈치 : nunchi.biz는 공개 화면의 변화를 알려 줄 뿐, 경쟁사의 매출이나 광고비 같은 내부 정보는 알 수 없어요.
전체 내용은 데이터 수집 안내, 자료 원천, 봇 안내와 수집 정책, 근거 수치 측정 방법에 공개되어 있어요. 이 원칙이 실제 활용에서 어떻게 보이는지는 B2C 브랜드 경쟁사 프로모션 모니터링 글에서 확인할 수 있어요.
자주 묻는 질문 (FAQ)
경쟁사 페이지 원문을 저장하나요?
저장하지 않아요. 판정 결과와 수치, 비교용 지문, 조회한 주소와 시각만 남겨요.
robots.txt로 막힌 사이트는 어떻게 되나요?
차단되어 있으면 한 장도 읽지 않고 조회를 멈춰요. 그런 경쟁사는 기사로만 확인해요.
‘확인 불가’는 무슨 뜻인가요?
읽지 못한 회차라는 뜻이에요. ‘없음’과 다르며 집계의 분모에서도 빠져요.