다모앙 구글 등 검색 개선을 위한 제안
알림
|
페이지 정보
작성일
2025.01.23 18:20
본문
혹시 도움이 될까하여 몇자 적어봅니다
구글 검색이 안되는 부분은 중복 콘텐츠에 의한 부분은 거의 없습니다. 그래서 살펴보니 robots.txt 부분에 문제가 있었습니다.
1. 게시판 관련 폴더를 disallow 하면 안됩니다. 보안을 위해 막는다고 하지만 robots.txt에 넣는 것이 오히려 사이트 구조를 알리는 셈이라 더 좋지 않습니다.
그리고 해킹하는 툴들은 robots규약을 무시합니다. 따라서 아래와 같이 설정하는 것을 추천합니다.
User-Agent: *
disallow:
2. 아래네 사이트맵 url이 잘못되었습니다
현재:
Sitemap: https://damoang.net/siteam.php
수정: https://damoang.net/sitemap.php
혹시 가능하다면 sitemap.xml 로 하실 것을 제안 합니다
폰으로 적는거라 살펴보지 못했는데 사이트맵 문법에 맞는지도 확인해 주세요
이후, 구글 서치콘솔에 사이트맵 제출해 주세요
그리고 크롤링 에러나 인덱스 현황을 지켜보셔야 합니다
혹시 제게 공유 가능하다면 한번 점검해 드리겠습니다
seo 현직이지만 다모앙님들 워낙 잘하시는 것 같아 조용히 있다가 조심스럽게 제안드려 봅니다^^
-----
추가 보충 드립니다
아래의 폴더는 다모앙 게시판 기능과 디자인 관련된 것으로 예상됩니다. 이런걸 disallow 하면 안됩니다.
lib
plugin
skin
중복게시물 패널티 부분은 잘 모르겠습니다.
136명
추천인 목록보기
댓글 39
/ 1 페이지
아름다운별님의 댓글
중간에 link.php Disallow 선언은 연결되는 외부 사이트 링크를 긁어가는 문제 때문에 들어간 것 같네요.
예전 문제)
https://damoang.net/bug/5395
사실 클릭 통계만 수집하는 용도라면 link.php 이거, 꼭 필요한지도 개인적으로 의문입니다만...
이 부분은 논의가 필요한 것 같네요.
(왜냐하면 본문에 URL 첨부하면 해당 php 경유를 안 하거든요.)
예전 문제)
https://damoang.net/bug/5395
사실 클릭 통계만 수집하는 용도라면 link.php 이거, 꼭 필요한지도 개인적으로 의문입니다만...
이 부분은 논의가 필요한 것 같네요.
(왜냐하면 본문에 URL 첨부하면 해당 php 경유를 안 하거든요.)
막시무스님의 댓글의 댓글
@아름다운별님에게 답글
이런 경우 link.php에 noindex 넣는것이 더 효과적일 수 있습니다. 일단 이런 파일이 있다는걸 이렇게 노출하면 좋지 않습니다.
아름다운별님의 댓글의 댓글
@막시무스님에게 답글
글쎄요 link.php 는 그냥 비회원도 읽을 수 있는 본문 밑에 링크만 첨부하면 누구나 알 수 있는 것인데, 상관없지 않나요?
제가 모르는 다른 파일은 맞는 말씀이다 동의하겠습니다만.. 해당 페이지 관련은 잘 공감되지는 않습니다.
(노출이 되면 좋지 않다는 부분에 대해서입니다.)
제가 모르는 다른 파일은 맞는 말씀이다 동의하겠습니다만.. 해당 페이지 관련은 잘 공감되지는 않습니다.
(노출이 되면 좋지 않다는 부분에 대해서입니다.)
아름다운별님의 댓글의 댓글
@아름다운별님에게 답글
댓글창 아래로 더 내려가니까 사이트 개발 참여하시는 분도 인지하신 것 같네요~
진서기님의 댓글
robots.txt 는 저도 살펴봤습니다. 단순히 robots.txt 때문이라면 게시물이 아예 검색안된는건 맞지 않습니다.
url구조도 bbs가 직접 노출되는 형태가 아니기도 하고 bbs안에 게시물 출력 관련 파일들이 차단된것도 아닙니다.
사이트맵 부분은 오타군요.
전 중복 게시물에 의한 패널티라고 생각합니다.
서치콘솔 보면 뭔가 확인 되겠지요.
robots.txt 문제라면 알려주신데로 수정하거나 삭제 하면 결과가 노출 되겠지요.
url구조도 bbs가 직접 노출되는 형태가 아니기도 하고 bbs안에 게시물 출력 관련 파일들이 차단된것도 아닙니다.
사이트맵 부분은 오타군요.
전 중복 게시물에 의한 패널티라고 생각합니다.
서치콘솔 보면 뭔가 확인 되겠지요.
robots.txt 문제라면 알려주신데로 수정하거나 삭제 하면 결과가 노출 되겠지요.
kkigomi님의 댓글
adm 폴더를 비롯하여 bbs/*.php 파일은 이미 아주 잘 알려진 파일이고,
이미 구글에 크롤링 및 색인되어있는 파일들이어서 색인에서 제거 및 크롤링, 색인 큐를 제거하기 위한 목적으로 나열되어 있습니다.
보안, 접근 및 알려지면 안 되는 것들은 기타 방법으로 경로 및 존재자체를 노출하지 않는 방법으로 차단되어 있습니다.
이미 구글에 크롤링 및 색인되어있는 파일들이어서 색인에서 제거 및 크롤링, 색인 큐를 제거하기 위한 목적으로 나열되어 있습니다.
보안, 접근 및 알려지면 안 되는 것들은 기타 방법으로 경로 및 존재자체를 노출하지 않는 방법으로 차단되어 있습니다.
막시무스님의 댓글의 댓글
@kkigomi님에게 답글
오픈소스라면 아는 분들도 있을 겁니다. 말씀처럼 서버 사이드에서 이미 차단되어 굳이 robots.txt에 추가할 필요도 없는 것입니다.
kkigomi님의 댓글의 댓글
@막시무스님에게 답글
나열된 파일들은 서버사이드에서 차단되어있지 않은 것들입니다.
노출되어도 전혀 상관없는 것들이고, 일반적으로 접근이 되어야하는 파일들입니다.
단지, 구글 등의 검색엔진에 크롤링, 색인의 필요성이 없다는 것을 알리기 위한 목적이며, robots.txt 파일의 용도 및 목적에도 맞는 부분이라고 생각합니다.
노출되어도 전혀 상관없는 것들이고, 일반적으로 접근이 되어야하는 파일들입니다.
단지, 구글 등의 검색엔진에 크롤링, 색인의 필요성이 없다는 것을 알리기 위한 목적이며, robots.txt 파일의 용도 및 목적에도 맞는 부분이라고 생각합니다.
miniwooni님의 댓글