자동 생성된 URL 오류를 어떻게 해결할 수 있습니까?

오늘의 "Ask An SEO" 질문은 뭄바이의 Bhaumik이 다음과 같이 묻는 것입니다.

“자동으로 생성된 URL에 대해 질문이 있습니다. 우리 회사는 이전에 사이트맵을 생성하기 위해 다른 도구를 사용했습니다. 그러나 최근에 필요한 URL을 선택하고 robots.txt에서 다른 URL을 차단하여 수동으로 만들기 시작했습니다.

현재 자동 생성된 URL이 50개 이상인 문제에 직면해 있습니다.

예를 들어 "키워드 키워드" URL: https://url.com/keyword-keyword/라는 페이지가 있고 다른 페이지 지식 센터 URL: https://www.url.com/folder/keyword-keyword가 있습니다. .

적용 범위 문제에서 https://test.url.com/keyword-keyword/keyword-keyword와 같은 완전히 새로운 URL을 생성한 5xx 시리즈에서 오류가 표시됩니다. 우리는 여러 가지 방법을 시도했지만 이것에 대한 해결책을 얻지 못했습니다.”

안녕하세요 바우믹입니다.

당신이 처한 흥미로운 상황입니다.

좋은 소식은 5XX 오류가 저절로 해결되는 경향이 있으므로 걱정하지 않아도 된다는 것입니다.

당신이 직면하고 있는 자기 식인화 문제는 또한 대부분의 사람들이 생각하는 것보다 더 일반적입니다.

예를 들어 전자 상거래 상점의 경우 동일한 제품(또는 동일한 제품 컬렉션)이 여러 폴더에 표시되도록 할 수 있습니다.

그럼 어떤게 공식인가요?

B2B 금융 분야의 상황도 마찬가지입니다(위의 URL을 제거하고 "키워드 키워드"로 대체했습니다.)

이것이 검색 엔진이 표준 링크를 만든 이유입니다.

표준 링크는 페이지가 다른 페이지와 중복되는 경우와 공식 페이지인 페이지를 검색 엔진에 알려주는 방법입니다.

분홍색 토끼 슬리퍼를 판매한다고 가정해 보겠습니다.

이 토끼 슬리퍼에는 자체 페이지가 있으며 판매 중이며 신발 및 분홍색으로도 나타납니다.

• url.com/products/pink-bunny-slippers.
• url.com/on-sale/pink-bunny-slippers.
• url.com/products/pink/pink-bunny-slippers.
• url.com/category/footwear/pink-bunny-slippers.

위의 첫 번째 URL은 URL의 "공식 버전"입니다.

즉, 자신을 가리키는 표준 링크가 있어야 합니다.

다른 세 페이지는 그것의 중복 버전입니다. 따라서 표준 링크를 설정할 때 공식 페이지를 참조해야 합니다.

요컨대, 검색 엔진에서 중복이 제거되므로 네 페이지 모두에 rel=”canonical” href=”https://url.com/products/pink-bunny-slippers”가 있는지 확인하는 것이 좋습니다.

다음으로 사이트맵에서 모든 중복 버전을 제거해야 합니다.

사이트맵은 웹사이트에서 가장 중요하고 인덱싱 가능한 페이지를 포함해야 합니다.

사이트맵에 비공식 버전의 페이지, robots.txt에서 허용하지 않는 페이지 및 정규화되지 않은 URL을 포함하고 싶지 않습니다.

검색 엔진은 항상 전체 웹사이트를 크롤링하지 않습니다. 검색 엔진을 중요하지 않은 페이지로 보내면 적절한 크롤링 및 색인 생성 능력을 낭비하게 됩니다.

여기서 발생할 수 있는 또 다른 상황이 있습니다.

사이트 검색을 활성화한 경우 중복 URL을 생성할 수도 있습니다.

사이트의 검색 상자에 "핑크 토끼 슬리퍼"를 입력하면 URL에 동일한 키워드 구문과 매개변수가 포함된 URL이 표시될 것입니다.

이렇게 하면 문제가 더 커질 수 있으며 IT 팀은 noindex용 메타 로봇과 함께 검색 결과에 대한 표준 링크를 프로그래밍 방식으로 설정해야 합니다.

찾아야 할 또 다른 사항은 검색 결과에서 분홍색 토끼 슬리퍼 페이지를 클릭하면 이러한 매개변수가 고정될 수 있다는 것입니다.

그렇다면 위에서 언급한 것과 동일한 단계를 수행하십시오.

적절한 표준 링크를 사용하고 사이트맵에 비공식 페이지가 없는지 확인하면 중복 페이지 문제를 해결하고 사이트의 잘못된 페이지를 크롤링하도록 하여 스파이더 방문을 낭비하지 않도록 합니다.

이게 도움이 되길 바란다!

추가 리소스:

• 안전하게 무시할 수 있는 7가지 SEO 크롤링 도구 경고 및 오류
• 각 URL에 대한 랜딩 페이지를 만들고 내 메인 사이트로 연결해야 합니까?
• 궁극적인 SEO 감사 체크리스트

주요 이미지: Leremy/Shutterstock