Back to Question Center
0

Semalt robots.tx 위대한 SEO 예 훌륭한 서재응을위한 준엄 한 robots.txt 예제

1 answers:

로봇. txt 파일은 사이트의 SEO에서 작업하는 경우 매우 강력한 파일입니다. 동시에, 조심해서 사용해야합니다 - new balance price in lebanon. 검색 엔진에서 특정 파일 및 폴더에 대한 액세스를 거부 할 수는 있지만 매우 자주 원하지 않는 것 입니다. 지난 몇 년 동안, 특히 Google은 웹을 크롤링하는 방식이 크게 바뀌 었으므로 오래된 우수 사례는 더 이상 유효하지 않습니다. 이 게시물은 현재 모범 사례가 WordPress 로봇에 무엇인지 설명합니다. txt와 이유. (삼)

Google이 귀하의 사이트를 완전히 렌더링합니다

더 이상 Google은 사이트 HTML을 가져오고 사용자의 스타일과 자바 스크립트를 무시하는 어리석은 어린 아이가 아닙니다. 그것은 모든 것을 가져오고 페이지를 완전히 렌더링합니다. 즉, CSS 또는 JavaScript 파일에 대한 Google의 액세스를 거부하면 전혀 그렇지 않습니다 . Google 팬더 4에 대한이 게시물은 이에 대한 예를 보여줍니다. 우리는 나중에 다시 말했고 계속 말하고 있습니다 : CSS와 JavaScript 파일을 차단하지 마십시오. (삼)

로봇을 가진 오래된 모범 사례. wp-includes 디렉토리 및 플러그인 디렉토리에 대한 액세스를 차단하는 txt 는 더 이상 유효하지 않습니다. WordPress 4.0에서이 문제가 발생하여 wp-includes /를 제거하는 패치를 작성했습니다. * 기본 WordPress 로봇에서. txt . (삼)

많은 테마는 또한 AJAX라고하는 비동기 자바 스크립트 요청을 사용하여 페이지에 내용을 추가합니다. 기본적으로 WordPress는이를 차단했습니다. 그래서 Google이 admin-ajax를 크롤링 할 수 있도록 WordPress 티켓을 만들었습니다. php wp-admin 의 URL. 이것은 WordPress 4에서 수정되었습니다. 4.

로봇. txt는 링크의 값을 거부합니다

뭔가 다른 것을 명심하는 것이 중요합니다. 사이트의 로봇으로 URL을 차단하는 경우. txt , 검색 엔진은 해당 페이지를 크롤링하지 않습니다. 이는 또한 해당 URL을 가리키는 링크 값을 배포 할 수 없음을 의미합니다. 따라서 검색 결과에 표시하지 않고 링크가 많이 필요한 부분이 있다면 로봇을 사용하지 마십시오. txt 파일. 대신 값이 noindex 인 로봇 메타 태그를 사용하십시오 . 이렇게하면 검색 엔진이 사이트의 해당 페이지에 대한 링크 값을 올바르게 배포 할 수 있습니다.


우리의 WordPress 로봇. 텍스트 예제

그럼, 당신의 워드 프레스 로봇에 있어야합니다. txt? 우리는 매우 지금 깨끗합니다. 우리는 더 이상 아무것도 차단하지 않습니다! Google은 / wp-content / plugins / 디렉토리를 차단하지 않습니다. 플러그인이 Google에서 페이지를 렌더링하는 데 필요한 JavaScript 또는 CSS를 출력 할 수 있기 때문입니다. 또한 많은 테마가 사용하는 WordPress와 함께 제공되는 기본 JavaScript가이 디렉토리에서 제공되므로 우리는 / wp-includes / 디렉토리를 차단하지 않습니다. (삼)

또한 우리는 / wp-admin / 폴더를 차단하지 않습니다. 이유는 간단합니다. 차단하지만 우연히 연결되면 사람들은 여전히 ​​Google에서 간단한 [inurl : wp-admin] 쿼리를 수행하고 사이트를 찾을 수 있습니다. 이 유형의 쿼리는 악의적 인 해커 의 쿼리 유형입니다 . 아무 것도하지 않으면 WordPress에서 관리 페이지에 robots meta x-http 헤더가 생겨서 검색 엔진이 검색 결과에 이러한 페이지를 표시하지 못하게합니다. 훨씬 더 깔끔한 솔루션입니다. (삼)

로봇과 함께해야 할 일. txt

Google Search Console에 로그인하고 크롤링 → Fetch as Google에서 가져 오기 및 쉼표 옵션을 사용하십시오.

Semalt robots.txAn example for great SEO
Semalt robots.txt example for great SEO

사이트를 탐색 할 때 보이는 것과 모양이 다르거 나 오류나 알림이 표시되는 경우 : 로봇에서 URL에 대한 액세스를 차단하는 행을 제거하여 문제를 해결하십시오. txt 파일. (삼)

로봇의 XML Sitemap에 링크해야합니까? txt ?

우리는 항상 로봇의 XML 사이트 맵에 연결되는 것을 느꼈습니다. TXT는 약간 난센스 다.이것이 Yoast SEO 플러그인이 귀하의 로봇에 추가하지 않는 이유입니다. txt . 귀하의 로봇을 통해 XML 사이트 맵에 대해 알기 위해 의존하지 마십시오. txt . (삼)

더 읽기 : '로봇. txt : 궁극적 인 가이드 '»

March 1, 2018