robots.txt
파일을 파싱하여 검색엔진에게 수집할 페이지와 차단할 페이지 정의sitemap.xml
의 위치robots.txt
설정sitemap.xml
: 아래와 같은 조건을 충족해야 함urlset
태그 안에 설정<url>
항목을 상위 XML 태그로 포함<url>
상위 태그에 <loc>
하위 항목을 포함example:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://noowah-blog.vercel.app/</loc>
<lastmod>2022-11-27T19:21:06+09:00</lastmod>
<priority>1.0</priority>
</url>
</urlset>
example:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://noowah-blog.vercel.app/</loc>
<lastmod>2022-11-27T19:21:06+09:00</lastmod>
<priority>1.0</priority>
<xhtml:link rel="alternate" hreflang="x-default" href="https://noowah-blog.vercel.app/" />
<xhtml:link rel="alternate" hreflang="ko" href="https://noowah-blog.vercel.app/ko" />
<xhtml:link rel="alternate" hreflang="en" href="https://noowah-blog.vercel.app/en" />
</url>
</urlset>
hrefLang="x-default"
: 해당 페이지의 기본 버전 설정을 하는 것을 권장