๊ตฌ๊ธ ์์น ์ฝ์์์ ํ์ด์ง ์์ธ ๊ด๋ จ ๋ฌธ์ ๊ฐ ๋ฐ์ํ๋ฉด, ๊ฒ์ ๋ ธ์ถ๊ณผ ์ ๋์ผ์ค ์น์ธ์๋ ์ํฅ์ ๋ฏธ์น ์ ์์ต๋๋ค. ๐ฅ ์๋์์ ํ์ด์ง ์ mismatch ๋ฌธ์ , ์์ธ ์ค๋ฅ ํด๊ฒฐ ๋ฐฉ๋ฒ, ์ ๋์ผ์ค ์ํฅ ์ฌ๋ถ๋ฅผ ํ๋์ฉ ์ ๋ฆฌํด ๋๋ฆด๊ฒ์!
โ ์ง๋ฌธ 1: ์ค์ ๋ธ๋ก๊ทธ ๊ธ์ 500๊ฐ์ธ๋ฐ, ํฌ๋กค๋ง๋ ํ์ด์ง๊ฐ 1,000๊ฐ ์ด์์ธ ์ด์ ?
๐น ์ด์ 1. ํ๊ทธ·์นดํ ๊ณ ๋ฆฌ·์ค๋ณต ํ์ด์ง๋ ํฌ๋กค๋ง๋จ
- ํฐ์คํ ๋ฆฌ ๋ธ๋ก๊ทธ์์๋ ํ๊ทธ, ์นดํ ๊ณ ๋ฆฌ, ํ์ด์ง๋ค์ด์ (2, 3ํ์ด์ง ๋ฑ), RSS ํผ๋, ๊ฒ์ ๊ฒฐ๊ณผ ํ์ด์ง ๋ฑ๋ ํฌ๋กค๋ง๋จ
- ์๋ฅผ ๋ค์ด, ๋ธ๋ก๊ทธ ๊ธ์ด 500๊ฐ๋ผ๋,
โexample.tistory.com/tag/IT
โexample.tistory.com/category/news
โexample.tistory.com/page/2
โexample.tistory.com/rss
๊ฐ์ ์ถ๊ฐ์ ์ธ ํ์ด์ง๋ค์ด ํฌ๋กค๋ง๋์ด ์ดํฉ์ด 1,000๊ฐ ์ด์์ผ๋ก ์กํ ์ ์์
๐น ์ด์ 2. ์ญ์ ํ ํ์ด์ง๊ฐ ์ฌ์ ํ ์์ธ ์์ฒญ๋จ
- ์ญ์ ํ ๋ธ๋ก๊ทธ ๊ธ์ด ์์ผ๋ฉด, ๊ตฌ๊ธ๋ด์ด ๊ธฐ์กด URL์ ํฌ๋กค๋งํ๋ฉด์ 404 ์ค๋ฅ ํ์ด์ง๋ ํจ๊ป ๊ธฐ๋ก๋ ์ ์์
๐น ์ด์ 3. ์ค๋ณต ์ฝํ ์ธ ๋ฐ์ (๊ฐ์ ๋ด์ฉ์ URL์ด ์ฌ๋ฌ ๊ฐ ์์ฑ๋จ)
- ํฐ์คํ ๋ฆฌ์์๋ ๊ฐ์ ๊ฒ์๊ธ์ด PC / ๋ชจ๋ฐ์ผ ๋ฒ์ ์ผ๋ก ๋ ๊ฐ์ URL์ด ์์ฑ๋ ์ ์์
example.tistory.com/m/123
(๋ชจ๋ฐ์ผ)example.tistory.com/123
(PC)
- ๋ํ ?query=, ?page= ๊ฐ์ ํ๋ผ๋ฏธํฐ๋ฅผ ํฌํจํ URL๋ ํฌ๋กค๋ง๋ ์ ์์
๐ ์ฆ, ์ค์ ๊ธ๋ณด๋ค ํฌ๋กค๋ง๋ ํ์ด์ง ์๊ฐ ๋ง์ ์๋ฐ์ ์๋ ๊ตฌ์กฐ!
โ ์ง๋ฌธ 2: ์์ธ ๋ฌธ์ ํด๊ฒฐ ๋ฐฉ๋ฒ (์์ธ์ด ์์ฑ๋์ง ์์ ๋ฌธ์ ํด๊ฒฐ)
๐น ์์ธ์ด ์์ฑ๋์ง ์๋ ์์ธ
1๏ธโฃ noindex ํ๊ทธ ์ค์ ๋จ → ๊ตฌ๊ธ์ด ์์ธ์ ํ์ง ์๋๋ก ์ค์ ๋ ๊ฒฝ์ฐ
2๏ธโฃ robots.txt์์ ํฌ๋กค๋ง ์ฐจ๋จ → ํน์ URL์ ํฌ๋กค๋งํ์ง ๋ชปํ๋๋ก ์ค์ ๋ ๊ฒฝ์ฐ
3๏ธโฃ 404/410 ์ค๋ฅ ํ์ด์ง๊ฐ ๋ง์ → ์ญ์ ๋ ํ์ด์ง๊ฐ ๋ง์์ ๊ตฌ๊ธ์ด ์์ธ ์ ์ธํ ๊ฒฝ์ฐ
4๏ธโฃ ๊ตฌ๊ธ ๊ฒ์ ํ์ง ๊ธฐ์ค ๋ฏธ๋ฌ → ์ ํ์ง ์ฝํ
์ธ ๋ผ๊ณ ํ๋จ๋ ๊ฒฝ์ฐ
๐ ํด๊ฒฐ ๋ฐฉ๋ฒ
โ
1๏ธโฃ robots.txt
์ค์ ํ์ธํ๊ธฐ
- ์ฃผ์์ฐฝ์
https://๋ธ๋ก๊ทธ์ฃผ์/robots.txt
์ ๋ ฅ ํ ํ์ธ Disallow: /
๊ฐ์ ์ค์ ์ด ๋์ด ์๋ค๋ฉด, ๊ตฌ๊ธ ํฌ๋กค๋ง์ ๋ง๊ณ ์๋ ๊ฒ์ด๋ฏ๋ก ์์ ํ์- ์ฌ๋ฐ๋ฅธ robots.txt ์ค์ ์์ (ํฐ์คํ ๋ฆฌ ๊ธฐ๋ณธ ์ค์ ์ถ์ฒ)
User-agent: * Allow: / Sitemap: https://๋ธ๋ก๊ทธ์ฃผ์/sitemap.xml
โ
2๏ธโฃ noindex
ํ๊ทธ ํ์ธ (์์ธ ์ฐจ๋จ ์ฌ๋ถ ์ฒดํฌ)
- ํฐ์คํ ๋ฆฌ์์๋ ๊ธ ์์ฑ ์ noindex ์ค์ ์ ํ์ง ์์๋์ง ํ์ธ
- ํน์ ๊ธ์ด ์์ธ๋์ง ์๋๋ค๋ฉด, HTML์์
<meta name="robots" content="noindex">
ํ๊ทธ๊ฐ ์๋์ง ํ์ธ - ๋ง์ฝ ์๋ค๋ฉด, ํด๋น ํ๊ทธ๋ฅผ ์ญ์ ํ๊ณ ๋ค์ ์์ธ ์์ฒญ ํ์
โ
3๏ธโฃ ๊ตฌ๊ธ ์์น ์ฝ์์์ ‘์์ธ ์์ฒญ’ ์คํ
1๏ธโฃ ๊ตฌ๊ธ ์์น ์ฝ์ → ์์ธ๋์ง ์์ ํ์ด์ง ์ ํ
2๏ธโฃ ‘URL ๊ฒ์ฌ’์์ ์ง์ URL ์
๋ ฅ ํ ‘์์ธ ์์ฒญ’ ํด๋ฆญ
3๏ธโฃ 2~3์ผ ํ ๋ค์ ์์ธ ์ํ ํ์ธ
โ 4๏ธโฃ ์ค๋ณต·ํ์ ์๋ ํ์ด์ง ์์ธ ์ ์ธ ์ค์
ํ๊ทธ ํ์ด์ง
,์นดํ ๊ณ ๋ฆฌ
,๊ฒ์ ํ์ด์ง
,ํ์ด์ง(2,3ํ์ด์ง)
๋ฑ์ ์์ธํ ํ์๊ฐ ์์ผ๋ฏ๋ก ‘noindex’ ์ค์ ์ถ์ฒ- ํฐ์คํ ๋ฆฌ์์ ์์ธ ์ ์ธํ๋ ค๋ฉด ์คํจ HTML ํธ์ง์์ ๋ค์ ์ฝ๋ ์ถ๊ฐ
๐ ์ด ์ค์ ์ ์ ์ฉํ๋ฉด, ๋ถํ์ํ ํ์ด์ง๊ฐ ์์ธ๋์ง ์์ ์ ์ฒด ํ์ง ์ ์๊ฐ ํฅ์๋ ์ ์์!<meta name="robots" content="noindex, follow">
โ ์ง๋ฌธ 3: ์์ธ ๋ฌธ์ ํด๊ฒฐ ์ ํ๋ฉด ์ ๋์ผ์ค์๋ ์ํฅ์ด ์๋์?
โ ๋ค, ์ํฅ์ด ์์ ์ ์์ต๋๋ค!
๐ ์ ๋์ผ์ค ์น์ธ์ ‘๊ฒ์ ํธ๋ํฝ’๊ณผ ‘์ฝํ ์ธ ํ์ง’์ ํ๊ฐํ๊ธฐ ๋๋ฌธ์, ์์ธ ๋ฌธ์ ๋ ์ง์ ์ ์ธ ์ํฅ์ ๋ฏธ์น ์ ์์
โ ์ ๋์ผ์ค ์์ต ์ฐฝ์ถ์ด ์ ๋๋ ์ด์ ์ค ํ๋๊ฐ ์์ธ ๋ฌธ์ ์ผ ์๋ ์์
- ๊ตฌ๊ธ์ด ์์ธ์ ํ์ง ์์ผ๋ฉด ๊ฒ์ ์ ์ ์ด ์ ์ด์ง๊ณ , ์ ๋์ผ์ค์์๋ ์ ํ์ง ์ฌ์ดํธ๋ก ํ๋จ ๊ฐ๋ฅ
- ํนํ, 404 ์ค๋ฅ ํ์ด์ง๊ฐ ๋ง์ผ๋ฉด ์ ๋์ผ์ค ์น์ธ์ ๋ถ์ ์ ์ธ ์ํฅ์ ์ค
๐ ์ ๋์ผ์ค ์น์ธ ๋ฐ์ผ๋ ค๋ฉด?
โ ํ์ ์๋ ํ์ด์ง ์์ธ ์ ์ธ (robots.txt & noindex ์ค์ )
โ ๊ตฌ๊ธ ์์น ์ฝ์์์ ‘์์ธ ์์ฒญ’ํ์ฌ ์ ์ ๋ฑ๋ก ํ์ธ
โ ๊ณ ์ ํ ์ฝํ
์ธ ์์ฑ (๋จ์ ๋ณต์ฌ·๋ฒ์ญ๋ ๊ธ์ด ๋ง์ผ๋ฉด ์น์ธ ์ด๋ ค์)
๐ฏ ๊ฒฐ๋ก : ์ด๋ ๊ฒ ํด๊ฒฐํ์ธ์!
โ
(1) ํฌ๋กค๋ง๋ ํ์ด์ง๊ฐ ๋ง์์ง๋ ์ด์ → ํ๊ทธ/์นดํ
๊ณ ๋ฆฌ/์ญ์ ๋ ๊ธ ๋ฑ์ด ํฌํจ๋๊ธฐ ๋๋ฌธ
โ
(2) ์์ธ๋์ง ์๋ ํ์ด์ง ํด๊ฒฐ๋ฒ
robots.txt
&noindex
์ค์ ํ์ธ- ๊ตฌ๊ธ ์์น ์ฝ์์์ ์๋ ์์ธ ์์ฒญ
โ (3) ์ ๋์ผ์ค ์ํฅ → ์์ธ ์ค๋ฅ๊ฐ ๋ง์ผ๋ฉด ์น์ธ·์์ต ์ฐฝ์ถ์๋ ๋ถ์ ์ ์ํฅ
๐ ์ต๋ํ ๋น ๋ฅด๊ฒ ์์ธ ๋ฌธ์ ํด๊ฒฐ ํ ์ ๋์ผ์ค ์น์ธ์ ๋ค์ ์์ฒญํ์ธ์! ๐
๋๊ธ