🌈 검색엔진 최적화
🔥 검색엔진 최적화
🔥 robots.txt
🔥 페이지 랭크(Page Rank)
1. 검색엔진 최적화
2. robots.txt
- 웹사이트에 크롤링, 검색엔진, 해킹 등으로 생각보다 많은 기계(User가 아닌)들이 접속하게됨
- 이런 방식으로 접근하는 로봇(프로그램)들에게 접근을 허용할 수도있고 접근을 금지시킬 수도 있음
- 이를 제어하는 것이 robots.txt 파일임
- 웹사이트 별로 robots.txt 파일을 확인하는 방법은 웹사이트 url에 "robots.txt"를 붙이면 됨

- https://www.google.com/robots.txt

- User-angent와 Disallow, Allow 목록을 나타나고, Disallow는 어떤 목적에 의해서 차단하는 경로를 명시하고 있음
- 다만, robots.txt는 보안 도구는 아니며, 트랙픽을 조절하거나 네트워크를 통해 접속하는 프로그램을 제어하는 역할을 함
3. 페이지 랭크(Page Rank)
- 똑같은 단어를 두개의 싸이트가 가지고 있었을 때, 어떤 사이트를 상위에 노출시켜주느냐가 패이지 랭크임
- 음원 순위처럼 페이지의 순위를 매기는 알고리즘이 이에 점수를 매김
- 기본적인 원리는 똑같은 단어를 가진 2개의 사이트 A,B가 있을 때, A에 접속할 수 있는 링크를 가진 다른 사이트들의 갯수가 B에 접속할 수 있는 링크를 가진 사이트들 보다 많을 때 A 사이트가 랭크가 높아짐
- 즉, User가 접근할 수 있는 경로를 더 많이 가진, 사이트가 더 상위 높은 점수를 얻게 됨
- 많은 사이트들이 링크를 하고 있다면, 더 좋은 컨텐츠를 가질 가능성이 높음을 설명해주는 지표임
