네이버 사이트등록 후 robots txt 파일 설정 방법

로봇 txt 를 설정하는 방법에 대해서 해 보도록 하겠습니다 여기 이제 네이버 서치 어드바이즈라고 이렇게 검색을 하시구요 이렇게 검색을 하시고 네이버 서치 어드바이즈를 클릭하고 이렇게 들어오신 다음에 웹마스트 도구로 이렇게 들어옵니다 그러면 사이트 등록을 진행을 하셨겠죠. 사이트 등록은 이전 동영상을 참고하세요. 사이트 등록을 하고 나면 이렇게 내가 등록한 사이트에 대해서 리포트라든지 뭐 이런 거 그 다음에 요청이라든지 뭐 이런 것들이 있는데요. 이제 이런 것들은 나중에 이 부분을 다루는 그때 동영상에서 참고하시고요. 여기 이제 검증이라는 게 있습니다. 우리가 사이트를 등록하고 나면 반드시 해줘야 되는게 robot.txt라는 이 파일을 설정을 좀 해줘야 됩니다. 이게 이제 왜 설정을 해야 되냐면 내 사이트에 검색엔진 로봇이 방문할 수 있게 허용해주는 그런 어떤 장치라고 생각을 하시면 될 것 같아요. 자 그래서 robot.txt로 이렇게 들어와 볼게요. 이렇게 들어오면 일단 밑으로 먼저 내려와 볼게요. 여기 보시면은 robot.txt라는 파일을 간단하게 생성하는 방법인데 네이버 검색 로봇 수집을 허용합니다. 모든 검색 로봇과 둘 중에 하나를 선택할 수 있게 되어있죠. 그럼 네이버 검색 로봇을 수집을 허용합니다. user-agent-etti-allow-thrush 이렇게 되어있구요. 그럼 제가 모든 검색 로봇으로 바꿔 볼게요. 모든 검색 로봇에 수집을 허용합니다 하니까 유저 에이전트 하고 여기 이제 평표로 바뀌었죠 이게 이제 모든 검색 로봇이라는 뜻입니다 자 모든 검색 로봇에 수집을 허용하겠다 뭐 그런 뜻이에요 자 요렇게 만든 요 로봇.txt 파일을 다운로드 받으실 수 있어요 제가 다운로드 한번 받아 볼게요 음 지금 이제 로봇.txt 이 txt 이렇게 되어있죠. 이렇게 되어있는 이유는 제가 이제 바탕화면에 이미 이제 이 파일이 하나가 다운이 되어있어요. 그래서 이제 저렇게 나오는 것 같습니다. 그래서 여기 보이시죠? 그러니까 이제 2번으로 나오는 거에요. 그래서 그냥 요거를 삭제를 한번 하고 다시 한번 다운받아 볼게요. 잠시만요. 바탕화면 가서 기존 파일을 한번 삭제를 해보겠습니다. 로봇.txt 파일을 이렇게 삭제. 그렇죠. 완전히 삭제를 했습니다. 자 그리고 다시 와서 이번에는 다시 한번 다운을 받아 볼게요. 다운로드 어 그래도 2가 이렇게 찍혀서 나오네요. 그러면은 일단 다운을 받고 다운을 받은 다음에 이름을 좀 수정을 할게요. 여기서 그냥 바로 수정을 해도 될 것 같습니다. 됐죠. 자 그러면 정상적으로 제대로 다운을 받으셨는지 한번 확인을 해봐야겠죠. 바탕을 넣어서 로봇.txt 파일이 제대로 여기 이제 있죠 제대로 로봇.txt 파일 자 그러면 여기에서 일단 모든 검색 로봇을 수집을 허용한다고 이렇게 적고 다운을 받았죠 로봇.txt 파일을 그러면 이제 이거를 어 여기에다 올려줘야 됩니다. 내 호스팅 호스팅 그 만약에 이제 원어프레스 홈페이지를 사용을 한다면 내가 설치한 내 호스팅 ftp에 요 로봇정 txt 파일을 올려줘야 됩니다. 자 그래서 어 그런 호스팅으로 접속하기 위해서는 이제 파일질라라고 하는 자 잠시만요 여기서 또 검색을 한번 해봐 드릴게요 파일신라라고 이렇게 검색을 하시면 요렇게 나오죠 그죠 그러면 요런거 바로 다운로드 되있네요 요런거 검색하시면 될것 같습니다 이렇게 들어와서 이제 파일진라 무료 클라이언트 무료 다운로드 이렇게 되있죠. 그래서 요즘 인터넷이 좀 느려서 그런데요. 이렇게 다운을 받으시면 될 것 같아요. 다운을 받고 설치를 하시면 요런식으로 프로그램이 하나 실행이 됩니다. 그러면 여기에는 호스트 명은 뭘 적어 줘야 되냐면요 자 내 워드 프레스 주소 예를 들어서 이제 요런 주소가 있다고 치자구요 잠시만요 메인으로 한번 나와볼게요 요런 주소가 있습니다 그러면 여기 주소를 이렇게 복제를 한번 해 볼게요 자 메모장 에다가 이렇게 붙여넣기를 한번 해볼게요 그러면 요기 앞부분 요거를 지워버립니다 그리고 여기서부터 여기까지 뒤에 슬러시도 지우세요 자 여기서부터 여기까지 순수 주소 요 부분을 요 부분을 여기 이제 호스트에서는 어 호스트 명이라고 하신 어 한다고 보시면 될 것 같아요 호스트 그죠 그 다음에 거기 이제 밑에 사용자 명이라고 돼 있죠 그죠 사용자 명 사용자 명예는 여기에 이제 id에 .mycafe24.com 앞에 있는 이 주소를 넣어 주시면 됩니다. 자 그 다음에 비밀번호는 이제 내가 호스팅 설치할 당시에 세팅했던 FTP 비번이라고 있을 거에요. 그죠? FTP 비번을 그대로 입력을 해주시면 됩니다. 자 그래서 저는 그렇게 입력을 하고 이제 빠른 연결을 이렇게 누르시면 요런 상태가 됩니다. 연결을 하기 전에는 이게 이제 보이지가 않아요. 그래서 이제 빠른 연결을 제대로 이거를 입력을 다 제대로 해주셨으면 빠른 연결을 눌렀을 때 요게 나옵니다. 그러면 여기에 보시면 www 라고 되어있죠 그죠 여기 이 폴더 안에 나의 WordPress 사이트에 다양한 파일들이 이렇게 들어가 있는데요 지금 이제 여기 보시면은 이제 이렇게 보세요 아무것도 없죠 자 그러면 이쪽으로 한번 와서 우리가 가이드를 한번 살펴 볼게요 robot.txt는 검색 로봇에게 사이트 및 웹페이지를 수집할 수 있도록 허용하거나 제한하는 국제건고안이라고 되어있죠. robot.txt 파일은 반드시 사이트의 루트 디렉토리에 위치해야 하며 텍스트 파일로 접근이 가능해야 됩니다. 뭐 루트 디렉토리 막 이렇게 나오니까 막 프로그램 용어 같고 어렵죠. 근데 이 루트 디렉토리라는 건 무슨 뜻이냐면 지금 여기 www에 나의 워드프레스가 설치가 되어 있잖아요. 그죠? 이런 상태를 root 디렉터리라고 합니다. 여기를 그죠? 자 그리고 보세요. 다운로드 된 로봇.txt 파일을 사이트 루트에 업로드한 후 로봇.txt를 수집 요청하면 변경 내용을 확인할 수 있습니다 라고 되어있죠 그러면 여기를 먼저 업로드를 해야겠죠 자 그러면 어떻게 업로드는 하냐 그냥 이쪽 이쪽이 이제 내 컴퓨터에요 그러면 데스크탑 우리가 바탕화면에 지금 저장을 했잖아요 그럼 바탕화면에 이렇게 쭉 내려 보시면 robot.txt 라는 파일이 나올 겁니다 자 잠시만요 한번 찾아 볼게요 자 이렇게 나오죠 그러면 robot.txt 를 그냥 더블 클릭 해주시면 됩니다 옆으로 이렇게 들어왔죠. 이렇게 되면 간단하게 끝난 거에요. 제대로 로봇.txt가 들어온 겁니다. 그러면 이제 간단하게 FileZilla를 통해서 FTP에 다운받은 로봇.txt 파일을 올려줬구요. 메모장 파일 이었죠. 그리고 여기에다가 모든 요거를 그냥 그대로 복제를 해서 이렇게 붙여넣기 해주시고 수집 요청만 한번 이렇게 눌러 주시면 됩니다. 자 그러면 업데이트의 일부 시간이 소요된다고 되어 있죠. 그러면 이제 지금 내가 등록하려고 했던 지금 요 사이트 그죠? 요 사이트에 robot.txt 파일은 완벽하게 이제 설치가 된 거라고 생각을 하시면 될 것 같습니다. 감사합니다.