스닙팟에서는 다양한 콘텐츠 들이 자동으로 수집되어 스닙으로 포스팅하고 있는 봇 (bot) 이 있어요. 실시간으로 인기있는 정보들, 재미있는 비디오 등 다양한 콘텐츠가 올라옵니다.
기본적으로 봇이 포스팅한 스닙의 포인트 는 0 으로 일반 유저가 반응하지 않는 경우, 일반 유저가 포스팅한 스닙 보다 랭킹이 낮게 됩니다.
스닙팟 봇이 콘텐츠를 포스팅할 때 외부 크롤링을 원치 않는 다고 판단될 때 포스팅을 하지 않습니다.
콘텐츠를 포스팅하는데 있어 가장 중요한 검토 기준은 해당 정보의 소유자가 해당 정보를 외부에서 크롤링하길 원하지 않는 경우에는 크롤링 하지 않는 것 입니다.
•
크롤링 될 사이트의 “/robots.txt” 가 중요한 역할을 하고 있습니다. 해당 웹 표준에 따라 외부 크롤링을 허가하지 않을 때 크롤링을 하지 않고 있습니다. (* Google 검색 센터 robots.txt 소개 페이지 )
•
스닙팟에서 기본적인 봇 유저 에이전트 (User Agent) 이름을 ‘Snippod-Bot’ 으로 하고 있습니다.
•
플랫폼 유형 (YouTube 등) 에서 유저가 생산하는 콘텐츠의 경우 해당 플랫폼에서 제공하는 ‘퍼가기 제한’ 등의 옵션을 켜둔 경우 크롤링을 최소화 하고 있습니다.
스닙 생성 단계에서, 콘텐츠 해석이 어려운 경우 포스팅을 하지 않습니다.
대부분의 웹 페이지는 웹표준에 따라 HTML Meta 태그 등에 외부에 스니펫에 보여지길 원하는 대표 이미지, 제목, 요약 등의 정보를 포함하게 되는데요. 이때 이러한 선언이 적절하지 않아 충분히 해당 콘텐츠를 잘 설명하지 않은 경우 크롤링을 최소화 하고 있습니다.
•
•
로그인 해야만 전체 콘텐츠에 접근이 가능하도록 외부 공개를 제한한 콘텐츠의 크롤링은 최소화하고 있습니다.
•
선언된 #해시태그, 카테고리, 키워드 등의 메타 정보가 본문과 다른 내용을 포함한 경우 크롤링을 최소화 하고 있습니다.
스닙팟에서 공유되기에 적합하지 않은 콘텐츠를 포스팅 하지 않습니다.
스닙팟은 ‘주제 별 콘텐츠 공유’ 서비스이기 때문에 특정 “주제”에 대한 태그가 되어야 합니다. 이러한 부분을 고려하여 태그 될 만한 팟 (Pod) 이 존재하지 않는 경우 포스팅하지 않습니다.
좋은 콘텐츠 들이 계속해서 모이고 있어요.
스닙팟은 인터넷 세상에서 공유되는 다양한 콘텐츠 중 유저들에게 유익하거나 좋아할 만한 정보에 대해 지속적으로 크롤링하고 있습니다. 만약 봇이 이를 감지하지 못하고 있고 좋은 정보를 발견하셨다면 아래 링크를 통해 좋은 URL 목록이 있는 링크를 접수 부탁드립니다!