실랑에 하느님 치과라고 운영한 부부를 칮습니다
Kimkim8888
1,090
18:19
검색 봇 차단 해제와 조회수 증가 (수정 완료)(2)
필고
쪽지전송
Views : 10,840
2024-11-20 08:19
자유게시판
1275577839
|
안녕하세요. 필고 회원님.
아래의 문제는 이미 수정이 되었습니다.
홈페이지에서 검색 봇이 글을 가져가는 경우, 조회수 증가를 시키지 않도록 변경을 하였습니다.
감사합니다.
---------------------------
안녕하세요 필고회원님
며칠사이 글의 조회수가 평소보다 굉장히 많이 늘어난 것을 확인을 할 수 있을 것입니다.
주된 이유는 검색봇(Search Engine Bot Crawler) 때문입니다.
그 동안 필고에서는 검색봇이 너무나 많이 필고의 글을 긁어가서 홈페이지가 느려지는 현상이 발생하였습니다.
그래서 구글과 네이버 검색 봇만 허용을 하고 다른 봇을 모두 막았습니다.
며칠 전 서버 증설을 하면서, 서버 성능이 매우 좋아져 검색 봇을 차단 해제하였습니다.
그 이후, 정말 듣도 보도 못한 수 많은 검색 봇들이 접속을 하고 있습니다.
- 구글, 빙, 페이스북/메타, 트위터, 네이버, 바이두 등의 유명 검색 엔진 또는 소셜 미디어 부터 시작해서
- 애플, 아마존 등의 대형 서비스 업체,
- 클로드, ChatGPT, Perplexity 등의 유명 AI cralwer 등
인공지능 시대가 열리면서, 과거와는 다르게 더욱 경쟁적으로 필고 데이터를 가져 가고 있습니다.
이러한 유명한 서비스들이 홈페이지 글을 가져가는 것은 전체에서 10% 도 안되며 중소규모 서비스 뿐만아니라 듣도 보도 못한 검색 봇들까지 정말 엄청나게 필고 사이트의 데이터를 수집해서 색인화 및 2차 가공한 다음 자신들의 사용자들에게 정보를 제공하고 있습니다.
검색 봇이나 AI 봇 등, 타 서비스에서 글을 가져가서 자사 회원들에게 서비스하고, 필고로 돌아오게 하는 것은, 결국에는 필고에 도움이 된다고 판단을 하고 있습니다.
이 조회 수 문제를 해결하기 위해서는 아래의 방법이 있겠습니다.
1. 단순히 과거 처럼 검색 봇을 모두 걸러내든지
2. 글 조회 기능을 없애 버리던지
3. 검색 봇이 글을 가져가는 경우는 조회수 증가를 하지 않던지 (가장 유력)
최대한 빠른 시간 내에 보완을 할 수 있도록 노력을 하겠습니다.
감사합니다.
아래의 문제는 이미 수정이 되었습니다.
홈페이지에서 검색 봇이 글을 가져가는 경우, 조회수 증가를 시키지 않도록 변경을 하였습니다.
감사합니다.
---------------------------
안녕하세요 필고회원님
며칠사이 글의 조회수가 평소보다 굉장히 많이 늘어난 것을 확인을 할 수 있을 것입니다.
주된 이유는 검색봇(Search Engine Bot Crawler) 때문입니다.
그 동안 필고에서는 검색봇이 너무나 많이 필고의 글을 긁어가서 홈페이지가 느려지는 현상이 발생하였습니다.
그래서 구글과 네이버 검색 봇만 허용을 하고 다른 봇을 모두 막았습니다.
며칠 전 서버 증설을 하면서, 서버 성능이 매우 좋아져 검색 봇을 차단 해제하였습니다.
그 이후, 정말 듣도 보도 못한 수 많은 검색 봇들이 접속을 하고 있습니다.
- 구글, 빙, 페이스북/메타, 트위터, 네이버, 바이두 등의 유명 검색 엔진 또는 소셜 미디어 부터 시작해서
- 애플, 아마존 등의 대형 서비스 업체,
- 클로드, ChatGPT, Perplexity 등의 유명 AI cralwer 등
인공지능 시대가 열리면서, 과거와는 다르게 더욱 경쟁적으로 필고 데이터를 가져 가고 있습니다.
이러한 유명한 서비스들이 홈페이지 글을 가져가는 것은 전체에서 10% 도 안되며 중소규모 서비스 뿐만아니라 듣도 보도 못한 검색 봇들까지 정말 엄청나게 필고 사이트의 데이터를 수집해서 색인화 및 2차 가공한 다음 자신들의 사용자들에게 정보를 제공하고 있습니다.
검색 봇이나 AI 봇 등, 타 서비스에서 글을 가져가서 자사 회원들에게 서비스하고, 필고로 돌아오게 하는 것은, 결국에는 필고에 도움이 된다고 판단을 하고 있습니다.
이 조회 수 문제를 해결하기 위해서는 아래의 방법이 있겠습니다.
1. 단순히 과거 처럼 검색 봇을 모두 걸러내든지
2. 글 조회 기능을 없애 버리던지
3. 검색 봇이 글을 가져가는 경우는 조회수 증가를 하지 않던지 (가장 유력)
최대한 빠른 시간 내에 보완을 할 수 있도록 노력을 하겠습니다.
감사합니다.
@알림 : 코멘트를 작성하시려면 로그인을 하십시오.
No. 96874
Page 1938
Reminder :
인공지능 GPT-4o Mini 적용 안내
Reminder :
필고 닉네임 업데이트 안내
( 12 )
사기꾼 노창권이란 사람 찻아요.
올해대박
1,271
15:42
왜에 무슨 일이든 하고싶은데 (9)
dori-1
6,233
24-11-26
조언 바랍니다. (17)
시골길여행
9,482
24-11-26
[이슈] 정우성 혼외자 논란 (13)
최민수는진짜...
14,098
24-11-26
와이프가 운전하다 황당한 사건을 겪었는데요 (8)
jayjayjays
16,258
24-11-25
채팅어플을 통한 만남 관련 안전공지 (5) 2
믿음소망사랑...
15,947
24-11-25
간절히 일자리를 찾습니다. (24) 4
울트라싸운드
28,747
24-11-25
1천여 채 삼킨 화마…필리핀 마닐라 빈민촌의 비극 (5)
hitchjang
14,433
24-11-25
앙헬 프렌드쉽 대낮 강도 (7)
hitchjang
17,920
24-11-25
궁금한점 다중아이디 쓰는분 (81)
Andrew Lee-1
45,837
24-11-24
연말연시 안전공지 1
믿음소망사랑...
6,715
24-11-24
조언좀 부탁드립니다 (9)
알리아빠
33,822
24-11-24
비자연장궁금 (8)
으랴차차차
25,158
24-11-23
직장을 찾고 있습니다. (2) 1
울트라싸운드
13,356
24-11-23
[사진] Good Morning. (Suman) (4) 1
20Billion
11,844
24-11-23
필리핀 선교 한국인 목사.종신형. 선고(팜팡가) (28)
Kimkim8888
56,311
24-11-22
캐논 EOS m50 판매합니다 (4)
sionk0916
25,402
24-11-21
독서 모임 (10)
소심쟁이
49,134
24-11-21