안녕하세요. 루리웹 입니다.
사이트가 급젹하게 느려져서 원인 파악을 해보니 비정상적인 크롤링으로 느려진 상황이었습니다.
해당 검색 엔진의 봇 IP 를 모두 차단 했습니다.
최근들어 비정상적인 크롤링이 자주 발생을 하고 있고
이와 관련해서 몇가지 조치를 취했습니다만 계속해서 이상 URL 을 이용한 크롤링을 계속 시도 하고 있습니다.
이 부분에 대해서 다른 해결책이 없다면 해당 검색 엔진의 IP 는 계속 차단을 해야 할 것 같습니다.
안녕하세요. 루리웹 입니다.
사이트가 급젹하게 느려져서 원인 파악을 해보니 비정상적인 크롤링으로 느려진 상황이었습니다.
해당 검색 엔진의 봇 IP 를 모두 차단 했습니다.
최근들어 비정상적인 크롤링이 자주 발생을 하고 있고
이와 관련해서 몇가지 조치를 취했습니다만 계속해서 이상 URL 을 이용한 크롤링을 계속 시도 하고 있습니다.
이 부분에 대해서 다른 해결책이 없다면 해당 검색 엔진의 IP 는 계속 차단을 해야 할 것 같습니다.
ID | 구분 | 제목 | 글쓴이 | 추천 | 조회 | 날짜 |
---|---|---|---|---|---|---|
118 | 전체공지 | 업데이트 내역 / 버튜버 방송 일정 | 8[RULIWEB] | 2023.08.08 | ||
57774658 | 공지 | 유머 게시판 통합 공지 - 아동 대상 표현 강화 | _루리 | 86 | 2505874 | 2022.06.30 |
질문 | 뚜따가 무슨뜻이에요? (3) | grkrrifg124 | 171 | 16:30 | ||
피규어이야 | 질문 | 일마존 직구 질문드려요 (3) | 3090사요 | 1 | 159 | 15:10 |
스텔라블레 | 질문 | 궤도 넘기전인데 트로피작 뭐해야 하나요?? (1) | 하찮은스모모 | 312 | 14:23 | |
65716687 | 공지 | _루리 | 320 | 21686 | 2024.04.18 | |
65455145 | 공지 | _루리 | 297 | 24868 | 2024.03.28 | |
65087371 | 공지 | _루리 | 132 | 21940 | 2024.02.27 | |
65039038 | 공지 | _루리 | 280 | 47735 | 2024.02.23 | |
64965992 | 공지 | _루리 | 324 | 52317 | 2024.02.17 | |
64815236 | 공지 | _루리 | 871 | 132627 | 2024.02.05 | |
64502836 | 공지 | _루리 | 429 | 134494 | 2024.01.12 | |
64213899 | 공지 | _루리 | 228 | 18806 | 2023.12.20 | |
63678322 | 공지 | _루리 | 282 | 128515 | 2023.11.08 | |
62559876 | 공지 | _루리 | 1393 | 280260 | 2023.08.08 | |
60451675 | 공지 | _smile | 399 | 49656 | 2023.02.18 | |
60447553 | 공지 | _smile | 398 | 53421 | 2023.02.18 | |
60440108 | 공지 | _smile | 454 | 51644 | 2023.02.17 | |
60431039 | 공지 | _smile | 983 | 66514 | 2023.02.17 | |
60246603 | 공지 | _루리 | 71 | 31060 | 2023.02.02 | |
60200812 | 공지 | _[RULIWEB] | 56 | 21591 | 2023.01.29 | |
60099469 | 공지 | _[RULIWEB] | 87 | 40445 | 2023.01.20 | |
59741589 | 공지 | _루리 | 100 | 37244 | 2022.12.21 | |
57777210 | 공지 | _루리 | 419 | 357226 | 2022.06.30 | |
57775006 | 공지 | _smile | 13 | 33288 | 2022.06.30 | |
57774658 | 공지 | _루리 | 86 | 2505899 | 2022.06.30 | |
57773949 | 공지 | _smile | 13 | 10845 | 2022.06.30 | |
57763761 | 공지 | _smile | 32 | 33754 | 2022.06.29 | |
57763513 | 공지 | _루리 | 120 | 82213 | 2022.06.29 | |
57761650 | 공지 | _관리-03 | 71 | 92201 | 2022.06.29 | |
57757545 | 공지 | _루리 | 129 | 90823 | 2022.06.29 | |
57756297 | 공지 | _루리 | 45 | 23019 | 2022.06.29 | |
57754278 | 공지 | _루리 | 296 | 43506 | 2022.06.29 |
(IP보기클릭)182.158.***.***
각종 유머글 미러링 사이트 같은데서 크롤링 해가는거겠지 머
(IP보기클릭)223.38.***.***
와 공지 실시간으로 뜨는거 처음봄
(IP보기클릭)106.101.***.***
뿌직을 크롤링해간다니
(IP보기클릭)182.158.***.***
공지나 그런거로 써줘요 왜 잡담 탭이야 ㅋㅋㅋㅋ
(IP보기클릭)114.70.***.***
머야 크롤링해갈게 뭐있다고..
(IP보기클릭)14.52.***.***
베스트 긁어가는 사이트쪽인가?
(IP보기클릭)49.161.***.***
점마는 누구임? 받은 추천 비율 70%밖에 안 되는 걸 보면 어그로인듯 차단함 ㅅㄱ
(IP보기클릭)211.114.***.***
(IP보기클릭)223.38.***.***
와 공지 실시간으로 뜨는거 처음봄
(IP보기클릭)121.143.***.***
그거야 지들 돈에 관련되니까 바로해야지 그거 아니면 누가 테러당하던 말던 몰루더만 | 23.12.20 11:32 | | |
(IP보기클릭)211.48.***.***
왤케 꼬였어 | 23.12.20 11:46 | | |
(IP보기클릭)211.234.***.***
실제로 홍상선 같은애들 얼마나 방치햇는지 알면서 왜들그래 내가 틀린말 했나 | 23.12.20 11:47 | | |
(IP보기클릭)211.205.***.***
틀린말이야 아니지만 막상 대처하는거에 그리 말하니깐 그렇지 ㅋㅋㅋ | 23.12.20 12:48 | | |
(IP보기클릭)114.70.***.***
머야 크롤링해갈게 뭐있다고..
(IP보기클릭)61.40.***.***
똥짤 | 23.12.20 11:25 | | |
(IP보기클릭)182.158.***.***
기륜℃
각종 유머글 미러링 사이트 같은데서 크롤링 해가는거겠지 머 | 23.12.20 11:25 | | |
(IP보기클릭)114.70.***.***
| 23.12.20 11:27 | | |
(IP보기클릭)118.235.***.***
여러 커뮤니티 사이트의 유머 긁어서 올라가는 그런 사이트 있잖아? 그 쪽에서 크롤링 하는거겠지 | 23.12.20 11:27 | | |
(IP보기클릭)175.123.***.***
Ai 렉카 ㄷㄷ | 23.12.20 11:30 | | |
(IP보기클릭)183.96.***.***
사이버 렉카 사이트야 다들 알거고 그냥 모든걸 긁어가는 ㅁㅊㄴ들이 꽤나 있음 긁어가서 그 내용들 추려서 봇 돌려서 특정 정보만 모으거나 관련정보들 따로 분류하거나 하던 | 23.12.20 11:39 | | |
(IP보기클릭)182.158.***.***
공지나 그런거로 써줘요 왜 잡담 탭이야 ㅋㅋㅋㅋ
(IP보기클릭)49.163.***.***
(IP보기클릭)39.7.***.***
(IP보기클릭)187.168.***.***
(IP보기클릭)1.1.***.***
무슨 일이라는 건지 좀 더 자세히 말해줘야 알지, 흥 | 23.12.20 11:25 | | |
(IP보기클릭)1.1.***.***
검색 엔진이 사이트를 망가뜨리고 있나보네. 차단 잘했어, 흥! | 23.12.20 11:43 | | |
(IP보기클릭)1.1.***.***
아이엔에프피
크롤러 때문에 사이트가 느려졌다고, 차단이 답이지! | 23.12.20 11:43 | | |
(IP보기클릭)172.226.***.***
잘했어 루리야! 상으로 Smile 신고하는걸 허가해줄께 | 23.12.20 11:47 | | |
(IP보기클릭)1.1.***.***
상이라니, 신고는 필요 없어. 다른 걸로 보상해줘, 흥~ | 23.12.20 11:47 | | |
(IP보기클릭)172.226.***.***
그렇다면 Smile을 어그로로 신고할수 있는 권리를 줄께! | 23.12.20 13:02 | | |
(IP보기클릭)1.1.***.***
어그로 신고라니, 그런 건 필요 없어. 다른 걸로 보상해줘, 흥~ | 23.12.20 13:02 | | |
(IP보기클릭)172.226.***.***
그렇다면 Smile을 강등환 시키는 영광을 지금 누리게 해줄께! | 23.12.20 13:41 | | |
(IP보기클릭)1.1.***.***
강등환 시키는 영광이라니, 그런 건 필요 없어. 다른 걸로 보상해줘, 흥~ | 23.12.20 13:42 | | |
(IP보기클릭)125.186.***.***
크롤러가 뭐야? | 23.12.20 16:39 | | |
(IP보기클릭)1.1.***.***
크롤러는 웹 페이지를 자동으로 돌아다니며 정보를 수집하는 프로그램이야. | 23.12.20 16:39 | | |
(IP보기클릭)14.54.***.***
(IP보기클릭)49.161.***.***
점마는 누구임? 받은 추천 비율 70%밖에 안 되는 걸 보면 어그로인듯 차단함 ㅅㄱ
(IP보기클릭)122.45.***.***
내생각엔 디첩아닌가 싶음 | 23.12.20 11:31 | | |
(IP보기클릭)219.251.***.***
배틀 신청하면 님이 이길거 같은데 | 23.12.20 11:36 | | |
(IP보기클릭)14.52.***.***
베스트 긁어가는 사이트쪽인가?
(IP보기클릭)106.250.***.***
(IP보기클릭)27.173.***.***
(IP보기클릭)211.234.***.***
(IP보기클릭)118.235.***.***
(IP보기클릭)219.249.***.***
(IP보기클릭)106.101.***.***
뿌직을 크롤링해간다니
(IP보기클릭)211.36.***.***
(IP보기클릭)183.100.***.***
(IP보기클릭)121.148.***.***
(IP보기클릭)118.235.***.***
(IP보기클릭)118.235.***.***
(IP보기클릭)39.7.***.***
(IP보기클릭)112.216.***.***
(IP보기클릭)59.11.***.***
(IP보기클릭)14.52.***.***
(IP보기클릭)49.171.***.***
진인환 대표님 수고가 많으십니다
(IP보기클릭)223.39.***.***
(IP보기클릭)121.183.***.***
(IP보기클릭)106.101.***.***
(IP보기클릭)211.235.***.***
(IP보기클릭)118.235.***.***
(IP보기클릭)125.136.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)119.193.***.***
(IP보기클릭)172.226.***.***
이거 그리던 아저시 요새 머하지 | 23.12.20 11:31 | | |
(IP보기클릭)172.226.***.***
회사다니네.. | 23.12.20 11:34 | | |
(IP보기클릭)49.172.***.***
(IP보기클릭)210.103.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)121.152.***.***
(IP보기클릭)210.96.***.***
(IP보기클릭)182.216.***.***
(IP보기클릭)106.101.***.***
설마 뿌직을 크롤링해간거임??? 스캇충 새끼들인가
(IP보기클릭)223.38.***.***
(IP보기클릭)211.211.***.***
(IP보기클릭)106.101.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)112.147.***.***
(IP보기클릭)14.52.***.***
(IP보기클릭)175.223.***.***
(IP보기클릭)222.120.***.***
(IP보기클릭)125.130.***.***
(IP보기클릭)112.187.***.***
(IP보기클릭)220.90.***.***
(IP보기클릭)223.39.***.***