검색 AI 서비스를 써보고 있는데...
알림
|
페이지 정보
작성일
2024.11.10 12:05
본문
검색을 하면 걸리는 사이트에서 AI 학습 및 활용 금지라고 명시를 해둔 것 같은데
예네는 그냥 긁어오는데 이게 과연 가능한건지 모르겠네요?
검색 AI 사이트 가이드에 자신들이 당신 사이트에 접근하는게 싫으면 Robots.txt
(로봇이 접근할 때 너는 뭐 들어올 수 있고없고 어쩌고 규약 명시하는게 있습니다.)
에다가 자신들 Disallow 해달라고는 하고 있습니다만.
근데 신기한건, 매이져 Chat 봇들은 싹 막았던데
그 회사는 재무제표 보고 곧 망할 회사라 생각하고 그냥 냅둔걸까요? ㅎㅎㅎ
댓글 1
/ 1 페이지
포니님의 댓글
이거 때문에 평소 트래픽이 10Mbps 안밖인 사이트가 갑자기 회선 500Mbps 풀로 차버려요 며칠간...
ai봇들은 대부분 robots.txt 무시하고 긁어가서 그냥 ddos 로 차단 하거나 해외IP 차단 하는 거 말고는 답 없더라구요