검색 AI 서비스를 써보고 있는데...
B

Lv.1 B739 (222.♡.231.180)

2024년 11월 10일 PM 12:05 · 수정됨(13:53)

조회 551 공감 0

검색을 하면 걸리는 사이트에서 AI 학습 및 활용 금지라고 명시를 해둔 것 같은데

예네는 그냥 긁어오는데 이게 과연 가능한건지 모르겠네요?


검색 AI 사이트 가이드에 자신들이 당신 사이트에 접근하는게 싫으면 Robots.txt

(로봇이 접근할 때 너는 뭐 들어올 수 있고없고 어쩌고 규약 명시하는게 있습니다.)

에다가 자신들 Disallow 해달라고는 하고 있습니다만.


근데 신기한건, 매이져 Chat 봇들은 싹 막았던데

그 회사는 재무제표 보고 곧 망할 회사라 생각하고 그냥 냅둔걸까요? ㅎㅎㅎ

댓글 (1)

  • ㄱㅡ

    ㄱㅡ Lv.1

    24.11.10 · 112.♡.175.146

    요즘 ai 엔진으로 웹사이트 크롤링하는 경우가 엄청 많죠
    이거 때문에 평소 트래픽이 10Mbps 안밖인 사이트가 갑자기 회선 500Mbps 풀로 차버려요 며칠간...
    ai봇들은 대부분 robots.txt 무시하고 긁어가서 그냥 ddos 로 차단 하거나 해외IP 차단 하는 거 말고는 답 없더라구요

댓글을 작성하려면 이 필요합니다.