AI 에이전트를 구축할 경우, 크롤링 전에 대상 사이트의 security.txt와 robots.txt를 확인하고 지침을 준수하세요.

AI 생성: 요약은 링크된 출처를 바탕으로 AI가 작성했습니다. AI 활용 방식