앤트힐 스파이더를 이용한 효율적인 데이터 스크래핑
Anthill Spider는 ChatGPT 사용자가 대화 기록을 효율적이고 안전하게 내보낼 수 있도록 설계된 Chrome 확장 프로그램입니다. 이 무료 도구는 사용자가 모든 대화를 스크랩할 수 있게 해주며, 지연 로드된 대화도 포함되어 있으며, 프롬프트/응답 쌍을 자동으로 추출합니다. .JSON 및 .JSONL 형식으로 내보내기를 지원하여 다양한 AI 훈련 파이프라인과 호환됩니다. 사용자는 데이터 개인 정보를 손상시키지 않고 AI 연구 또는 개인 분석을 위해 쉽게 사용자 정의 데이터 세트를 생성할 수 있습니다. 모든 작업은 사용자의 장치에서 로컬로 수행됩니다.
설치 과정은 간단하며, 사용자가 확장 프로그램을 설치하거나 Chrome 확장 프로그램 페이지에서 압축 해제된 상태로 로드해야 합니다. 설치가 완료되면 사용자는 ChatGPT를 사용하는 동안 Anthill Spider 아이콘을 클릭하여 내보내기 프로세스를 시작할 수 있습니다. 이렇게 하면 도구가 백그라운드 탭에서 대화를 열고 다운로드를 위한 데이터를 준비합니다. 개인 정보 보호에 중점을 둔 Anthill Spider는 데이터가 수집되거나 추적되거나 외부 서버로 전송되지 않도록 보장하여 개발자, 연구원 및 AI 애호가에게 훌륭한 선택이 됩니다.