awskiro 썸네일형 리스트형 [AWS Kiro] 크롤링으로 웹사이트 데이터 수집 및 번역 지난 1부에서 AWS Kiro에 대한 소개를 마치고, 이번에는 본격적인 실사용기를 들고 왔습니다. 최근 한 달간 Kiro와 함께한 세 가지 프로젝트 중 첫 번째로, 웹 크롤링 어플리케이션 개발 경험을 공유해보려고 합니다. 번역 프로젝트 비용 99.7% 절감... 이정도면 공짜네요! 몇 십만원을 몇 분 만에 날린 뼈아픈 경험담부터 토큰 최적화 꿀팁까지... 진짜 현실적인 이야기들 가득 담았으니 끝까지 읽어보세요! 특정 웹사이트에서 구조화된 정보를 체계적으로 수집할 필요가 생겼습니다.해당 사이트는 카테고리별로 정리된 콘텐츠 목록이 있고, 각 항목마다 상세 페이지가 따로 구성되어 있는 형태였어요.1. 게시판 목록 조회 ↓2. 게시판 내 모든 페이지를 돌면서 특정 컬럼 키워드 매칭 ↓3. 매칭된 페이지들.. 더보기 이전 1 다음