세상에서 가장 쉬운 AI 활용 크롤링 | 구글 AI 스튜디오, 커서 AI로 네이버 블로그 증권 데이터 수집 프로그램 만들기
게시일:
작성자: 자청의 유튜브 추출기
- 크롤링할 페이지 구조를 개발자 도구로 복사해 AI 스튜디오에 입력해요.
- AI가 코드를 만들어주면, 그 코드를 실행해서 키워드를 입력해요.
- 키워드에 맞는 네이버 블로그 포스팅 정보가 수집돼요.
- 또 명령하면, 프로그램이 자동으로 만들어지고 같은 작업을 할 수 있어요.
- 구글 AI 스튜디오는 무료로 AI 모델을 테스트하는 서비스예요.
- 오늘은 제미나 2.5 프로 모델을 사용했어요.
- 네이버 증권 페이지에서 코스피 100 종목 정보를 크롤링하는 예제를 해볼게요.
- 페이지 구조를 개발자 도구로 복사해서 AI에게 알려줘요.
- AI가 파이썬 코드를 만들어주면, 그걸 커서에서 실행해서 엑셀 파일로 저장해요.
- 처음에는 10개 정보만 들어오는데, 페이지 구조를 수정해서 100개까지 가져올 수 있어요.
- 파이썬 패키지가 설치 안 되면, AI가 알려준 명령어로 설치하면 돼요.
- 구조를 줄이면 더 복잡한 작업도 AI가 쉽게 도와줄 수 있어요.
- 이번에는 네이버 블로그에서 키워드 검색 후 상위 10개 포스팅 정보를 크롤링하는 예제도 보여줬어요.
- 키워드 입력 후, 블로그 제목, URL, 내용 요약까지 바로 보여줘요.
- 이 방법은 구조만 알려주면 AI가 크롤러를 바로 만들어주는 신기한 기술이에요.
- 오늘 보여드린 방법으로 간단한 크롤링 작업은 누구나 쉽게 할 수 있어요.
- 앞으로도 더 유익한 내용으로 찾아뵙겠습니다. 구독과 좋아요 부탁드려요!