IT-Hermes-Crawling

📎 서비스 링크

📎 IT-Hermes 애플리케이션 서버 레포
📎 IT-Hermes 배치 서버 레포
📎 IT-Hermes 프론트 레포

💭 IT 관련 컨텐츠 알림 서비스 - Crawling 서버

프로젝트 기간: 2023.01.04 ~

IT에 관심이 많은 유저에게 채용, 유투브, 뉴스 정보 등의 각종 IT 관련 컨텐츠를
유저 맞춤형으로 자동 알림해주는 서비스

• IT에 관련된 채용, 유투브, 뉴스 사이트를 크롤링
• 10분 간격으로 배치서버의 요청을 받아 최신 IT 관련 크롤링 컨텐츠를 수집
• 깃허브 액션으로 CI, 젠킨스로 CD 구축
• RabbitMQ를 이용해서 크롤링 데이터가 많아졌을시 장애 대응

📄 기술 스택

Nodejs, NCP,Javascript
Mysql 8.0,h2,Spring Data JPA
Jenkins, Github action
Docker, Docker hub
Feign Client
RabbitMQ

💭 전체 구조