웹 크롤링, 데이터 수집, 가공, 시각화

데이터 수집부터 AI, 시각화까지 데이터 활용에 필요한 모든 서비스를 제공합니다.

[수행 프로젝트]

- 데이터 머신러닝 센터 구축

- 국내 커뮤니티 수집

- 웹 페이지 키워드 감시센터 구축

- 국내 오픈마켓 상세페이지 수집

- 하루 10억건 데이터 머신데이터 시각화

- 자동화 그래프 툴 개발

[크롤링 예시]

- 쇼핑 상품별 최저가 수집

- 쇼핑몰 상품 베스트/가격/이름/이미지/댓글/상품명/썸네일 등 데이터 수집

- 지도 검색 데이터 수집

- 특정 키워드로 검색된 뉴스 기사 수집

- 채용 사이트 데이터/연락처 수집

- 내 블로그 순위 확인

- 해외/국내 뉴스 자동 번역 스크랩

- 이미지 크롤링, 크기 자동 조절 저장

- 데이터 수집 및 이메일 자동 발송 자동화

- 네이버 블로그 구독자 수집

- API 데이터 수집

[개발언어 및 환경]

- Python

- Typescript

- Javascript

- React

- Chrome Extension

- Android / IOS

- Mysql / mongodb

[개발하는 프로그램 범위]

- 웹사이트 크롤링

- 반복 작업 자동화

- 수집된 데이터의 전처리

- 실시간 데이터 api 구축

- db 구축 및 데이터 저장

- 저장된 데이터 차트/표로 시각화

* 업무를 자동화함으로써 시간과 비용을 아끼실 수 있습니다.

* 법적에 문제되는 개인정보, 불법 사이트 등은 크롤링 하지 않습니다.

1. 상담진행

문의사항, 요구사항을 바탕으로 담당자와 상담을 진행합니다.

2. 제시안 전달

상담 내용을 바탕으로 제시안을 전달해드립니다.

3. 최종 결정 안내

작업 기간, 자세한 사항을 안내합니다.

4. 작업 시작

작업을 시작합니다.

5. 결과물 전달

작업물을 전달하고 검수 기간을 가집니다

6. 의뢰 완료 (필요시 수정)

데이터 누락 / 데이터 타입 등 확인된 오류에 대한 수정 후 결과물을 다시 전달합니다.

7. 구매확정

구매확정을 하시고 서비스에 대한 리뷰를 남겨 주세요

1. 크롤링을 원하시는 웹사이트 주소를 알려주세요

2.사이트별로 수집하려는 데이터에 대해 알려주세요

- ex. 언론사별 가장 많이 본 뉴스 에서 제목과 출처 썸네일 추출해주세요.

3.결과물의 포맷을 알려주세요

- ex. json, excel , api 등...

24시간 언제든 문의를 남겨주시면,

영업시간 (평일 9시~오후 7시)내에 답변을 드리고 있습니다.

자세하게 문의 사항을 남겨주세요.