데이터크롤러 제작해드립니다

안녕하세요. 현재 데이터 크롤러 제작 및 DB설계, API 구축 등의 업무를 맡고 있는 백엔드 개발자입니다.

주 업무가 데이터 크롤러 및 스케줄링, 안정화이기 때문에,

데이터 수집 자동화 프로세스가 필요하다면 시스템 제작 의뢰를 맡고보시기 바랍니다.

* ip 우회 방법도 보유하고 있어, 비교적 보안이 심하거나 차단이 잦은 사이트도 시도가능합니다.

단순 정적 웹사이트 부터 로그인 필요 및 동적 웹사이트 까지 의뢰 주시면,

충분한 검토 후 빠른시일 내에 답변드리겠습니다.

데이터 크롤러 GUI, 혹은 데스크탑앱이 필요하신 경우에도 문의 부탁드리겠습니다.

- 정적 단일 웹사이트 부터 다양한 페이지 동작이 필요한 동적 웹사이트 까지

- 다양한 포털 사이트 뉴스, 블로그, 파워링크, 쇼핑등의 페이지 노출 데이터

- OpenAPI 기반 데이터

- 로그인이 필요한 웹사이트에 노출되는 데이터

등등 조건에 따라 다양하게 작업이 가능합니다.

서버 보유 현황에 따라서, 주기별로 동작하는 크롤러도 제작이 가능합니다.

( 예: 매 시간 마다 N포털 뉴스데이터 수집 크롤러 )

csv, excel, db(mysql 기반) 등 원하는 아웃풋이 있으면 문의부탁드립니다.

1. 구체적인 작업 내용 상담 ( 웹사이트 및 수집 원하는 항목, 아웃풋 등 자세한 상담 )

2. 의뢰주신 웹사이트 분석 및 가능여부 판단

3. 결제

4. 개발 및 진행상황 공유

5. 결과 확인

6. 의뢰 최종 종료

1. 의뢰 요청 사항 준비

특정 웹사이트, 키워드로 검색 및 주기별로 데이터를 확인하고 싶어요!

2. URL( 웹사이트 주소 준비 )

- 로그인 및 페이지 이동이 필요한 경우 시나리오 준비

3. 수집 원하는 항목 준비

4. 원하는 OutPut 형태 준비