IT·프로그래밍

크롤링·스크래핑

크롤링은 저희에게 맡기시고, 더 중요한 일을 하세요

5.0(10)
비트플로우 프로필 이미지
비트플로우
연락 가능 시간 : 10시 ~ 23시
평균 응답 시간 : 2시간 이내세금 계산서 발행 가능
메인 이미지

최근 받은 리뷰

전체보기
즐*****_썸네일
5.0

즐*****

급한 일이었는데, 정말 모든 측면에서 만족했던 의뢰였습니다. 먼저, 원래 예정 기한보다 이틀이나 빨리 작업해주셨고, 그 이후 수정 작업도 빠르게 해주셨습니다. 캡차 때문에 크롤링 작업에 대해 개인적으로 눈앞이 깜깜했었는데, 해결되서 좋네요! 앞으로도 또 의뢰할일 있으면 의뢰토록하겠습니다bb

뽐*****_썸네일
5.0

뽐*****

처음에는 몇 가지 문제가 있었지만, 계속해서 보완해주셔서 잘 사용할 수 있게 됐습니다. 감사합니다~!

서비스 설명


크롤링, 크롤러, 스크래퍼, 자동화


안녕하세요 사장님


1. 웹사이트의 데이터를 긁어오고 싶은데, 어떻게 할지 막막하셨나요?

2. 나 대신 일해줄 자동화 시스템을 구축하고 싶은데, 어떻게 해야할지 몰라 막막하셨죠?

3. 캡차때문에 크롤링이 힘드셨나요 ?


사장님이 필요한 데이터는 어떻게든 수집해드립니다.


저희는 한국 콘텐츠 진흥원에서 진행한 해외 불법사이트들에 퍼진 우리나라 콘텐츠를

수집한 경험이 있어 (1,000개의 불법 사이트에서 데이터를 성공적으로 수집)


데이터를 수집하기 까다로운 사이트부터 N사, SNS 등 공식적인 사이트까지 넓은 범위의 작업이

가능합니다.


또한 셀레니움 사용을 최소화 하고 Packet 방식으로 작업하기 때문에 크롤링 프로그램이 필요하시다면 빠른 크롤링 프로그램 제공이 가능합니다.



- 캡차 등 크롤링 차단을 우회하는 엔진을 사내에 내부적으로 보유하고 있습니다.

- 대량의 데이터를 빠르게 수집할 수 있도록 효율적인 아키텍쳐 설계

- 고객의 요구에 맞춰 엑셀, CSV, JSON 혹은 데이터베이스 연동 등 맞춤 데이터 제공

- 번역, 정규화 등 정제 작업 제공

- 봇을 이용한 자동화 프로그램



- 블로그 지수 수집 및 가공

- N사 스토어 데이터 수집 및 가공

- SNS 팔로워 수집 및 가공

- 뉴스 데이터 수집 및 가공

- 커뮤니티 데이터 수집 및 가공

- 마케팅 솔루션

- 유튜브 댓글 수집


서비스 제공 절차

1. 문의를 통해 의뢰자의 기획 내용을 검토합니다.


2. 기획 내용을 바탕으로 사이트 구조를 분석합니다.


3. 고객님께 견적을 제시드립니다.


4. 크몽을 통해 결제를 진행합니다.


5. 크롤링 개발을 진행합니다.


6. 프로그램을 실행하는 영상 혹은 샘플을 제공해드리고 피드백을 전달 받습니다.


7. 피드백을 적용 후, 완성 프로그램 혹은 데이터를 고객님께 제공합니다.

의뢰인 준비사항

1. 데이터 수집을 원하는 사이트의 url을 제공해주십시오.


2. 수집을 원하는 페이지 목록을 제공해주십시오.


3. 페이지 별로 수집해야 하는 데이터가 무엇인지 알려주십시오.


4. 얼마나 많은 데이터를 수집해야하는지 여부를 알려주십시오.


5. 출력 데이터 포멧을 어떻게 할 지 알려주십시오(예를들어 엑셀, csv, json, DB연동)

기술 수준

고급:최적화 설계

팀 규모

2인 이상 5인 미만

상주 여부

상주 불가능

개발 언어

Java
Node.js
Python
상세이미지-0상세이미지-1상세이미지-2상세이미지-3

가격 정보

STANDARD

10,000

DELUXE

80,000

PREMIUM

150,000

패키지 설명

정적 데이터 수집

사이트 내부에 크롤링 방지기능이 없으며, 특수한 행위 없이(클릭, 스크롤 등) 데이터를 수집할 수 있는 경우

동적 데이터 수집

사이트 내부에 크롤링 방지기능이 없으며, 특수한 행위(클릭, 스크롤 등)가 필요한 사이트

고급 데이터 수집

사이트 내부에 크롤링 방지기능이 존재하며, 특수한 행위(클릭, 스크롤 등)가 필요한 사이트

페이지 수

1페이지

1페이지

1페이지

작업일

3일

5일

7일

수정 횟수

1회

1회

1회

전문가 정보

avatar

비트플로우

연락 가능 시간 : 10시 ~ 23시
평균 응답 시간 : 2시간 이내

총 작업개수

11건

만족도

100%

회원구분

기업회원

세금계산서

발행가능

소프트웨어 전문 기업 비트플로우 입니다. - 한국콘텐츠진흥원 저작권 유출 조사 사업에 데이터 수집 전문가로 참여 - 한양대학교 컴퓨터학부 전공 - N사 블로그 데이터 수집 및 분석 프로그램 개발(사용자 1000명 이상) - 쇼핑몰 데이터 수집 프로그램 개발 - 지도 기반 하이브리드 어플리케이션 로또투어 개발

수정 및 재진행

취소 및 환불 규정

상품정보고시

리뷰

5.0

(10)