파이썬 크롤링 스크래핑 프로그램 맞춤 제작

"웹상에 존재하는 모든 데이터는 디지털 시대의 새로운 원석입니다."

하지만 이 원석들은 채집되고 가공되어야지만 비로소 가치있느 보석이 될 수 있습니다.

저의 데이터 수집/가공 기술을 통해 여러분이 원하는 모든 디지털 원석들을 수집/가공할 수 있도록 도와드리겠습니다.

[전문가 소개]

안녕하세요!

저는 이커머스(온라인 마켓) 분야와 부동산 분야의 정보제공 서비스를 운영하는 중견기업/스타트업 등에서 데이터 수집 크롤러, 자동화 프로그램 개발 담당자로 활약해오면서 빠르고 안정적인 데이터 수집 및 자동화 프로그램 개발 프로세스를 정립해왔으며 수 많은 기업의 업무 효율과 가치있는 데이터를 제공하는데 큰 기여를 해왔습니다.

검증된 개발 커리어 뿐만아니라 IT 분야에서 사업/기획/영업 부서에서 활약한 경험과 IT 서비스 회사 창업 경험이 있습니다. 이러한 경험을 토대로 개발자의 관점이 아닌 사용자와 사업자의 관점으로 고객이 원하는 니즈와 불편사항(문제)을 정확하게 파악하고 해결할 수 있는 자질을 키웠습니다. 불필요한 커뮤니케이션 비용을 줄이고, 고객이 원하는 결과물을 누구보다 빠르게 제공할 자신 있습니다.

그리고 가장 중요한 것이 사후 관리 및 프로그램의 안정성인데, 저는 엔터프라이즈급 크롤러 및 자동화 프로그램을 개발한 경험을 바탕으로 안정적으로 돌아가는 프로그램 구조를 항상 염두해 두고 개발합니다. 안정적인 프로그램을 제공할 수 있으며, 추후 사후 관리 또한 누구보다 빠르게 응대할 수 있도록 하겠습니다.

파이썬 언어를 기반으로 데이터 수집과 자동화 프로그램 개발을 주력으로 하고 있으나 현재 회사에서 벗어나 저만의 IT 서비스를 개발하고 있어서 다양한 프로그래밍 언어에 능숙하고

거의 모든 웹 서비스 기능(UI, 데이터베이스, 벡엔드 등)이 가능합니다. 여러분의 모든 아이디어를 현실로 만들어줄 프로그램 개발이 가능합니다.

누구보다 빠르고! 안정적이고! 정확하고 합리적인 비용으로 여러분의 꿈을 완성시켜 드리겠습니다!

[데이터 수집/파싱/저장 크롤러 프로그램]

- 웹 상에 존재하는 모든 데이터 수집 및 저장 프로그램

- UI가 있는 프로그램(Python TKinter 등) 형태 혹은 명령프롬프트(콘솔, cmd)에서 실행 가능하도록 크롤러를 제작 IT 비전공자가 로컬 PC에서 설치해서 사용할 수 있도록 제공

- 크롤러 API (Python FastAPI 등) 형태로 개발 및 제공

- 엑셀 데이터 뿐만아니라 서비스 개발을 원하는 분을 위해 데이터 수집 이후 mongodb, mysql 등과 같은 데이터베이스와 연동하여 저장할 수 있도록 제작

- 특정 데이터 수집/가공 작업이 필요한 일반인이든 데이터 수집 크롤러 API 기능이 필요한 개발자든 상관없이 요구사항에 맞게 개발 가능

[추천하는 분들]

- 필요한 데이터를 수집하고 테이블 형태(엑셀, DB 등)로 저장하고 싶어요.

- 이런 작업도 자동화가 가능할까요?

- 웹사이트에 있는 데이터를 어떻게든 가공해서 제가 활용하고 싶어요.

- 회사/개인 프로젝트에서 데이터 수집 크롤러(API 등) 기능이 필요한데 믿을 수 있는 사람에게 맡기고 싶어요!

- 데이터를 활용해서 저만의 웹 사이트 혹은 웹 서비스를 만들고 싶어요.

- 반복되는 웹서칭, 웹데이터수집 및 정리 업무를 자동으로 처리하고 싶어요.

- 이커머스나 부동산 업계 종사하는 사람인데 데이터를 통해 세일즈 인사이트를 얻고 싶어요.

- 그밖에 다른 분야 업계에 종사하는 사람인데 데이터를 통해 시장 인사이트를 얻고 싶어요.

[프로젝트 개발 이력]

(프로젝트 개발 이력 상세 정보는 포트폴리오를 참고해주세요!)

# 온라인 마켓(이커머스) 분야

1. [네이버 쇼핑] 상품 리스트 크롤러

2, [네이버 데이터랩] 인기 검색어 Top500 크롤러

3. [네이버 데이터랩] 쇼핑인사이트 기간별 검색 빈도 수집 크롤러

4. [네이버 광고] 키워드 도구 연관 키워드 조회 데이터 수집

5. [네이버 쇼설미디어] 네이버 블로그, 카페, 뉴스 데이터 수집 크롤러

6. [네이버 쇼설미디어] 네이버 블로그, 카페, 뉴스 데이터 수집 크롤러

6. [오픈 마켓] 실시간 인기 키워드 수집 크롤러

7. [오픈 마켓] 연관 검색어 / 자동완성 검색어 수집 크롤러

8. [오픈 마켓] 베스트 상품(Top100) 수집 크롤러

# 부동산 분야

1. [국토부 공공데이터] 실거래가 수집 크롤러

2. [국토부 공공데이터] 건축물대장/토지대장 내재화 작업

# 그밖에 여러분이 생각하시는 모든 데이터 수집/가공/저장 프로그램 개발이 가능합니다.

1. 문의 및 상담 신청

2. 고객 요구 사항 분석

3. 프로그램 제작 방향 및 금액 제시

4. 상품 결제

5. 개발 시작

6. 결과물 제공(환경 설정, 설치 가이드 제공)

7. 동작 테스트

8. 최종 구매 확정

1. 원하시는 데이터나 사이트 링크(URL)

2.프로그램 제작 방향 및 대략적인 요구사항

3. 최대한 자세하게 원하시는 내용을 많이 말씀해주시면, 정확하고 빠른 제작이 가능합니다.

4. 하지만 처음에는 이런 내용들을 정리하기 힘드신분들이 계실거라고 생각합니다. 이런 분들은 일단 상담 신청하셔서 저와 함께 고민해보시죠!