경쟁사 조사, 업계 동향 정리 — 결국 탭 수십 개를 열고 복사·붙여넣기를 반복하게 되죠. Firecrawl은 웹페이지를 AI가 읽기 좋은 형태로 바꿔주는 수집 도구입니다. 클로드에 연결해 두면 "이 사이트 정리해줘"가 말 한마디로 끝납니다. 연결법과 크레딧을 아끼는 사용 순서를 정리했습니다.
"리서치 = 탭 20개 열고 복붙 2시간이라고 생각하고 있다."
클로드에게 URL을 주고 정리를 시켜본 분들은 알겠지만 사이트에 따라 내용을 제대로 못 읽는 경우가 있습니다. 요즘 웹페이지는 화면을 자바스크립트로 그리는 경우가 많아서 AI가 열어도 빈 껍데기만 보이는 일이 생기기 때문입니다.
Firecrawl은 이 문제를 전문으로 푸는 도구입니다. 페이지를 실제 브라우저처럼 렌더링해서 AI가 읽기 좋은 마크다운으로 변환해 줍니다. 저장소 소개 기준으로 자바스크립트가 많은 페이지를 포함해 웹의 96%를 커버한다고 명시돼 있습니다. 클로드에 MCP로 연결하면 이 능력이 그대로 클로드의 손이 됩니다.
발급된 키는 fc-로 시작합니다. 요금은 수집량 기반 크레딧
방식이니 가입 시 현재 무료 제공량과 플랜을 직접 확인하세요.
클로드 데스크톱이라면 설정의 MCP(커넥터) 항목, 클로드 코드라면 MCP
설정 파일에 아래 JSON을 넣고
fc-YOUR_API_KEY 자리에 내 키를 넣습니다.
"firecrawl로 https://firecrawl.dev 첫 화면 요약해줘"라고 시켜서 페이지 내용이 정리돼 나오면 연결 성공입니다.
{
"mcpServers": {
"firecrawl-mcp": {
"command": "npx",
"args": ["-y", "firecrawl-mcp"],
"env": {
"FIRECRAWL_API_KEY": "fc-YOUR_API_KEY"
}
}
}
}
Firecrawl에는 기능이 셋 있습니다. 한 페이지를 읽는 scrape, 웹을 검색해 결과 본문까지 가져오는 search, 사이트 전체를 도는 crawl. 크레딧 소모가 이 순서대로 커지기 때문에, 저는 반드시 작은 것부터 쓰는 순서를 권합니다.
평소 자주 보는 페이지 하나로 시작하세요. 결과물이 어떤 형태로 오는지, 어떤 페이지에서 잘 되고 안 되는지 감이 옵니다. 소모도 페이지 단위라 가장 쌉니다.
검색과 본문 수집이 한 번에 되는 게 search입니다. 아래 프롬프트처럼 조사 주제를 주면 "검색 → 각 결과 읽기 → 표로 정리"까지 클로드가 이어서 합니다. 리서치 체감이 가장 크게 바뀌는 단계입니다.
사이트 전체 수집은 페이지 수만큼 크레딧이 나갑니다. "이 사이트의 요금 관련 페이지만" 처럼 범위를 좁혀 시키고, 전체 수집은 정말 필요한 경우로 아껴두세요.
firecrawl search로 [조사 주제]를 조사해줘. 결과 중 신뢰할 만한 페이지 5개의 본문을 읽고 [비교 기준 — 예: 가격 / 주요 기능 / 대상 고객] 기준으로 표로 정리해줘. 각 줄에 출처 링크를 붙여줘.
"경쟁사 A·B·C의 요금 페이지를 읽고 비교표로 만들어줘"가 한 번의 지시로 됩니다. 탭을 오가며 복붙하던 시간이 검수하는 시간으로 바뀝니다. 결과는 출처 링크와 함께 받아서 반드시 원문 확인을 거치세요.
2단계의 search 프롬프트를 주제만 바꿔 매주 반복하면 동향 정리 루틴이 됩니다. 같은 프롬프트를 메모해 두고 요일을 정해 돌리는 방식을 권합니다.
공공기관 안내 페이지, 브랜드 공식 문서처럼 "이 사이트 안에 다 있는데 흩어져 있는" 자료는 3단계의 범위 지정 crawl 감입니다. 수집 후 "이 내용으로 FAQ 만들어줘"까지 이어지면 자료집 하나가 나옵니다.
저장소는 오픈소스(AGPL-3.0)이고, 편하게 쓰는 경로는 호스티드 API + 크레딧 방식입니다. 무료 제공량은 시점에 따라 달라질 수 있어 가입 화면에서 직접 확인하는 것을 권합니다. 서버를 직접 설치해 쓰는 길도 있지만 관리 부담이 있어 초보에게는 권하지 않습니다.
기술적으로 읽히는 것과 그래도 되는 것은 다릅니다. 로그인 뒤 콘텐츠·유료 콘텐츠·수집 금지를 명시한 사이트는 피하고, 수집한 자료는 내부 검토용으로 쓰는 것을 기본으로 하세요. 공개 웹페이지의 내용 정리·비교가 이 도구의 정상 용도입니다.
기본 검색은 "찾기"에 가깝고 Firecrawl은 "페이지를 통째로 읽어 오기"에 강합니다. 자바스크립트가 많은 페이지, 여러 페이지 일괄 수집, 구조화(JSON) 출력이 필요할 때 차이가 납니다. 가벼운 질문은 기본 검색, 본격 리서치는 Firecrawl로 나눠 쓰면 됩니다.
네. 이 페이지의 경로(MCP 연결)는 설정 복붙 한 번 이후 전부 대화입니다. 개발자용 파이썬·노드 SDK도 있지만 몰라도 되는 선택지입니다.