当前位置：首页 > news >正文

零基础上手：Cursor + MCP 爬取 YouTube 视频数据

news 2025/8/30 6:21:14

前言

大模型与 AI 应用越来越普及的今天，实时、稳定地获取网络数据变得尤为重要。无论是做内容分析、趋势研究还是自动化任务，爬取和处理数据始终是绕不开的一环。
传统爬虫往往面临封禁、验证码、动态渲染等难题，而 Bright Data MCP（Model Context Protocol）为我们提供了一种更高效、更稳定的解决方案。本文将带你从零开始，结合 Cursor + MCP，快速实现对 YouTube 视频数据的爬取。

免费体验地址：Bright Data MCP
(除了免费的MCP以外，此链接注册送25刀，适用所有产品)

准备工作

在使用 MCP 之前，需要做一些准备：

安装 Node.js：确保本地环境具备运行 MCP 的条件。
选择运行模式：Bright Data MCP 提供自我托管和托管两种模式，可根据需求选择。
API 模型：
- 快速版（Fast API）：每月 5000 个免费额度，支持解锁器、SERP。
- PRO 版（Pro API）：功能更强大，支持浏览器 API、抓取器等高级功能。
高级设置：可在 Bright Data 控制台配置 Zone，包括 Web Unlocker Zone 和 Scraping Browser Zone。

Bright Data MCP

在爬取过程中使用 Bright Data MCP，它能帮我们解决爬虫里很多常见的难题：

搜索：可以直接从主流搜索引擎抓取实时结果，还能按地区定向搜索。
爬取：支持整站爬取，并且输出的数据对大模型非常友好。
访问：能自动绕过地理限制、验证码，还能渲染动态页面。
导航：甚至可以模拟真实用户的操作，像点按钮、翻页这些交互都能自动完成。

有了这些功能，爬取 YouTube 视频数据就不再是难事。

爬取结果

最终爬取结果如下：

[{"title": "AI Agents, Clearly Explained","url": "https://www.youtube.com/watch?v=FwOTs4UxQS4","channel": "Jeff Su"},{"title": "Zero To Your First AI Agent In 26 Minutes (no code)","url": "https://www.youtube.com/watch?v=DV0Ln7HRyJQ","channel": "Tina Huang"},{"title": "AI Agents Fundamentals In 21 Minutes","url": "https://www.youtube.com/watch?v=qU3fmidNbJE","channel": "Tina Huang"},{"title": "How to Build & Sell AI Agents: Ultimate Beginner's Guide","url": "https://www.youtube.com/watch?v=w0H1-b044KY","channel": "Liam Ottley"},{"title": "How to Build an Advanced AI Agent with Search (LangGraph Tutorial)","url": "https://www.youtube.com/watch?v=cUC-hyjpNxk","channel": "Tech With Tim"},{"title": "From Zero to Your First AI Agent in 25 Minutes (No Coding)","url": "https://www.youtube.com/watch?v=EH5jx5qPabU","channel": "Futurepedia"},{"title": "5 Types of AI Agents: Autonomous Functions & Real-World Examples","url": "https://www.youtube.com/watch?v=fXizBc03D7E","channel": "IBM Technology"},{"title": "The AI Agent Tutorial That Should've Been Your First (no code)","url": "https://www.youtube.com/watch?v=GchXMRwuWxE","channel": "Jeff Su"},{"title": "Introduction to ChatGPT agent","url": "https://www.youtube.com/watch?v=1jn_RpbPbEc","channel": "OpenAI"},{"title": "The Agent Factory - Episode 1: Agents, their frameworks and more","url": "https://www.youtube.com/watch?v=aLYrV61rJG4","channel": "Google Cloud Tech"},{"title": "Introducing Manus: The General AI Agent","url": "https://www.youtube.com/watch?v=K27diMbCsuw","channel": "Manus AI"},{"title": "【生成式AI時代下的機器學習(2025)】第二講：一堂課搞懂AI Agent 的原理","url": "https://www.youtube.com/watch?v=M2Yg1kwPpts","channel": "Hung-yi Lee"}
]