n8n
什么是 n8n?
n8n 是一款开源的工作流自动化工具,允许用户以可视化、可定制的方式连接并集成各种应用、服务和 API。与 Zapier 或 Make(原 Integromat)等工具类似,n8n 让技术型和非技术型用户都能创建自动化工作流——也称为“自动化”或“流程”——而无需重复执行手动任务。
Scrapeless 在 n8n 中提供以下模块:
- Search Google – 轻松访问并检索来自 Google 的丰富搜索数据。
- Unlock a website – 访问并提取通常会屏蔽机器人的 JS 渲染网站中的数据。
- Scrape data from a single page – 从单个网页中提取信息。
- Crawl data from all pages – 抓取网站及其链接页面,以提取全面的数据。
- AI Scraper - 大规模提取 AI 对话内容,让你能够监控品牌提及、比较回答,并在最新的 AI 模型上分析竞争对手。你可以捕获 URL、提示词、Markdown 响应、引用等,全部通过单一统一的工作流实时交付。
为什么要将 Scrapeless 与 n8n 搭配使用?

将 Scrapeless 与 n8n 集成,你无需编写代码即可创建高级、稳健的网页爬虫。
优势包括:
- 访问 Deep SerpApi,通过单个请求获取并提取 Google SERP 数据。
- 使用 Web Unlocker API 绕过限制,访问任意网站。
- 使用 Crawler Scrape 对单个页面执行详细抓取。
- 使用 Crawler Crawl 进行递归爬取,并从所有链接页面中检索数据。
- 使用 AI Scraper 大规模提取 AI 对话内容。
这些功能让你能够构建端到端的数据流,将 Scrapeless 与 n8n 支持的 350 多种服务连接起来,包括 Google Sheets、Airtable、Notion、Slack 等等。
快速开始
步骤 1. 获取你的 Scrapeless API Key
- 创建账户 并登录 Scrapeless Dashboard。你可以获得 2,000 次免费 API 调用。
- 生成你的 Scrapeless API key。

步骤 2. 设置触发条件并连接到 Scrapeless
- 进入 n8n Overview 页面,点击 “Create Workflow”。

- 你会看到一个空白的工作流编辑器,可以在其中添加第一个步骤。我们需要用一个触发器来启动工作流,从而开启自动化。我们将选择 “Trigger manually”。

- 添加 Scrapeless 社区节点。如果你尚未安装,直接点击安装即可。然后选择 “Google Search”。

- 点击 “Create New Credentials”,粘贴 Scrapeless API KEY。

- 现在我们可以配置搜索查询。我们将搜索 “B2B Sales Automation Trend Analysis”。

- 现在,你可以点击运行图标来测试配置是否成功。测试无误后,我们需要配置 Discord。

步骤 3. 将抓取结果转换为 Json 格式
接下来,我们只需将上一步抓取的结果转换为 json 格式。我们需要配置一个转换文件。
你只需点击 “+” 号并添加 “Convert to Json”,然后按下图所示进行配置。

步骤 4. 连接 Discord 以接收消息。
- 点击 “+” 添加 Discord。

- 在 Connection Type 中选择 “Webhook”。

- 接下来,你需要配置用于接收信息的 Discord 社区的 webhook 链接。粘贴 Discord webhook 链接。

- 然后,在 Message 中,你可以定义数据的来源。当然,你也可以不设置此选项。

- 在最后一步,你需要在 Files 下选择 “convert to files”。

步骤 5. 运行以获取结构化文件
点击运行此工作流,你将获得相应的结构化文件,可直接下载并使用。
