n8n

什么是 n8n?

n8n 是一款开源的工作流自动化工具,允许用户以可视化、可定制的方式连接并集成各种应用、服务和 API。与 Zapier 或 Make(原 Integromat)等工具类似,n8n 让技术型和非技术型用户都能创建自动化工作流——也称为“自动化”或“流程”——而无需重复执行手动任务。

Scrapeless 在 n8n 中提供以下模块:

  1. Search Google – 轻松访问并检索来自 Google 的丰富搜索数据。
  2. Unlock a website – 访问并提取通常会屏蔽机器人的 JS 渲染网站中的数据。
  3. Scrape data from a single page – 从单个网页中提取信息。
  4. Crawl data from all pages – 抓取网站及其链接页面,以提取全面的数据。
  5. AI Scraper - 大规模提取 AI 对话内容,让你能够监控品牌提及、比较回答,并在最新的 AI 模型上分析竞争对手。你可以捕获 URL、提示词、Markdown 响应、引用等,全部通过单一统一的工作流实时交付。

为什么要将 Scrapeless 与 n8n 搭配使用?

将 Scrapeless 与 n8n 集成,你无需编写代码即可创建高级、稳健的网页爬虫。

优势包括:

  • 访问 Deep SerpApi,通过单个请求获取并提取 Google SERP 数据。
  • 使用 Web Unlocker API 绕过限制,访问任意网站。
  • 使用 Crawler Scrape 对单个页面执行详细抓取。
  • 使用 Crawler Crawl 进行递归爬取,并从所有链接页面中检索数据。
  • 使用 AI Scraper 大规模提取 AI 对话内容。

这些功能让你能够构建端到端的数据流,将 Scrapeless 与 n8n 支持的 350 多种服务连接起来,包括 Google Sheets、Airtable、Notion、Slack 等等。

快速开始

步骤 1. 获取你的 Scrapeless API Key

  • 创建账户 并登录 Scrapeless Dashboard。你可以获得 2,000 次免费 API 调用。
  • 生成你的 Scrapeless API key。

步骤 2. 设置触发条件并连接到 Scrapeless

  1. 进入 n8n Overview 页面,点击 “Create Workflow”。

  1. 你会看到一个空白的工作流编辑器,可以在其中添加第一个步骤。我们需要用一个触发器来启动工作流,从而开启自动化。我们将选择 “Trigger manually”。

  1. 添加 Scrapeless 社区节点。如果你尚未安装,直接点击安装即可。然后选择 “Google Search”。

  1. 点击 “Create New Credentials”,粘贴 Scrapeless API KEY。

  1. 现在我们可以配置搜索查询。我们将搜索 “B2B Sales Automation Trend Analysis”。

  1. 现在,你可以点击运行图标来测试配置是否成功。测试无误后,我们需要配置 Discord。

步骤 3. 将抓取结果转换为 Json 格式

接下来,我们只需将上一步抓取的结果转换为 json 格式。我们需要配置一个转换文件。

你只需点击 “+” 号并添加 “Convert to Json”,然后按下图所示进行配置。

步骤 4. 连接 Discord 以接收消息。

  1. 点击 “+” 添加 Discord。

  1. 在 Connection Type 中选择 “Webhook”。

  1. 接下来,你需要配置用于接收信息的 Discord 社区的 webhook 链接。粘贴 Discord webhook 链接。

  1. 然后,在 Message 中,你可以定义数据的来源。当然,你也可以不设置此选项。

  1. 在最后一步,你需要在 Files 下选择 “convert to files”。

步骤 5. 运行以获取结构化文件

点击运行此工作流,你将获得相应的结构化文件,可直接下载并使用。