ユニバーサルスクレイピングAPIクイックスタートはじめる

はじめに

パラメータの説明

パラメータ説明
actorstring非常に重要なパラメータで、サービスを表します。スクレイパーアクターのリスト情報を見るにはクリックしてください
inputobjectデータスクレイピングタスクを完了するためにアクターが必要とするパラメータ。
proxyobjectcountryフィールド。この地域からのプロキシを使用してリクエストを送信します。

inputフィールドの説明

パラメータデフォルト説明
urlstringターゲットウェブサイト
methodstringGETリクエストメソッド
redirectbooleanfalseリダイレクトを許可するかどうか
headersobjectカスタムリクエストヘッダーフィールド

最初のリクエストを送信する

https://httpbin.io/getのデータスクレイピングを例として使用します。

APIエンドポイント経由でデータを取得する

import { Scrapeless } from '@scrapeless-ai/sdk';
 
const client = new Scrapeless({
  apiKey: 'YOUR_API_KEY'
});
 
client.universal.scrape({
   actor: "unlocker.webunlocker",
   input: {
      url: "https://httpbin.io/get",
      redirect: false,
      method: "GET",
   },
   proxy: {
      country: "ANY",
   }
}).then(async (result) => {
    console.log(result);
  })
  .catch((error) => {
    console.error('Error:', error);
  });