Вопрос про API

Не могу понять как на php применить, то что отдает парсер в виде JSON for API
Как потом использовать эти строки для запуска задания с помощью php

Использую такой код

PHP:

<?php

ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
error_reporting(E_ALL);

$aparser = 'http://127.0.0.1:9091/API';

$request = json_encode(array(
    'action' => 'oneRequest',
    'password' => 'pass',
   
    'data' => array (
        'preset' => 'default',
        'parser' => 'Net::HTTP',
        'query' => 'https://ya.ru'
    ),
));

$ch = curl_init($aparser);

curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, $request);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Length: ' . strlen($request)));
curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Type: text/plain; charset=UTF-8'));

$response = curl_exec($ch);
curl_close($ch);

$response = json_decode($response, true);
//echo $response['data'];
print_r ($response['data']);

как мне вставить вот это в php

Код:

{
  'password' => 'pass',
  'action' => 'addTask',
 
  'data': {
    'preset' => 'test',
    'configPreset' => '500 Threads',
    'parsers': [
      [
        'Net::HTTP',
        'default'
      ]
    ],
    'resultsFormat' => '$p1.data',
    'resultsSaveTo' => 'file',
    'resultsFileName' => '$datefile.format().txt',
    'additionalFormats': [],
    'resultsUnique' => 'no',
    'queriesFrom' => 'text',
    'queryFormat': [
      '$query/download?from=details'
    ],
    'uniqueQueries': false,
    'saveFailedQueries': false,
    'iteratorOptions': {
      'onAllLevels': false,
      'queryBuildersAfterIterator': false,
      'queryBuildersOnAllLevels': false
    },
    'resultsOptions': {
      'overwrite': false
    },
    'doLog' => 'no',
    'keepUnique' => 'No',
    'moreOptions': false,
    'resultsPrepend' => '',
    'resultsAppend' => '',
    'queryBuilders': [],
   
    'resultsBuilders': [
      {
        'source': [
          0,
          'data'
        ],
        'type' => 'regex',
        'regex' => '<a id=\'link\' (?:[^>]*?\\s+)?href=\'([^\']*)\'',
        'regexType': null,
        'to': [
          'data'
        ]
      }
    ],
    'configOverrides': [],
    'runTaskOnComplete': null,
    'useResultsFileAsQueriesFile': false,
    'runTaskOnCompleteConfig' => 'default',
    'toolsJS' => '',
    'prio': 5,
    'queries' => 'https://domain.com/'
  }
}

и отдельный вопрос, можно ли в oneRequest использовать настройки для парсинга, например resultsBuilders?

 

Спасибо! Получается, чтобы получить разовый результат необходимо создать и запустить задание, получить его номер и потом получить результат?

 

А если сохранить задание в пресет с нужными функциями и потом просто запускать его, то можно использовать OneRequest ?

 

у меня не хочет работать парсер Net::HTTP

Выдает ошибку
Notice: Undefined index: data in /home/p/test/domain.ru/public_html/get.php on line 32

 

PHP

Код:

<?php

ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
error_reporting(E_ALL);

$aparser = 'http://ip_to_aparser:9091/API';

$request = json_encode(array(
    'action' => 'oneRequest',
    'password' => 'мой пароль',
    
    'data' => array (
        'preset' => 'test',
        'parser' => 'Net::HTTP'
    ),
));

$ch = curl_init($aparser);

curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, $request);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Length: ' . strlen($request)));
curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Type: text/plain; charset=UTF-8'));

$response = curl_exec($ch);
curl_close($ch);

$response = json_decode($response, true);
//echo $response['data'];
print_r ($response['data']);

Пресет

 

Что то я не пойму, давайте ещё раз...
Я создаю пресет в парсере, называю его test и в нем настраиваю всё что мне нужно, а именно конструктор результатов $p1.data - Content data, настраиваю формат запроса, формат результата.

Далее иду в php файл и вписываю название готового пресета в 'preset' => 'test', указываю парсер 'parser' => 'Net::HTTP'
и запрос 'query' => 'что то'

Всё это дело обрабатываю в oneRequest

На выходе получаю ошибку
Notice: Undefined index: data in /home/p/test/domain.ru/public_html/get.php on line 32

А вот если ставлю название пресета default, то выполняется, но без моих настроек.
Так получается нельзя настроить пресет и потом запросить его при помощи API ?

 

а за что отвечают

"id" => "Util_ReCaptcha2_preset",
"value" => "Antigate"

в options?

 

Спасибо, теперь понял, что не всё так просто как казалось
Какой командой можно вывести результат работы парсера, чтобы не ссылка на скачивания была, а именно результат?

 

Значит при использовании AddTask кроме ссылки на скачивая не получить результат, ОК.

А как тогда работать с результатами, если к примеру мне нужно получить при помощи php определенный текст со страницы и я использую парсер Net::HTTP и если One/BulkRequest для этого дела не подходит, потому что не настраивается как мне надо, а используя AddTask, я могу получить только ссылку на скачивание результата?

 

Во! То что надо, огромное спасибо!