Здравствуйте. Есть входные данные, список сайтов, только начальные урлы. Нужно пройтись по всем страницам и сохранить ссылки на изображения. Помогите пожалуйста с этой задачей.
Здравствуйте. Для прохода по всем страницам используем HTML::LinkExtractor и функцию Parser to level с нужной глубиной. Для получения ссылок на изображения используем Parse custom result и регулярное выражение. Также дополнительно Конструктором результатов декодируем сущности и шаблонизатором обрабатываем полученные ссылки, преобразовывая относительные в абсолютные. Спойлер: Пресет Код: eyJwcmVzZXQiOiJBbGwgaW1hZ2VzIGZyb20gc2l0ZSIsInZhbHVlIjp7InByZXNl dCI6IkFsbCBpbWFnZXMgZnJvbSBzaXRlIiwicGFyc2VycyI6W1siSFRNTDo6TGlu a0V4dHJhY3RvciIsImRlZmF1bHQiLHsidHlwZSI6Im9wdGlvbnMiLCJpZCI6InBh cnNlTGV2ZWwiLCJ2YWx1ZSI6M30seyJ0eXBlIjoiY3VzdG9tUmVzdWx0IiwicmVz dWx0IjoiZGF0YSIsInJlZ2V4IjoiPGltZ1tePl0rc3JjPVwiKC4rPylcIiIsInJl Z2V4VHlwZSI6ImciLCJyZXN1bHRUeXBlIjoiYXJyYXkiLCJhcnJheU5hbWUiOiJp bWFnZXMiLCJyZXN1bHRzIjpbImxpbmsiXX1dXSwicmVzdWx0c0Zvcm1hdCI6Ilsl IEZPUkVBQ0ggcDEuaW1hZ2VzO1xuXHRJRiBsaW5rLm1hdGNoKCdeKD86aHR8Zil0 cHM/Oi8vJyk7XG5cdFx0bGluayBfIFwiXFxuXCI7XG5cdEVMU0lGIGxpbmsubWF0 Y2goJ14vLycpO1xuXHRcdCdodHRwOicgXyBsaW5rIF8gXCJcXG5cIjtcblx0RUxT RTtcblx0XHRxdWVyeS5xdWVyeS5tYXRjaCgnXigoPzpodHxmKXRwcz86Ly9bXi9d KyknKS4wIF8gJy8nIF8gbGluay5yZW1vdmUoJ15bLy5dKycpIF8gXCJcXG5cIjtc blx0RU5EO1xuRU5EICVdIiwicmVzdWx0c1NhdmVUbyI6ImZpbGUiLCJyZXN1bHRz RmlsZU5hbWUiOiIkZGF0ZWZpbGUuZm9ybWF0KCkudHh0IiwiYWRkaXRpb25hbEZv cm1hdHMiOltdLCJyZXN1bHRzVW5pcXVlIjoic3RyaW5nIiwicXVlcnlGb3JtYXQi OlsiJHF1ZXJ5Il0sInVuaXF1ZVF1ZXJpZXMiOnRydWUsInNhdmVGYWlsZWRRdWVy aWVzIjpmYWxzZSwiaXRlcmF0b3JPcHRpb25zIjp7Im9uQWxsTGV2ZWxzIjpmYWxz ZSwicXVlcnlCdWlsZGVyc0FmdGVySXRlcmF0b3IiOmZhbHNlLCJxdWVyeUJ1aWxk ZXJzT25BbGxMZXZlbHMiOmZhbHNlfSwicmVzdWx0c09wdGlvbnMiOnsib3Zlcndy aXRlIjpmYWxzZX0sImRvTG9nIjoibm8iLCJrZWVwVW5pcXVlIjoiTm8iLCJtb3Jl T3B0aW9ucyI6ZmFsc2UsInJlc3VsdHNQcmVwZW5kIjoiIiwicmVzdWx0c0FwcGVu ZCI6IiIsInF1ZXJ5QnVpbGRlcnMiOltdLCJyZXN1bHRzQnVpbGRlcnMiOlt7InNv dXJjZSI6WzAsWyJpbWFnZXMiLCJsaW5rIl1dLCJ0eXBlIjoiZGVjb2RlSHRtbCIs ImFycmF5IjoiaW1hZ2VzIiwidG8iOiJsaW5rIn1dLCJjb25maWdPdmVycmlkZXMi OltdLCJydW5UYXNrT25Db21wbGV0ZSI6bnVsbCwidXNlUmVzdWx0c0ZpbGVBc1F1 ZXJpZXNGaWxlIjpmYWxzZSwicnVuVGFza09uQ29tcGxldGVDb25maWciOiJkZWZh dWx0IiwidG9vbHNKUyI6IiJ9fQ==
