Как отправить запрос на страницу https://search.google.com/structured-data/testing-tool/u/0/ и получить результат по каждой странице из запроса?
Для этого нужно использовать Net::HTTP либо функционал JS парсеров. Алгоритм действий аналогичный составлению любых кастомных парсеров: анализируем страницу и запросы, которые отправляются при ее загрузке и имитируем их в парсере. Пример, в котором описан общий алгоритм решения подобных задач, есть здесь: https://a-parser.com/threads/1699/#post-5129