Библиотека / Веб-скрейпинг и исследования
Веб-скрейпинг и исследования
Получение данных сайта без узла n8n
При запуске запрашиваются страницы с пагинацией, а заголовки статей извлекаются узлом HTML Extract, что показывает, как обходиться без готовой интеграции.
Что делает
## 3. Handle Pagination ### Sometimes you need to make the same request multiple times to get all the data you need (pagination). ### The pagination process goes as follow: ### 1. Loop through the pages of the input source (HTTP Request node named "Get my Starts") ### 2. Increment the page at the end of each loop (done with the set node named "Increment Page") ### 3. Stop looping when there are no pages left (checked at the If node named "Are we Finished?")
Шаги
- On clicking 'execute'
- Set
- Item Lists - Create Items from Body
- HTML Extract - Extract Article Title
- Item Lists - Fetch Body
- If - Are we finished?
- Set - Increment Page
- HTTP Request - Get Mock Albums
- HTTP Request - Get Wikipedia Page
- HTTP Request - Get my Stars
Похожие автоматизации
Код, Git и инструменты разработчикаВосстановление рабочих процессов n8n из GitHubШагов: 13Код, Git и инструменты разработчикаВосстановление рабочих процессов n8n из GitHub с пропуском существующихШагов: 12Код, Git и инструменты разработчикаВосстановление рабочих процессов n8n из резервных копий GitHubШагов: 7Код, Git и инструменты разработчикаВосстановление учётных данных n8n из репозитория GitHubШагов: 8