Описание

Этот рабочий процесс автоматизирует создание файла llms.txt из экспорта сканирования веб-сайта с помощью Screaming Frog. Формат llms.txt полезен для подготовки структурированных данных контента, которые помогают большим языковым моделям (LLM) в обнаружении и обучении контента.

Целевые сценарии использования:

• SEO-специалисты или контент-стратеги, которые хотят преобразовать данные сканирования веб-сайта в структурированный текстовый файл для использования AI.
• Пользователи, которые просканировали веб-сайт с помощью Screaming Frog и хотят быстро сгенерировать файл с сводкой контента, готовым для AI.
• Необязательная фильтрация на основе AI для интеллектуального выбора высокоценных URL для включения.

Логические блоки:

• 1.1 Получение входных данных: Узел триггера формы для сбора метаданных веб-сайта и экспорта CSV из Screaming Frog.
• 1.2 Извлечение и нормализация данных: Извлечение данных CSV и нормализация ключевых полей на нескольких языках.
• 1.3 Фильтрация URL: Фильтрация URL на основе статуса, индексируемости и типа контента.
• 1.4 Необязательная фильтрация с использованием AI: (По умолчанию деактивирована) Использование текстового классификатора на основе LLM для дальнейшей доработки URL.
• 1.5 Форматирование для llms.txt: Форматирование каждой записи URL в структуру строки llms.txt.
• 1.6 Конкатенация и подготовка файла: Конкатенация всех строк и предшествующее добавление метаданных веб-сайта.
• 1.7 Генерация файла: Преобразование окончательного контента в загружаемый файл llms.txt.
• 1.8 Необязательная загрузка: Узел-заглушка для загрузки файла во внешнее хранилище (например, Google Drive).

Оригинал воркфлоу на сайте n8n.io

👉🏻 Скачать на сайте n8n

____________