Скрепер и парсер вакансий Hacker News

Легко преобразует ежемесячные темы «Кто нанимает» на Hacker News в чистые, структурированные данные о вакансиях Автоматически собирает темы, извлекает и обрабатывает объявления, используя HN API Выявляет ключевые детали — местоположение, роль, требования и компанию — для каждого поста Предоставляет готовые к анализу данные в формате JSON или в пользовательском формате Легко интегрируется с вашими предпочтительными инструментами анализа или хранения Экономит часы ручной сборки и организации, позволяя рекрутерам, соискателям и аналитикам отслеживать тенденции на рынке технических вакансий с минимальными усилиями

Category: n8n

Описание
Отзывы (0)

Описание

Этот рабочий процесс автоматизирует сбор и анализ ежемесячной темы «Кто нанимает?» на Hacker News (HN). Он нацелен на соискателей, рекрутеров и аналитиков, заинтересованных в тенденциях на рынке технологических вакансий, преобразуя неструктурированные комментарии о вакансиях в структурированные, анализируемые данные.

Рабочий процесс логически разделен на следующие блоки:

1.1 Получение ввода и начальный поиск: Запуск рабочего процесса вручную и запрос к API поиска HN, работающему на Algolia, для нахождения последних публикаций «Спросите HN: Кто нанимает?».
1.2 Фильтрация и получение основных постов: Фильтрация публикаций за последние 30 дней и получение полной информации о главных постах из официального API HN.
1.3 Извлечение вакансий: Разделение дочерних комментариев основного поста (отдельные вакансии) и извлечение полного содержания каждой вакансии.
1.4 Очистка текста и подготовка: Извлечение сырых текстов из вакансий и их очистка для удаления HTML-сущностей, избыточного пробела и несоответствий в форматировании.
1.5 Структурирование с помощью ИИ: Использование OpenAI GPT-4o-mini для анализа очищенного текста в заранее определенную структурированную JSON-схему, представляющую детали вакансий.
1.6 Вывод и хранение: Запись структурированных данных о вакансиях в базу Airtable для дальнейшего использования.