Розмір шрифта:
Парсинг та опрацювання великих масивів даних із відкритих інтернет-сторінок
Остання редакція: 2025-06-15
Анотація
Анотація
Дослідження присвячене розробці методу парсингу великих обсягів даних із відкритих веб-джерел з подальшим їх збереженням у реляційну базу даних. Використано інструменти Puppeteer для збору динамічного контенту, Node.js для обробки даних та MySQL для структурованого зберігання. Оптимізація досягнута за рахунок паралельного виконання завдань (worker threads) та пачкової вставки даних.
Ключові слова
веб-скрапінг, парсинг даних, Puppeteer, обробка великих даних, автоматизація збору даних, MySQL, оптимізація продуктивності.
Повний текст:
PDF