Automated Website Monitoring System Using Web Scraping and Raspberry Pi

Abstract

Purpose: Create a system to monitor website availability automatically using web scraping and raspberry piDesign/methodology/approach: This system successfully checks website availability using various ISPs with an accuracy of more than 90%.Findings/result: This system successfully checks website availability using various ISPs with an accuracy of more than 90%.Originality/value/state of the art: The contribution of this research is to create systems and agents that collaborate automatically to check website availability. Tujuan: Membuat sebuah sistem untuk melakukan pemantauan ketersediaan situs web secara otomatis menggunakan web scraping dan raspberyy piPerancangan/metode/pendekatan: Pada penelitian ini dibuat sebuah sistem utama sebagai pusat data dan beberapa agent menggunakan raspberry pi. Sistem utama dibangun menggunakan codeigniter dan web scraping di raspberry pi dilakukan menggunakan node js serta REST API untuk komunikasi antara agent dan sistem utama.Hasil: Sistem ini berhasil melakukan pengecekan ketersediaan situs web menggunakan berbagai ISP dengan keakuratan lebih dari 90%.Keaslian/ state of the art: Kontribusi penelitian ini adalah membuat sistem dan agen yang berkolaborasi secara otomatis untuk mengecek ketersediaan situs web.