Merhaba arkadaşlar,
Google Chrome altyapısını kullanarak (nodejs+puppeteer) web scrape işlemi yapmaktayım. Web scrape işlemini otomatik site ziyareti gibi algılayabilirsiniz bilakis durum budur. Site ziyareti yapar gerekli siteyi goruntuler yazıları alır ve bunu karşılaştırır. Yazılara ulaşmak ve karşılaştırmak sorun değil aslında.
İlgili siteyi hızlı ziyaret etmesi,
Bu siteyi daha cok ziyaret etmesi (orneğin 1 kez ziyaret emri veriyorsam bunu 4-5'e katlamam gerekiyor ki veri kaybolmasın site ziyaretinde kendi isteğimi tanımalı ki gelen cıktıysa bende bilgileri kaydedeyim)
Kısaca gidişat şu şekilde: Google Chrome acar -> siteye gider - > kapanır.
Bunu en hızlı nasıl yapabilirim?
İşletim sistemi secimi: Windows, Hackintosh, macOS, Linux.
Bellek,
CPU,
SSD.
Sizce bu işte en onemli donanımsal ya da yazılımsal unsur bu işi daha hızlı yapmak icin ne yapmalıyım?
Nodejs + puppeteer kullanıyorum. Selenium gibi...