Anormallik Algılama platformu, Kubernetes uzerinde calışan bir dizi mikro hizmetten oluşur . İstek verileri, ozel bir Kafka konusu aracılığıyla gelir ve hem ClickHouse hem de Redis'e eklenir.

Detector hizmeti, temel verileri Baseline hizmetinden tembel bir şekilde alır (ve onbelleğe alır) ve taban cizgilerine kıyasla ziyaretciler icin aykırı değer puanlarını hesaplar. Bu puanlar daha sonra daha sonra analiz edilmek uzere başka bir Kafka konusuna yazılır.

Son olarak, Yayıncı hizmeti, toplu tespitleri (davranışları anormal veya bot benzeri olan ziyaretciler) toplar ve bunları bot puanı hesaplamalarımızın bir parcası olarak uygulanacak uca gonderir.

Her mikro hizmet bağımsız olarak calışır ve kapalı kalma surelerini bağımlılıklarından tolere eder. Ayrıca cok farklı boyutlandırılırlar: Bazı hizmetler duzinelerce kopya ve gigabayt bellek gerektirirken diğerleri cok daha ucuzdur.

Bugun, Anomali Algılama platformu, son altı ayda 2 kat buyumeyi temsil eden, ~ 310 milyon tekil ziyaretci uzerinden saniyede yaklaşık 500 bin isteği işliyor. Ama bir zamanlar 10K rps'yi bile idare etmekte zorlandık.

Buyumemizin oykusu, aynı zamanda, kaynak talebindeki, muşteri destek taleplerindeki ve bakım zorluklarındaki karşılık gelen artışlara yanıt verebilmek icin altyapımızı nasıl uyarladığımızın, yeniden tasarladığımızın ve geliştirdiğimizin hikayesidir.