Ang maliit na open-source na tool na pumalit sa isang $40k logging stack
Ang weekend project ng isang engineer ay tumatakbo na sa production sa tatlong bangko — at kasya sa isang binary.
Nagsimula ito, gaya ng madalas na mangyari sa mga ganitong bagay, sa isang bill. Ang isang mid-sized fintech ay nagbabayaran ng mahigit $40,000 bawat taon para i-ingest at hanapin ang mga log nito — at ang karamihan ng gastos ay napupunta sa data na walang tao kailanman tumingin.
Kaya ang isa sa mga engineer nito ay gumugol ng isang weekend sa pagsulat ng isang stripped-down na alternatibo: isang binary na tumututal ng log, nag-i-index lamang ng mahalaga, at sumasagot sa iilang query na talagang ginagamit ng team habang may insidente.
Sadyang nakakainip
Ang tool ay gumagawa ng mas kaysa sa platform na pinalitan nito, at doon ang punto. Walang query language na matutunan, walang cluster na bantayan, at walang per-gigabyte meter na tumatakbo sa background.
“Karamihan ng gastos sa observability ay insurance laban sa mga tanong na hindi mo kailanman itatanong. Nagpasyahan naming itigil ang pagbabayad ng premium.”
Labingwalawang buwan na ang nakakilipas ito ay open source, tumatakbo sa production sa tatlong bangko, at tahimik na nagpapatunay na ang maraming mamahaling imprastraktura ay umiiral dahil walang tanong dito.
