Василий Васильков
Инженер @ Ecwid
Ульяновск

Мы залили 20 терабайт логов в ClickHouse, все отлично!

  • Зал: МАЛЫЙ КОНЦЕРТНЫЙ ЗАЛ
  • Категории: Разработка
  • Секции: Стачка.Backend

Описание:

Незаметно для самих себя мы в Ecwid доросли до 100Gb (и 200 миллионов строк) логов каждые сутки. Unix-утилиты, конечно, дают жару, но grep/sed/awk на таких объемах увы, не справляются. Мы запихнули все эти десятки терабайт за несколько месяцев в ClickHouse, написали свой простой язык запросов, подкрутили тут, там и получилась очень простая и быстрая система работы с логами. В докладе я объясню как за пару дней на коленке построить себе такое же счастье.

О спикере

Василий Васильков

Инженер @ Ecwid
Ульяновск

Василий Васильков, Ecwid, инженер