Тестирование в дата инжиниринге

Дата инжиниринг — дисциплина, занимающаяся прокладыванием труб между разными хранилищами данных. Данные читаются, преобразовывается, раскладываются по разным местам. И это не просто «данные», это «большие данные». Что такое большие? Никто не знает. Но зато так круто и сложно! А главное — тестировать-то как? Не будешь же терабайты данных в тестах гонять? Паша и Ксюша расскажут и покажут. А ещё разъяснят про подходы к тому, как сложность можно уменьшить.