Когда простое правило обошло мою модель: урок Kaggle

В последнем соревновании я собрал ансамбль, тюнил градиенты, признавался себе, что это серьёзная работа. А лидерборд возглавил человек с правилом в три строки, которое я даже не рассматривал. Разбор показал: он понял структуру данных глубже, чем я. Пока я добавлял модели, он добавил признак, который лежал на поверхности. Моя сложность была компенсацией непонимания. Теперь у меня правило: сначала базлайн и разговор с данными, потом магия. Модель не заменяет мысль, как телескоп не заменяет астронома.