Что такое новизна идей?

Жека Никитин

Нашёл на реддите интересную заметку про новизну в науке. Автор лаконично, но метко объясняет, почему не стоит путать научную новизну идеи с её

сложностью
количеством усилий для её реализации
удивительностью идеи
технической новизной
полезностью

Заметка написана для рецензентов научных статей, но по факту те же логические ошибки часто совершаются и при приоритизации гипотез по улучшению ML-моделек в продуктах. В следующий раз, выбирая, какие гипотезы взять в работу, рекомендую обратить внимание - а не путаете ли вы потенциальный импакт идеи с её “прикольностью” или сложностью. Часто твик одного нужного гиперпараметра может дать буст сравнимый с использованием какой-нибудь новой СОТА-архитектурой.

Ещё при приоритизации ML-гипотез может быть полезно разбивать их на гипотезы, связанные с методами (архитектуры, лоссы, обучение), и данными (очистка, добавление, удаление, переразбивка), а также использовать фреймворки типа ICE, которые как раз и декомпозируют идею на разные параметры.