Загрузка урока...
В этом модуле были изучены способы преобразования необработанных данных в подходящие векторы признаков . Хорошие числовые характеристики обладают теми же качествами, которые описаны в этом разделе.
Каждая функция должна иметь ясное, разумное и очевидное значение для любого человека, участвующего в проекте. Например, значение следующего значения функции сбивает с толку:
Не рекомендуется
house_age: 851472000
Напротив, следующее имя и значение функции гораздо понятнее:
Рекомендуется
house_age_years: 27
Примечание.Хотя ваши коллеги будут протестовать против путаницы в именах объектов и меток, модель это не будет волновать (при условии, что вы правильно нормализовали значения).
Хотя в этом модуле много времени было уделено выбросам , эта тема достаточно важна, чтобы стоит упомянуть ее в заключение. В некоторых случаях неверные данные (а не неверный инженерный выбор) приводят к неясным значениям. Например, следующие user_age_in_years получены из источника, который не проверял соответствующие значения:
Не рекомендуется
user_age_in_years: 224
Но людям может быть 24 года:
Рекомендуется
user_age_in_years: 24
Проверьте свои данные!
«Магическая ценность» — это целенаправленный разрыв непрерывного объекта. Например, предположим, что непрерывный объект с именем watch_time_in_seconds может содержать любое значение с плавающей запятой от 0 до 30, но представляет отсутствие измерения с магическим значением -1:
Не рекомендуется
watch_time_in_секунды: -1
Значение watch_time_in_seconds равное -1, заставит модель попытаться выяснить, что значит смотреть фильм назад во времени. Полученная модель, вероятно, не даст хороших прогнозов.
Лучшим методом является создание отдельной логической функции, которая указывает, предоставляется ли значение watch_time_in_seconds . Например:
Рекомендуется
watch_time_in_секунды: 4,82
is_watch_time_in_секунды_определено=Истинаwatch_time_in_секунды: 0
is_watch_time_in_секунды_определено=False
Это способ обработки непрерывного набора данных с пропущенными значениями. Теперь рассмотрим дискретный числовой признак, например product_category , значения которого должны принадлежать конечному набору значений. В этом случае, когда значение отсутствует, обозначьте это недостающее значение, используя новое значение в конечном наборе. При использовании дискретной функции модель будет изучать разные веса для каждого значения, включая исходные веса для отсутствующих функций.
Например, мы можем представить возможные значения, входящие в набор:
{0: «электроника», 1: «книги», 2: «одежда», 3: «отсутствующая_категория»}.
В этом материале нет файлов для просмотра.