هنگام آموزش هر شبکه عصبی دو نوع هایپر پارامتر وجود دارد: یکی ساختار شبکه عصبی را تعریف می کند و دیگری نحوه آموزش شبکه عصبی را تعیین می کند. چند هایپر پارامتر که قبل از آموزش هر شبکه عصبی تنظیم شده اند، فهرست شده اند.
-
مقدار دهی اولیه وزن ها
-
تنظیم تعداد لایه های مخفی
-
میزان یادگیری
-
تعداد دوره ها
-
توابع فعال سازی
-
اندازه دسته ای
-
مومنتم