Начальным (но не обязательным) этапом процесса обучения нейронной сети Кохонена является предварительная нормализация входных векторов. Это достигается за счет деления каждой компоненты входного вектора на длину самого вектора. Длина вектора находится извлечением квадратного корня из суммы квадратов всех компонент вектора. Все вышесказанное можно представить в виде следующей формулы:
Такая нормализация преобразует входной вектор в единичный вектор без изменения направления, т.е. в вектор единичной длины в 
-мерном пространстве.
Выражение (см. выше) обобщает хорошо известный случай двух измерений, когда длина вектора равна гипотенузе прямоугольного треугольника, образованного его 
и 
компонентами, как это следует из известной теоремы Пифагора. На рис. 1 такой двумерный вектор 
представлен в координатах и , причем координата равна четырем, а координата – трем. Квадратный корень из суммы квадратов этих компонент равен пяти. Деление каждой компоненты на пять дает вектор 
с компонентами 
и 
, где длина вектора равна единице, а сам вектор имеет то же направление, что и вектор .
На рис. 2 показано несколько единичных векторов. Они оканчиваются в точках единичной окружности (окружности единичного радиуса), что имеет место, когда у нейронной сети лишь два входа. В случае трех входов векторы представлялись бы стрелками, оканчивающимися на поверхности единичной сферы. Эти представления могут быть перенесены на сети, имеющие произвольное число входов, где каждый входной вектор является стрелкой, оканчивающейся на поверхности единичной гиперсферы (полезной абстракцией, хотя и не допускающей непосредственной визуализации).