Лучше собирать данные по каждой команде, агрегируя их на уровне отдела, потом — подразделения или департамента. Важно для каждого направления и специальности сделать свою матрицу. Попросите указать софт и хард скиллы.

Получились списки навыков и умений, которые точно нужно указать. Самое время разобрать их по направлениям, подразделениям и уровням. При составлении не забудьте учитывать стратегические планы компании и задачи команд и отделов на год.

Сделайте двухфакторную проверку: сотрудник указывает, какие навыки у него есть. После этого тимлид команды (или руководитель соседней команды для исключения предвзятости) проводит опрос и проверяет, какие навыки в каком состоянии. На основании этого можно предварительно определить грейд.

Тут придётся всех попроверять на знание нового стека. Постарайтесь не скидывать эту работу на тимлида и автоматизировать этот процесс по максимуму. И про практику тоже не забудьте: тесты, реализованные проекты, выступления на конференциях, разработка.

Лучше проводить такие встряски не чаще раза в год, в зависимости от скорости развития и устаревания технологий в сфере. Старайтесь проводить короткие интервью с комндами для проверки настроений и оценки изменений. Обращайте внимание на спорные ситуации: при формализации есть риск попадания крутого специалиста в джуны, а джунов — в сеньоры.