Как известно, ярлыки имею формат lnk. В реестре я искал те разделы, которые связаны с этим форматом, нашёл необходимый раздел и параметр, который позволяет удалить стрелки с ярлыков. Однако сразу хочу напомнить, удаление стрелок может скрыть дерево папок "Избранное" в проводнике Windows (выделено красным цветом).
 

Откройте редактор реестра.
Перед тем, как приступить к правке реестра, советую создать Reg-файл (файл реестра), для того, чтобы Вы в любой момент смогли восстановить состояние редактируемого раздела реестра. Для этого, перейдите в нужный раздел и выберите (вверху редактора) Файл\Экспорт... В открывшемся окне введите название файла и сохраните в удобном для Вас месте. Для восстановления редактируемого раздела реестра, щёлкните правой кнопкой мыши (или двойной щелчок левой кнопкой мыши) по сохранённому файлу и нажмите "Слияние". Внесите изменения в реестр. Если появилось сообщение о том, что не все данные были внесены в реестр, то ничего страшного. Недостающие изменения всё-равно попадут в реестр и Вы вернёте стрелки ярлыков, а также дерево папок "Избранное", если оно было скрыто после правки реестра. Изменения вступят в силу при следующем входе в систему.
Теперь можно приступать к редактированию реестра. Перейдите в радел HKCR\lnkfile и удалите параметр IsShortcut.
 

Также можно убрать стрелки с ярлыков путём удаления параметра IsShortcut в разделе
HKLM\SOFTWARE\Classes\lnkfile.
После редактирования реестра, выйдите из системы, а потом снова войдите, либо перезагрузите компьютер.