Моя программа для Windows в . exe формате, созданная на python. Она конвертирует автоматически, быстро и в больших количествах изображения в формате png, в формат ico.
Переносите картинки в одну папку, запускаете программу и готовые изображения, такого же разрешения, получаете в другой папке.