La forma più antica del vocabolo è "Colle agilluni" e risale all'anno 1170, quando il paese, posto su un altura a cavallo tra la valle del Giano e quella del Sentino, passò sotto il dominio di Fabriano.
La chiesetta di San Severino, che in origine era situata più in basso rispetto all'attuale posizione, in una contrada detta Montegiano, è stata finalmente restaurata dopo il terremoto del 1997 e riaperta al pubblico culto.