Il paese si estende dagli estremi lembi del Vallo di Diano fino alle cime dello Spina dell’Ausino e del Cocuzzo. Le notizie sulle origini del paese non sono certe, si pensa che l’origine di San Rufo sia rappresentata da un casale, che fu popolato almeno a partire dal X secolo. L’espansione successiva sarebbe poi dovuta, nel XII secolo, a Gabello Pellegrino, che vi portò una reliquia del Santo, che era stato il terzo vescovo di Capua. Il paese fu Casale di Diano e appartenne ai Pellegrino fino al Seicento, poi passò ad altri proprietari, fra cui le famiglie Rinaldi e Laviano. Il patrimonio artistico della città è andato in gran parte distrutto, ma dell’antica struttura rimangono alcuni interessanti edifici del 600 e 700 con portali in pietra e si possono ammirare i ruderi dell’antico castello.
Il paese sorge fra il Monte Spina dell’Ausino e il Cucuzzo delle Puglie a livello del Passo della Sentinella, che da sempre mette in comunicazione il Vallo di Diano con la Valle del Calore nel salernitano. Come nel territorio di molti altri paesi di questa zona, l’ambiente naturale è costituito principalmente da vegetazione arborea. A giugno si celebra la festa religiosa di Sant’Antonio da Padova; la Fiera Exposud, rassegna espositiva, si tiene a luglio.