В зависимости от говора и диалекта, ударение Бо́ржим и Боржи́м.
В летописи аббатства указано, что оставлено славянское наименование — Боржим.