De primaire antagonist is Graaf Olaf—een slimme, theatrale, ongenadige planner geobsedeerd met het stelen van de Baudelaire-wezen' fortuin.
Hij aanneemt oneindig veel verkleedingen, moordt voogden, en jaagt de kinderen door de hele serie. Een essentiële literaire schurk.