Me parece que conservar o evitar objetos debido a las emociones que producen en uno no es irracional. O sea, usar algo porque te hace sentir bien o no usar algo porque te hace sentir mal son razones válidas. En el caso del pulóver del asesino, si alguien no lo quiere usar porque le trae malos recuerdos o le incomoda, está actuando racionalmente. Distinto sería el otro caso que mencionás en que evitar usarlo tendría como excusa una supuesta transmisión de «maldad», ya que la razón no es válida (y lo mismo para el caso de la pizza y la contaminación de jamón).