Что бы официально отказаться, нужно написать заявление о самоотводе. Если просто проигнорировать, то никаких санкций быть не должно, если ты просто кандидат в присяжные, и не давал клятвы. Если такие инвайты приходят часто, то нужно писать заявление об исключении тебя из списка кандидатов.