不参加选举是选民的权利，根据《中华人民共和国选举法》和相关法律规定，选民有以下几种处理方式：
放弃选举权：
选民可以选择不参与选举，这是他们的基本权利之一。
委托他人投票：
如果选民因故不能亲自参加选举，可以书面委托其他选民代为投票。每一选民接受的委托不得超过三人，并应按照委托人的意愿代为投票。
自动弃权：
如果选民既没有委托他人投票，也没有参加选举，这种情况下视为弃权。
党内特殊情况：
对于党员而言，如果因患有精神病、自费出国、正在服刑、年老体弱长期生病、工作调动等情况不能参加选举，经上级党组织同意，并经党员大会通过，可以不计算在应到会人数之内。
请注意，虽然选举权是可以放弃的，但放弃投票权可能会影响民主制度的运作。此外，破坏选举的行为，如使用暴力、威胁、欺骗等手段，将会受到法律的惩罚