夫妻俩都出轨可以继续过吗

可以根据自己的意愿来选择。
《婚姻登记条例》第五条
办理结婚登记的内地居民应当出具下列证件和证明材料：
(一)本人的户口簿、身份证；
(二)本人无配偶以及与对方当事人没有直系血亲和三代以内旁系血亲关系的签字声明。