セックスレスの状態のときに浮気していたということになると
離婚のとき厄介なことになります。

というのは、セックスレス状態だからといって、夫婦関係が破綻している状態でなければ
浮気になってしまうからです。
セックスレスで夫婦関係が破綻しているとなれば、同居中でも婚姻関係が認められないので
浮気にはなりません。

ここら辺の立証は非常に難しいところなので、離婚の際にごたごたもめたくない
場合はきっちりと離婚してから新たな女性と肉体関係を持つというのがベストなのです。
セックスレスだからといって、浮気→離婚
という流れだと逆にあなたが慰謝料を取られてしまうことになりかねません。