痴漢はターゲットを選ぶ際に、この女性に痴漢行為を働けば性的興奮が得られるという判断をもってそうしているものだと思われます。
彼らの嗜好は「どんな服装の女性のコスプレＡＶを好むか」であり、単純に「服装が派手だったから」ターゲットにするかというと、そうではなさそうです。
そういった考え方で、女性の外見的格好だけを取り上げ痴漢のことを考えると「コスプレＡＶで人気のない服装をしていなかった女性に非がある」となり、余りにも無茶な感じがします。

「痴漢されるようなふしだらな格好をしている女性にこそ責任がある」という発想は、男性が自分の知らない女性に対して性的関心を抱くことへの後ろめたさの裏返しのように思われます。
その原因は、自身の望まない性的好奇心から女性は守られるべきだという考えを社会が支持しているからです。
このことが、魅力的な女性に対してどうしようもなく性的好奇心を喚起されてしまう男性をして、自分の大切な女性を大きく傷付けるかも知れない本来憎むべき痴漢に、同情的な目線を向させてしまう要因となっていると考えます。