渡边淳一，两性关系