[Modify] Polish it

websocket-sharp/Net/HttpListenerPrefixCollection.cs

@@ -271,17 +271,13 @@ namespace WebSocketSharp.Net
       if (uriPrefix == null)
         throw new ArgumentNullException ("uriPrefix");
 
-      var ret = _prefixes.Remove (uriPrefix);
-
-      if (!ret)
-        return ret;
-
-      if (!_listener.IsListening)
-        return ret;
+      if (!_prefixes.Contains (uriPrefix))
+        return false;
 
+      if (_listener.IsListening)
         EndPointManager.RemovePrefix (uriPrefix, _listener);
 
-      return ret;
+      return _prefixes.Remove (uriPrefix);
     }
 
     #endregion