SVNサーバの設定によってはSSHの使用ポート番号を変更している場合があります。
その場合は、クライアント側でSSHトンネル設定を追加しましょう。
下記の記事を参考にしました。
~/.subversion/configに下記のような指定を追加します。
/tunnels でサーチして、該当箇所を出すのが早いと思います。
[tunnels]
ssh_hoge = ssh -p 8888
そして、接続時には先ほど設定した変数ssh_hogeを使って下記のように記述します。
svn co svn+ssh_hoge://domain.com/svnroot/fuga