ダッシュボードへのログイン後ログイン画面が表示される

質問失礼します。

以下コードを.htaccessに記述したところサイト自体はSSLで表示できるようになりました。
RewriteCond %{HTTPS} off
RewriteRule ^(.*)$ https://sample.com/$1 [R=301,L]

しかしダッシュボードへのログインが出来なくなってしまいました。
ユーザー名、パスワードは合っていますが、ログイン画面に戻ってしまいます。
.htaccessに記述したコードを削除しても戻りません。（サイト自体もSSLのままです。コード削除後戻るまで時間がかかるのでしょうか。）

原因はWordPressのWordPress アドレス (URL)とサイトアドレス (URL)をhttpのままにしているからでしょうか？
データベースで直接httpsに変更すればログイン出来るようになりますでしょうか。

解決方法をご存じの方がいらっしゃいましたらご教授いただけますと幸いです。
よろしくお願いいたします。