react-bootstrap ライブラリ自体が同様の機能を提供するとは思えません。ただし、モーダル ボックスの見出しの右揃えにアイコンを追加し、onClick アクションを追加すると、モーダル ボックスの開いた状態を変更して閉じることができます。