Как удалить svg внутри div

Я использую D3.js. Это моя разметка:

<div class="graph-container">
    <!--Graph SVG-->
</div>
<div class="graph-container">
    <!--Graph SVG-->
</div>
<div>
    <!--some other SVG-->
</div>

Я использую следующий JS для удаления всех элементов SVG:

d3.selectAll("svg > *").remove();

Но я хочу удалить только SVG, присутствующие внутри класса -контейнера класса. Как я могу это сделать?