como armazenar valores de caixa de texto na matriz usando jquery?

Eu tenho duas caixas de texto com o mesmo nomecontrol_text mas seus valores são diferentes. Eu quero armazenar todos os meus valores de caixa de texto em uma matriz usando jQuery.

HTML

<input type="text" name="control_text" placeholder="Text Label Image" class="required" id="control_text" value="firstvalue" />
<input type="text" name="control_text" placeholder="Text Label Image" class="required" id="control_text" value="secondvalue" />

JavaScript

var test_arr = $("input[name='control_text']");
$.each(test_arr, function(i, item) {
    // i = index, item = element in array
    alert($(item).val());
});

O código acima está exibindo os valores das caixas de texto individualmente. Eu não quero alertar esses valores individualmente, eu quero alertar os dois de uma vez com um separador de vírgula semelhante a(firstvalue, secondvalue). Qualquer ajuda é apreciada.