¿Cómo almacenar los valores de los cuadros de texto en una matriz usando jquery?

Tengo dos cuadros de texto con el mismo nombrecontrol_text Pero sus valores son diferentes. Quiero almacenar todos los valores de mis cuadros de texto en una matriz usando jQuery.

HTML

<input type="text" name="control_text" placeholder="Text Label Image" class="required" id="control_text" value="firstvalue" />
<input type="text" name="control_text" placeholder="Text Label Image" class="required" id="control_text" value="secondvalue" />

JavaScript

var test_arr = $("input[name='control_text']");
$.each(test_arr, function(i, item) {
    // i = index, item = element in array
    alert($(item).val());
});

El código anterior muestra los valores de los cuadros de texto individualmente. No quiero alertar a estos valores individualmente, quiero alertar a los dos a la vez con un separador de coma similar a(firstvalue, secondvalue). Cualquier ayuda es apreciada.

Respuestas a la pregunta(2)

Su respuesta a la pregunta