Como faço para usar corretamente o PHP para codificar o objeto MySQL em JSON?

Eu estou tentando iterar através de um objeto MySQL e usar uma chamada ajax em outra página para anexar os dados, mas não consigo fazer o php retornar o JSON válido para o retorno de chamada.

Este obviamente não funciona ...

<?php

    $db_host = "localhost";
    $db_user = "blah";
    $db_pass = "blah";
    $db_name = "chat";
    $mysqli = new MySQLi($db_host, $db_user, $db_pass, $db_name);
    $myQuery = "SELECT * FROM users";
    $result = $mysqli->query($myQuery) or die($mysqli->error);
    $row = $result->fetch_assoc();
    echo json_encode($row);

?>

Ou esse aqui ...

<?php

    $db_host = "localhost";
    $db_user = "blah";
    $db_pass = "blah";
    $db_name = "chat";
    $mysqli = new MySQLi($db_host, $db_user, $db_pass, $db_name);
    $myQuery = "SELECT * FROM users";
    $result = $mysqli->query($myQuery) or die($mysqli->error);
    while ( $row = $result->fetch_assoc() ){
        echo json_encode($row) . ", ";
    }

?>

questionAnswers(3)

yourAnswerToTheQuestion