Kun for dem som mig, der googler og prøver at finde en løsning til laravel 5.4 . Du kan bruge -> operator til at udtrække JSON, hvilket er lig med json_extract funktion eller til column->"$.key" syntaks.
$users->orderBy('column->key', 'desc');
Det ser ud til, at det ville være meget nyttigt i slutningen af 2013 (smil).