10進数=>16進数は前者を使った方が安定しているみたい。

(string-to-number "20" 16)  #=> 32
(read (concat "?\\x" "20")) #=> 32