= я правильно Вас понимаю, что грамотных было мало, а двуязычие было только на письме и поэтому оно отсутствовало? =

Да, я думаю, так и было.
Это подтверждается тем, что когда заимствовались сложные термины (с чтением по онам), то иероглифы читались не "столичным" выговором, не "как в древности" ("как оно было в древности" до XX века никто и не знал толком), а на диалектах тех портовых городов, с которыми велась торговля.