Esse uma pergunta boa e um pouco técnica, mas que vale a pena esclarecer.
Ambas as palavras têm o prefixo grego mono: um ou único.
Mas é o sufixo que faz a diferença –teísmo (crença em Deus) e –latria (adoração).
Monoteísmo é acreditar que há somente um Deus único, embora haja outros seres superiores e poderosos, criados por Ele, como por exemplo, os arcanjos e anjos, demônios, etc.
Monolatria é adorar uma única divindade entre outras existentes.
Então, todo monoteísta deve ser um monolátrico, porque ele presta adoração ao único Deus existente, mas nem todo monolátrico é um monoteísta.
Explico esta última parte. Numa religião que há vários deuses, uma pessoa pode adorar um único destes deuses, apesar de haver outros. Esta pessoa é um monolátrico em uma religião politeísta.