В плее полно AR-приложений не на ARCore, так что не факт, что проверяли его. Как пример, на моём J7 гугловский пример работает отлично, ничего не ползёт, перспектива правильная.
Поставил для проверки приложение Sketchfab`а, которое как заявлено, работает с ARCore, а по факту использует какой-то другой SDK, — всё плывёт и кривая перспектива.
Что такое ARCore? Всё, что вам нужно знать