Букинистическая книга это будет считаться плеоназмом или нет?

Нет, не будет.

Букинистика - торговля старыми и антикварными печатными изданиями, к которым относятся не только книги, но и журналы, брошюры, плакаты, афиши и т.п.

нет

Объяснение:

Не являются плеоназмами (а следовательно, речевыми ошибками) словосочетания, которые в академических толковых словарях (БАС, МАС) зафиксированы как устойчивые словосочетания. Например, букинистическая книга, в конечном итоге (счете), истинная правда, кивать головой, облокотиться руками, пнуть ногой (сапогом, коленом и т.д.) и др.