Nein, falsch.
Der Filter verfälscht den Fokus nicht, sondern Infrarotlicht wird ob seiner größeren Wellenlänge anders gebrochen und benötigt deswegen eine andere Fokussierung. Eine Fokussierung im sichtbaren Licht liegt deswegen für das Infrarotbild immer mehr oder weniger daneben (außer bei ganz wenigen Spezialobjektiven).
Daher entweder
1. im sichtbaren Licht fokussieren, dann Filter drauf, anschließend Fokus auf den Infrarotindex korrigieren. Den IR-Index findet man bei alten manuellen Festbrennweiten, den modernen Fuji-Objektiven fehlt er aber.
oder
2. erst Filter drauf und dann fokussieren. Bei einer Spiegellosen wird dann auf IR fokussiert. Es kann aber sein, dass der Phasen-AF damit nicht klar kommt. Ebenso ist es bei einer unmodifizierten Kamera möglich, dass zu wenig Licht für eine korrekte Fokussierung vorhanden ist. Am besten geht manuelle Fokussierung über die Sucherlupe.
Vermutlich hat dein Objektiv einen Hotspot (welches hast du genutzt?). Wenn ja, je stärker du abblendest, desto stärker tritt er auf. Einziges wirkungsvolles Gegenmittel ist die Verwendung eines Objektivs ohne Hotspot. Leider sind recht viele Fuji-Objektive von Hotspots betroffen.
Hier ist eine
unvollständige Übersicht der IR-Eignung der Fuji-Objektive.
Eventuell empfiehlt sich die Anschaffung eines alten manuellen Objektivs, welches dann adaptiert wird. Das hat dann oft auch einen IR-Index und eine Schärfentiefenskala. Außerdem sind die meisten alten Objektive bei IR besser. Ein einfacheres Design und weniger Vergütungen ist dafür oft vorteilhaft.
Meiner Erfahrung nach sind die IR-Ergebnisse einer prinzipiell geeigneten normalen Kamera ohne Umbau genauso gut wie die einer umgebauten Kamera, vorausgesetzt, es ist keine Bewegung im Bild.
Ich habe Infrarot mit einer unmodifizierten Nikon D600 und einer umgebauten Fuji X-A1 gemacht. Bei statischen Bildern ist kein Unterschied feststellbar, es sei dann, man zoomt hinein, dann sind die Bilder der Nikon D600 auf Grund ihres größeren Sensors und der höheren Auflösung leicht besser.
Mit anderen Worten: Man kann erst mal mit einer unmodifizierten Kamera und IR-Filter anfangen. Den Umbau kann man immer noch machen lassen, falls man bemerkt, dass IS sein Ding ist. Fujis gehen ganz gut, der Sperrfilter ist noch nicht zu stark. Aber keinen Billig-IR-Filter nehmen, damit geht's nicht.