Bunun sebebi receylerview ın adapter ini geç setliyor olmanız. Recyclerview ın adapterini hemen setlemeniz lazım. Layout init olurken recyclerview adaptere ihtiyaç duyar bulamaz ise bu hatayı verir. onCreateView içinde hemen boş arraylist ile setAdapter kullanarak setleyin. Asenkron olarak kendi listeniz yüklendikten sonra notifydatasetchanged() ile güncellersiniz. Sorunun kesin çözümü budur.