可观察，出错时重试并仅在完成时缓存

Question

我们可以使用 cache() 运算符来避免多次执行长任务（http 请求），并重用其结果：

Observable apiCall = createApiCallObservable().cache(); // notice the .cache()

---------------------------------------------
// the first time we need it
apiCall.andSomeOtherStuff()
               .subscribe(subscriberA);

---------------------------------------------
//in the future when we need it again
apiCall.andSomeDifferentStuff()
               .subscribe(subscriberB);

第一次，http请求被执行了，但是第二次，因为我们使用了cache()操作符，请求不会被执行，但是我们会能够重用第一个结果。

当第一个请求成功完成时，这工作正常。但是如果 onError 在第一次尝试时被调用，那么下一次新订阅者订阅同一个 observable 时，onError 将被再次调用而不会再次尝试 http 请求。

我们正在尝试做的是，如果第一次调用 onError，那么下次有人订阅同一个可观察对象时，将从头开始尝试 http 请求。也就是说，observable 将仅缓存成功的 api 调用，即调用 onCompleted 的调用。

关于如何进行的任何想法？我们尝试过使用 retry() 和 cache() 运算符，但运气不佳。

Answer 1

你必须做一些状态处理。以下是我的操作方式：

public class CachedRetry {

    public static final class OnErrorRetryCache<T> {
        final AtomicReference<Observable<T>> cached = 
                new AtomicReference<>();

        final Observable<T> result;

        public OnErrorRetryCache(Observable<T> source) {
            result = Observable.defer(() -> {
                for (;;) {
                    Observable<T> conn = cached.get();
                    if (conn != null) {
                        return conn;
                    }
                    Observable<T> next = source
                            .doOnError(e -> cached.set(null))
                            .replay()
                            .autoConnect();

                    if (cached.compareAndSet(null, next)) {
                        return next;
                    }
                }
            });
        }

        public Observable<T> get() {
            return result;
        }
    }

    public static void main(String[] args) {
        AtomicInteger calls = new AtomicInteger();
        Observable<Integer> source = Observable
                .just(1)
                .doOnSubscribe(() -> 
                    System.out.println("Subscriptions: " + (1 + calls.get())))
                .flatMap(v -> {
                    if (calls.getAndIncrement() == 0) {
                        return Observable.error(new RuntimeException());
                    }
                    return Observable.just(42);
                });

        Observable<Integer> o = new OnErrorRetryCache<>(source).get();

        o.subscribe(System.out::println, 
                Throwable::printStackTrace, 
                () -> System.out.println("Done"));

        o.subscribe(System.out::println, 
                Throwable::printStackTrace, 
                () -> System.out.println("Done"));

        o.subscribe(System.out::println, 
                Throwable::printStackTrace, 
                () -> System.out.println("Done"));
    }
}

它的工作原理是缓存一个完全成功的源并将其 returns 提供给所有人。否则，（部分）失败的源将创建缓存，下一个调用观察者将触发重新订阅。

Answer 2

这是我们在扩展 akarnokd 的解决方案后最终得到的解决方案：

public class OnErrorRetryCache<T> {

    public static <T> Observable<T> from(Observable<T> source) {
         return new OnErrorRetryCache<>(source).deferred;
    }

    private final Observable<T> deferred;
    private final Semaphore singlePermit = new Semaphore(1);

    private Observable<T> cache = null;
    private Observable<T> inProgress = null;

    private OnErrorRetryCache(Observable<T> source) {
        deferred = Observable.defer(() -> createWhenObserverSubscribes(source));
    }

    private Observable<T> createWhenObserverSubscribes(Observable<T> source) 
    {
        singlePermit.acquireUninterruptibly();

        Observable<T> cached = cache;
        if (cached != null) {
            singlePermit.release();
            return cached;
        }

        inProgress = source
                .doOnCompleted(this::onSuccess)
                .doOnTerminate(this::onTermination)
                .replay()
                .autoConnect();

        return inProgress;
    }

    private void onSuccess() {
        cache = inProgress;
    }

    private void onTermination() {
        inProgress = null;
        singlePermit.release();
    }
}

我们需要缓存来自 Retrofit 的 http 请求的结果。所以这是创建的，考虑到一个发出单个项目的可观察对象。

如果观察者在执行 http 请求时订阅，我们希望它等待并且不会执行两次请求，除非正在进行的请求失败。为此，信号量允许对创建或 returns 缓存的可观察对象的块进行单一访问，如果创建了一个新的可观察对象，我们将等到该对象终止。可以找到上述测试 here

Answer 3

有没有考虑过使用AsyncSubject来实现网络请求的缓存？我做了一个示例应用程序 RxApp 来测试它是如何工作的。我使用单例模型从网络获取响应。这使得缓存响应、从多个片段访问数据、订阅待处理请求以及为自动化 UI 测试提供模拟数据成为可能。

Answer 4

好吧，对于仍然感兴趣的任何人，我想我有一个更好的方法来实现它与 rx。

重点是使用onErrorResumeNext，它可以让你在发生错误时替换Observable。所以它应该看起来像这样：

Observable<Object> apiCall = createApiCallObservable().cache(1);
//future call
apiCall.onErrorResumeNext(new Func1<Throwable, Observable<? extends Object>>() {
    public Observable<? extends Object> call(Throwable throwable) {
        return  createApiCallObservable();
        }
    });

这样，如果第一次调用失败，以后的调用将只调用它（仅一次）。

但是尝试使用第一个可观察对象的所有其他调用者都将失败并发出不同的请求。

您引用了原始可观察对象，让我们更新它。

所以，一个懒人getter:

Observable<Object> apiCall;
private Observable<Object> getCachedApiCall() {
    if ( apiCall == null){
        apiCall = createApiCallObservable().cache(1);
    }
    return apiCall;
}

现在，一个 getter 将在前一个失败时重试：

private Observable<Object> getRetryableCachedApiCall() {
    return getCachedApiCall().onErrorResumeNext(new Func1<Throwable, Observable<? extends Object>>() {
        public Observable<? extends Object> call(Throwable throwable) {
            apiCall = null;
            return getCachedApiCall();
        }
    });
}

请注意每次调用只会重试一次。

现在您的代码将如下所示：

---------------------------------------------
// the first time we need it - this will be without a retry if you want..
getCachedApiCall().andSomeOtherStuff()
               .subscribe(subscriberA);

---------------------------------------------
//in the future when we need it again - for any other call so we will have a retry
getRetryableCachedApiCall().andSomeDifferentStuff()
               .subscribe(subscriberB);

Answer 5

柏拉图的解决方案是正确的！如果有人需要具有扩展功能和参数化缓存大小的 Kotlin 版本，它就在这里。

class OnErrorRetryCache<T> constructor(source: Flowable<T>, private val retries: Int? = null) {

val deferred: Flowable<T>
private val singlePermit = Semaphore(1)

private var cache: Flowable<T>? = null
private var inProgress: Flowable<T>? = null

init {
    deferred = Flowable.defer { createWhenObserverSubscribes(source) }
}

private fun createWhenObserverSubscribes(source: Flowable<T>): Flowable<T> {
    singlePermit.acquireUninterruptibly()

    val cached = cache
    if (cached != null) {
        singlePermit.release()
        return cached
    }

    inProgress = source
            .doOnComplete(::onSuccess)
            .doOnTerminate(::onTermination)
            .let {
                when (retries) {
                    null -> it.replay()
                    else -> it.replay(retries)
                }
            }
            .autoConnect()

    return inProgress!!
}

private fun onSuccess() {
    cache = inProgress
}

private fun onTermination() {
    inProgress = null
    singlePermit.release()
}

}

fun <T> Flowable<T>.onErrorRetryCache(retries: Int? = null) = OnErrorRetryCache(this, retries).deferred

以及证明其工作原理的快速测试：

@Test
fun `when source fails for the first time, new observables just resubscribe`() {

    val cacheSize = 2
    val error = Exception()
    var shouldFail = true //only fail on the first subscription

    val observable = Flowable.defer {
        when (shouldFail) {
            true -> Flowable.just(1, 2, 3, 4)
                    .doOnNext { shouldFail = false }
                    .concatWith(Flowable.error(error))
            false -> Flowable.just(5, 6, 7, 8)
        }
    }.onErrorRetryCache(cacheSize)

    val test1 = observable.test()
    val test2 = observable.test()
    val test3 = observable.test()

    test1.assertValues(1, 2, 3, 4).assertError(error) //fails the first time
    test2.assertValues(5, 6, 7, 8).assertNoErrors() //then resubscribes and gets whole stream from source
    test3.assertValues(7, 8).assertNoErrors() //another subscriber joins in and gets the 2 last cached values

}

可观察，出错时重试并仅在完成时缓存

Observable, retry on error and cache only if completed

rx-java

rx-android