探究Android客戶端網(wǎng)絡(luò)預(yù)連接優(yōu)化機(jī)制
對(duì)于一個(gè)普通的接口請(qǐng)求,通過(guò)charles抓包,查看網(wǎng)絡(luò)請(qǐng)求Timing欄信息,我們可以看到類似如下請(qǐng)求時(shí)長(zhǎng)信息:
Duration 175 ms DNS 6 ms Connect 50 msTLS Handshake 75 ms Request 1 ms Response 1 ms Latency 42 ms同樣的請(qǐng)求,再來(lái)一次,時(shí)長(zhǎng)信息如下所示:
Duration 39 ms DNS - Connect - TLS Handshake - Request 0 ms Response 0 ms Latency 39 ms我們發(fā)現(xiàn),整體網(wǎng)絡(luò)請(qǐng)求時(shí)間從175ms降低到了39ms。其中DNS,Connect,TLS Handshake 后面是個(gè)橫線,表示沒(méi)有時(shí)長(zhǎng)信息,于是整體請(qǐng)求時(shí)長(zhǎng)極大的降低了。這就是Http(s)的連接復(fù)用的效果。那么問(wèn)題來(lái)了,什么是連接復(fù)用,為什么它能降低請(qǐng)求時(shí)間?
在解決這個(gè)疑問(wèn)之前,我們先來(lái)看看一個(gè)網(wǎng)絡(luò)請(qǐng)求發(fā)起,到收到返回的數(shù)據(jù),這中間發(fā)生了什么?
客戶端發(fā)起網(wǎng)絡(luò)請(qǐng)求 通過(guò)DNS服務(wù)解析域名,獲取服務(wù)器IP (基于UDP協(xié)議的DNS解析) 建立TCP連接(3次握手) 建立TLS連接(https才會(huì)用到) 發(fā)送網(wǎng)絡(luò)請(qǐng)求request 服務(wù)器接收request,構(gòu)造并返回response TCP連接關(guān)閉(4次揮手)上面的連接復(fù)用直接讓上面2,3,4步都不需要走了。這中間省掉的時(shí)長(zhǎng)應(yīng)該怎么算?如果我們定義網(wǎng)絡(luò)請(qǐng)求一次發(fā)起與收到響應(yīng)的一個(gè)來(lái)回(一次通信來(lái)回)作為一個(gè)RTT(Round-trip delay time)。
1)DNS默認(rèn)基于UDP協(xié)議,解析最少需要1-RTT;
2)建立TCP連接,3次握手,需要2-RTT;
3)建立TLS連接,根據(jù)TLS版本不同有區(qū)別,常見(jiàn)的TLS1.2需要2-RTT。
Client Server
ClientHello -------->
ServerHello
Certificate*
ServerKeyExchange*
CertificateRequest*
<-------- ServerHelloDone
Certificate*
ClientKeyExchange
CertificateVerify*
[ChangeCipherSpec]
Finished -------->
[ChangeCipherSpec]
<-------- Finished
Application Data <-------> Application Data
TLS 1.2握手流程(來(lái)自 RFC 5246)
注:TLS1.3版本相比TLS1.2,支持0-RTT數(shù)據(jù)傳輸(可選,一般是1-RTT),但目前支持率比較低,用的很少。
http1.0版本,每次http請(qǐng)求都需要建立一個(gè)tcp socket連接,請(qǐng)求完成后關(guān)閉連接。前置建立連接過(guò)程可能就會(huì)額外花費(fèi)4-RTT,性能低下。
http1.1版本開始,http連接默認(rèn)就是持久連接,可以復(fù)用,通過(guò)在報(bào)文頭部中加上Connection:Close來(lái)關(guān)閉連接 。如果并行有多個(gè)請(qǐng)求,可能還是需要建立多個(gè)連接,當(dāng)然我們也可以在同一個(gè)TCP連接上傳輸,這種情況下,服務(wù)端必須按照客戶端請(qǐng)求的先后順序依次回送結(jié)果。
注:http1.1默認(rèn)所有的連接都進(jìn)行了復(fù)用。然而空閑的持久連接也可以隨時(shí)被客戶端與服務(wù)端關(guān)閉。不發(fā)送Connection:Close不意味著服務(wù)器承諾連接永遠(yuǎn)保持打開。
http2 更進(jìn)一步,支持二進(jìn)制分幀,實(shí)現(xiàn)TCP連接的多路復(fù)用,不再需要與服務(wù)端建立多個(gè)TCP連接了,同域名的多個(gè)請(qǐng)求可以并行進(jìn)行。
還有個(gè)容易被忽視的是,TCP有擁塞控制,建立連接后有慢啟動(dòng)過(guò)程(根據(jù)網(wǎng)絡(luò)情況一點(diǎn)一點(diǎn)的提高發(fā)送數(shù)據(jù)包的數(shù)量,前面是指數(shù)級(jí)增長(zhǎng),后面變成線性),復(fù)用連接可以避免這個(gè)慢啟動(dòng)過(guò)程,快速發(fā)包。
二、預(yù)連接實(shí)現(xiàn)客戶端常用的網(wǎng)絡(luò)請(qǐng)求框架如OkHttp等,都能完整支持http1.1與HTTP2的功能,也就支持連接復(fù)用。了解了這個(gè)連接復(fù)用機(jī)制優(yōu)勢(shì),那我們就可以利用起來(lái),比如在APP閃屏等待的時(shí)候,就預(yù)先建立首頁(yè)詳情頁(yè)等關(guān)鍵頁(yè)面多個(gè)域名的連接,這樣我們進(jìn)入相應(yīng)頁(yè)面后可以更快的獲取到網(wǎng)絡(luò)請(qǐng)求結(jié)果,給予用戶更好體驗(yàn)。在網(wǎng)絡(luò)環(huán)境偏差的情況下,這種預(yù)連接理論上會(huì)有更好的效果。
具體如何實(shí)現(xiàn)?
第一反應(yīng),我們可以簡(jiǎn)單的對(duì)域名鏈接提前發(fā)起一個(gè)HEAD請(qǐng)求(沒(méi)有body可以省流量),這樣就能提前建立好連接,下次同域名的請(qǐng)求就可以直接復(fù)用,實(shí)現(xiàn)起來(lái)也是簡(jiǎn)單方便。于是寫了個(gè)demo,試了個(gè)簡(jiǎn)單接口,完美,粗略統(tǒng)計(jì)首次請(qǐng)求速度可以提升40%以上。
于是在游戲中心App啟動(dòng)Activity中加入了預(yù)連接相關(guān)邏輯,跑起來(lái)試了下,竟然沒(méi)效果...
抓包分析,發(fā)現(xiàn)連接并沒(méi)有復(fù)用,每次進(jìn)去詳情頁(yè)后都重新創(chuàng)建了連接,預(yù)連接可能只是省掉了DNS解析時(shí)間,demo上的效果無(wú)法復(fù)現(xiàn)。看樣子分析OkHttp連接復(fù)用相關(guān)源碼是跑不掉了。
三、源碼分析OKHttp通過(guò)幾個(gè)默認(rèn)的Interceptor用于處理網(wǎng)絡(luò)請(qǐng)求相關(guān)邏輯,建立連接在ConnectInterceptor類中;
public final class ConnectInterceptor implements Interceptor { @Override public Response intercept(Chain chain) throws IOException { RealInterceptorChain realChain = (RealInterceptorChain) chain; Request request = realChain.request(); StreamAllocation streamAllocation = realChain.streamAllocation(); // We need the network to satisfy this request. Possibly for validating a conditional GET. boolean doExtensiveHealthChecks = !request.method().equals('GET'); HttpCodec httpCodec = streamAllocation.newStream(client, chain, doExtensiveHealthChecks); RealConnection connection = streamAllocation.connection(); return realChain.proceed(request, streamAllocation, httpCodec, connection); }}
RealConnection即為后面使用的connection,connection生成相關(guān)邏輯在StreamAllocation類中;
public HttpCodec newStream( OkHttpClient client, Interceptor.Chain chain, boolean doExtensiveHealthChecks) { ... RealConnection resultConnection = findHealthyConnection(connectTimeout, readTimeout,writeTimeout, pingIntervalMillis, connectionRetryEnabled, doExtensiveHealthChecks); HttpCodec resultCodec = resultConnection.newCodec(client, chain, this); ...}private RealConnection findHealthyConnection(int connectTimeout, int readTimeout, int writeTimeout, int pingIntervalMillis, boolean connectionRetryEnabled, boolean doExtensiveHealthChecks) throws IOException { while (true) { RealConnection candidate = findConnection(connectTimeout, readTimeout, writeTimeout, pingIntervalMillis, connectionRetryEnabled); ... return candidate; }} /** * Returns a connection to host a new stream. This prefers the existing connection if it exists, * then the pool, finally building a new connection. */ private RealConnection findConnection(int connectTimeout, int readTimeout, int writeTimeout, int pingIntervalMillis, boolean connectionRetryEnabled) throws IOException { ...// 嘗試從connectionPool中獲取可用connection Internal.instance.acquire(connectionPool, address, this, null); if (connection != null) { foundPooledConnection = true; result = connection; } else { selectedRoute = route; } ... if (!foundPooledConnection) { ... // 如果最終沒(méi)有可復(fù)用的connection,則創(chuàng)建一個(gè)新的result = new RealConnection(connectionPool, selectedRoute); } ...}
這些源碼都是基于okhttp3.13版本的代碼,3.14版本開始這些邏輯有修改。
StreamAllocation類中最終獲取connection是在findConnection方法中,優(yōu)先復(fù)用已有連接,沒(méi)可用的才新建立連接。獲取可復(fù)用的連接是在ConnectionPool類中;
/** * Manages reuse of HTTP and HTTP/2 connections for reduced network latency. HTTP requests that * share the same {@link Address} may share a {@link Connection}. This class implements the policy * of which connections to keep open for future use. */public final class ConnectionPool { private final Runnable cleanupRunnable = () -> { while (true) { long waitNanos = cleanup(System.nanoTime()); if (waitNanos == -1) return; if (waitNanos > 0) {long waitMillis = waitNanos / 1000000L;waitNanos -= (waitMillis * 1000000L);synchronized (ConnectionPool.this) { try { ConnectionPool.this.wait(waitMillis, (int) waitNanos); } catch (InterruptedException ignored) { }} } } }; // 用一個(gè)隊(duì)列保存當(dāng)前的連接 private final Deque<RealConnection> connections = new ArrayDeque<>(); /** * Create a new connection pool with tuning parameters appropriate for a single-user application. * The tuning parameters in this pool are subject to change in future OkHttp releases. Currently * this pool holds up to 5 idle connections which will be evicted after 5 minutes of inactivity. */ public ConnectionPool() { this(5, 5, TimeUnit.MINUTES); } public ConnectionPool(int maxIdleConnections, long keepAliveDuration, TimeUnit timeUnit) { ... } void acquire(Address address, StreamAllocation streamAllocation, @Nullable Route route) { assert (Thread.holdsLock(this)); for (RealConnection connection : connections) { if (connection.isEligible(address, route)) {streamAllocation.acquire(connection, true);return; } } }
由上面源碼可知,ConnectionPool默認(rèn)最大維持5個(gè)空閑的connection,每個(gè)空閑connection5分鐘后自動(dòng)釋放。如果connection數(shù)量超過(guò)最大數(shù)5個(gè),則會(huì)移除最舊的空閑connection。
最終判斷空閑的connection是否匹配,是在RealConnection的isEligible方法中;
/** * Returns true if this connection can carry a stream allocation to {@code address}. If non-null * {@code route} is the resolved route for a connection. */ public boolean isEligible(Address address, @Nullable Route route) { // If this connection is not accepting new streams, we’re done. if (allocations.size() >= allocationLimit || noNewStreams) return false; // If the non-host fields of the address don’t overlap, we’re done. if (!Internal.instance.equalsNonHost(this.route.address(), address)) return false; // If the host exactly matches, we’re done: this connection can carry the address. if (address.url().host().equals(this.route().address().url().host())) { return true; // This connection is a perfect match. } // At this point we don’t have a hostname match. But we still be able to carry the request if // our connection coalescing requirements are met. See also: // https://hpbn.co/optimizing-application-delivery/#eliminate-domain-sharding // https://daniel.haxx.se/blog/2016/08/18/http2-connection-coalescing/ // 1. This connection must be HTTP/2. if (http2Connection == null) return false; // 2. The routes must share an IP address. This requires us to have a DNS address for both // hosts, which only happens after route planning. We can’t coalesce connections that use a // proxy, since proxies don’t tell us the origin server’s IP address. if (route == null) return false; if (route.proxy().type() != Proxy.Type.DIRECT) return false; if (this.route.proxy().type() != Proxy.Type.DIRECT) return false; if (!this.route.socketAddress().equals(route.socketAddress())) return false; // 3. This connection’s server certificate’s must cover the new host. if (route.address().hostnameVerifier() != OkHostnameVerifier.INSTANCE) return false; if (!supportsUrl(address.url())) return false; // 4. Certificate pinning must match the host. try { address.certificatePinner().check(address.url().host(), handshake().peerCertificates()); } catch (SSLPeerUnverifiedException e) { return false; } return true; // The caller’s address can be carried by this connection. }
這塊代碼比較直白,簡(jiǎn)單解釋下比較條件:
如果該connection已達(dá)到承載的流上限(即一個(gè)connection可以承載幾個(gè)請(qǐng)求,http1默認(rèn)是1個(gè),http2默認(rèn)是Int最大值)則不符合;
如果2個(gè)Address除Host之外的屬性有不匹配,則不符合(如果2個(gè)請(qǐng)求用的okhttpClient不同,復(fù)寫了某些重要屬性,或者服務(wù)端端口等屬性不一樣,那都不允許復(fù)用);
如果host相同,則符合,直接返回true(其它字段已經(jīng)在上一條比較了);
如果是http2,則判斷無(wú)代理、服務(wù)器IP相同、證書相同等條件,如果都符合也返回true;
整體看下來(lái),出問(wèn)題的地方應(yīng)該就是ConnectionPool 的隊(duì)列容量太小導(dǎo)致的。游戲中心業(yè)務(wù)復(fù)雜,進(jìn)入首頁(yè)后,觸發(fā)了很多接口請(qǐng)求,導(dǎo)致連接池直接被占滿,于是在啟動(dòng)頁(yè)做好的預(yù)連接被釋放了。通過(guò)調(diào)試驗(yàn)證了下,進(jìn)入詳情頁(yè)時(shí),ConnectionPool中的確已經(jīng)沒(méi)有之前預(yù)連接的connection了。
四、優(yōu)化在http1.1中,瀏覽器一般都是限定一個(gè)域名最多保留5個(gè)左右的空閑連接。然而okhttp的連接池并沒(méi)有區(qū)分域名,整體只做了默認(rèn)最大5個(gè)空閑連接,如果APP中不同功能模塊涉及到了多個(gè)域名,那這默認(rèn)的5個(gè)空閑連接肯定是不夠用的。有2個(gè)修改思路:
重寫ConnectionPool,將連接池改為根據(jù)域名來(lái)限定數(shù)量,這樣可以完美解決問(wèn)題。然而OkHttp的ConnectionPool是final類型的,無(wú)法直接重寫里面邏輯,另外OkHttp不同版本上,ConnectionPool邏輯也有區(qū)別,如果考慮在編譯過(guò)程中使用ASM等字節(jié)碼編寫技術(shù)來(lái)實(shí)現(xiàn),成本很大,風(fēng)險(xiǎn)很高。 直接調(diào)大連接池?cái)?shù)量和超時(shí)時(shí)間。這個(gè)簡(jiǎn)單有效,可以根據(jù)自己業(yè)務(wù)情況適當(dāng)調(diào)大這個(gè)連接池最大數(shù)量,在構(gòu)建OkHttpClient的時(shí)候就可以傳入這個(gè)自定義的ConnectionPool對(duì)象。我們直接選定了方案2。
五、問(wèn)答1、如何確認(rèn)連接池最大數(shù)量值?
這個(gè)數(shù)量值有2個(gè)參數(shù)作為參考:頁(yè)面最大同時(shí)請(qǐng)求數(shù),App總的域名數(shù)。也可以簡(jiǎn)單設(shè)定一個(gè)很大的值,然后進(jìn)入APP后,將各個(gè)主要頁(yè)面都點(diǎn)一遍,看看當(dāng)前ConnectionPool中留存的connection數(shù)量,適當(dāng)做一下調(diào)整即可。
2、調(diào)大了連接池會(huì)不會(huì)導(dǎo)致內(nèi)存占用過(guò)多?
經(jīng)測(cè)試:將connectionPool最大值調(diào)成50,在一個(gè)頁(yè)面上,用了13個(gè)域名鏈接,總共重復(fù)4次,也就是一次發(fā)起52個(gè)請(qǐng)求之后,ConnectionPool中留存的空閑connection平均22.5個(gè),占用內(nèi)存為97Kb,ConnectionPool中平均每多一個(gè)connection會(huì)占用4.3Kb內(nèi)存。
3、調(diào)大了連接池會(huì)影響到服務(wù)器嗎?
理論上是不會(huì)的。連接是雙向的,即使客戶端將connection一直保留,服務(wù)端也會(huì)根據(jù)實(shí)際連接數(shù)量和時(shí)長(zhǎng)調(diào)整,自動(dòng)關(guān)閉連接的。比如服務(wù)端常用的nginx就可以自行設(shè)定最大保留的connection數(shù)量,超時(shí)也會(huì)自動(dòng)關(guān)閉舊連接。因此如果服務(wù)器定義的最大連接數(shù)和超時(shí)時(shí)間比較小,可能我們的預(yù)連接會(huì)無(wú)效,因?yàn)檫B接被服務(wù)端關(guān)閉了。
用charles可以看到這種連接被服務(wù)端關(guān)閉的效果:TLS大類中Session Resumed里面看到復(fù)用信息。
這種情況下,客戶端會(huì)重新建立連接,會(huì)有tcp和tls連接時(shí)長(zhǎng)信息。
4、預(yù)連接會(huì)不會(huì)導(dǎo)致服務(wù)器壓力過(guò)大?
由于進(jìn)入啟動(dòng)頁(yè)就發(fā)起了網(wǎng)絡(luò)請(qǐng)求進(jìn)行預(yù)連接,接口請(qǐng)求數(shù)增多了,服務(wù)器肯定會(huì)有影響,具體需要根據(jù)自己業(yè)務(wù)以及服務(wù)器壓力來(lái)判斷是否進(jìn)行預(yù)連接。
5、如何最大化預(yù)連接效果?
由上面第3點(diǎn)問(wèn)題可知,我們的效果實(shí)際是和服務(wù)器配置息息相關(guān),此問(wèn)題涉及到服務(wù)器的調(diào)優(yōu)。
服務(wù)器如果將連接超時(shí)設(shè)置的很小或關(guān)閉,那可能每次請(qǐng)求都需要重新建立連接,這樣服務(wù)器在高并發(fā)的時(shí)候會(huì)因?yàn)椴粩鄤?chuàng)建和銷毀TCP連接而消耗很多資源,造成大量資源浪費(fèi)。
服務(wù)器如果將連接超時(shí)設(shè)置的很大,那會(huì)由于連接長(zhǎng)時(shí)間未釋放,導(dǎo)致服務(wù)器服務(wù)的并發(fā)數(shù)受到影響,如果超過(guò)最大連接數(shù),新的請(qǐng)求可能會(huì)失敗。
可以考慮根據(jù)客戶端用戶訪問(wèn)到預(yù)連接接口平均用時(shí)來(lái)調(diào)節(jié)。比如游戲中心詳情頁(yè)接口預(yù)連接,那可以統(tǒng)計(jì)一下用戶從首頁(yè)平均瀏覽多長(zhǎng)時(shí)間才會(huì)進(jìn)入到詳情頁(yè),根據(jù)這個(gè)時(shí)長(zhǎng)和服務(wù)器負(fù)載情況來(lái)適當(dāng)調(diào)節(jié)。
以上就是探究Android客戶端網(wǎng)絡(luò)預(yù)連接優(yōu)化機(jī)制的詳細(xì)內(nèi)容,更多關(guān)于Android客戶端網(wǎng)絡(luò) 預(yù)連接優(yōu)化的資料請(qǐng)關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. 基于 Python 實(shí)踐感知器分類算法2. Python如何批量生成和調(diào)用變量3. ASP.Net Core對(duì)USB攝像頭進(jìn)行截圖4. ajax動(dòng)態(tài)加載json數(shù)據(jù)并詳細(xì)解析5. Python 中如何使用 virtualenv 管理虛擬環(huán)境6. python利用opencv實(shí)現(xiàn)顏色檢測(cè)7. 通過(guò)CSS數(shù)學(xué)函數(shù)實(shí)現(xiàn)動(dòng)畫特效8. ASP.Net Core(C#)創(chuàng)建Web站點(diǎn)的實(shí)現(xiàn)9. ASP.NET MVC實(shí)現(xiàn)橫向展示購(gòu)物車10. windows服務(wù)器使用IIS時(shí)thinkphp搜索中文無(wú)效問(wèn)題
