使用LogHub實(shí)時(shí)記錄采集

　　背景

　　“我要訂購外賣(mài)”是基于平臺的電子商務(wù)網(wǎng)站，用戶(hù)，餐廳，送貨人員等. 用戶(hù)可以在網(wǎng)頁(yè)，應用程序，微信，支付寶等上下訂單；商家收到訂單后開(kāi)始處理，并自動(dòng)通知周邊快遞；快遞員將食物交付給用戶(hù).

　　操作要求

　　在操作過(guò)程中，發(fā)現了以下問(wèn)題:

　　很難獲得用戶(hù). 向渠道（網(wǎng)頁(yè)，微信推送）投入大量*敏*感*詞*，接收一些用戶(hù)，但無(wú)法判斷每個(gè)渠道的有效性，用戶(hù)常常抱怨交付緩慢，但是在哪個(gè)環(huán)節，訂單的接收，分配，處理？如何優(yōu)化？用戶(hù)操作通常會(huì )參與一些優(yōu)惠活動(dòng)（發(fā)送優(yōu)惠券），但無(wú)法獲得效果. 計劃問(wèn)題，如何幫助商家在高峰時(shí)段提前庫存？如何派遣更多快遞員到指定地區？客戶(hù)服務(wù)中，用戶(hù)反饋說(shuō)訂單失敗，用戶(hù)背后的操作是什么？系統中有錯誤嗎？數據采集難點(diǎn)

　　在數據操作過(guò)程中，第一步是如何集中采集分散的日志數據，這將面臨以下挑戰:

　　我們需要采集分散的外部和內部日志以進(jìn)行統一管理. 過(guò)去，這部分工作需要很多工作，但現在可以通過(guò)LogHub 采集函數進(jìn)行訪(fǎng)問(wèn).

　　日志統一管理和配置創(chuàng )建管理日志項目項目，例如myorder

　　創(chuàng )建日志存儲庫Logstore，以從不同的數據源生成日志，例如:

　　如果需要清除原創(chuàng )數據和ETL，則可以創(chuàng )建一些中間結果日志存儲區

　?。ㄓ嘘P(guān)更多操作，請參閱快速啟動(dòng)/管理控制臺）

　　用戶(hù)提升日志采集

　　為了獲取新用戶(hù)，通常有兩種方法:

　　網(wǎng)站注冊時(shí)有直接優(yōu)惠券

　　掃描其他渠道的QR碼并放置優(yōu)惠券

　　方法

　　定義以*敏*感*詞*冊服務(wù)器地址，并生成QR碼（傳單，網(wǎng)頁(yè)）供用戶(hù)注冊和掃描. 當用戶(hù)掃描此頁(yè)面進(jìn)行注冊時(shí)，他知道該用戶(hù)是通過(guò)特定來(lái)源輸入并記錄日志的.

　　http://examplewebsite/login?source=10012&ref=kd4b

　　服務(wù)器接受請求后，服務(wù)器將輸出以下日志:

　　2016-06-20 19:00:00 e41234ab342ef034,102345,5k4d,467890

　　采集方法:

　　應用程序將日志輸出到硬盤(pán)，然后通過(guò)Logtail 采集應用程序通過(guò)SDK寫(xiě)入日志，請參見(jiàn)SDK服務(wù)器數據采集

　　支付寶/微信公眾號編程是一種典型的Web端模式，通常有三種日志類(lèi)型:

　　將練習日志寫(xiě)入本地文件，并通過(guò)Logtail配置正則表達式寫(xiě)入指定的Logstore. 日志可以在Docker中生成. 容器服務(wù)可用于集成日志服務(wù). 可以使用Java程序Log4J Appender. 寫(xiě)）; Log4J Appender C#，Python，Java，PHP，C等可以使用SDK寫(xiě)入Windows服務(wù)器. 您可以使用Logstash 采集終端用戶(hù)日志訪(fǎng)問(wèn)Web / M網(wǎng)站頁(yè)面的用戶(hù)行為

　　頁(yè)面用戶(hù)行為集合可以分為兩類(lèi):

　　頁(yè)面與后臺服務(wù)器之間的交互: 例如下訂單，登錄和注銷(xiāo). 該頁(yè)面沒(méi)有后臺服務(wù)器交互: 該請求直接在前端處理，例如滾動(dòng)，關(guān)閉頁(yè)面等. 方法第一種方法可以引用服務(wù)器采集方法. 第二種方法可以使用Tracking Pixel / JS庫采集頁(yè)面行為，請參考Tracking Web界面服務(wù)器日志的操作和維護

　　例如:

　　不同網(wǎng)絡(luò )環(huán)境下的方法數據采集

　　LogHub在每個(gè)區域提供訪(fǎng)問(wèn)點(diǎn)，每個(gè)區域提供三個(gè)訪(fǎng)問(wèn)點(diǎn):

　　有關(guān)更多信息，請參閱網(wǎng)絡(luò )訪(fǎng)問(wèn)，始終有一種適合您.

　　其他，請參閱LogHub完整采集方法. 查看日志實(shí)時(shí)消耗，涉及流計算，數據清理，數據倉庫和索引查詢(xún)等功能.