在Web開發(fā)過程中，Web端數(shù)據(jù)采集主要通過三種方式實現(xiàn)：服務(wù)器日志、URL解析及JS回傳。

1.服務(wù)器日志：指Web服務(wù)器軟件，例如Httpd、Nginx、Tomcat等自帶的日志，例如Nginx的日志等；2.URL解析：指訪問服務(wù)器時，將URL信息及攜帶的參數(shù)進行解析后，上傳服務(wù)器，例如在進行數(shù)據(jù)搜索官網(wǎng)地址時，我們可以獲得本次用戶搜索的內(nèi)容search為“iphone”；

3.JS回傳：指在Web頁面上添加的各類統(tǒng)計插件，通過在頁面嵌入自定義的Javascript代碼來獲取用戶的訪問行為(比如鼠標(biāo)懸停的位置，點擊的事件等)，然后通過Ajax請求到后臺記錄日志。 數(shù)據(jù)分析:埋點作為原料放在數(shù)據(jù)倉庫中。提供渠道轉(zhuǎn)化、個性推薦等。前端埋點方案

前端埋點-數(shù)倉庫表的開發(fā)成本：

埋點數(shù)據(jù)落到數(shù)倉后，需要預(yù)先建立哪些表，如何做埋點數(shù)據(jù)的分層；畢竟埋點的數(shù)據(jù)體量是非常大的，TB級數(shù)據(jù)的存儲本身就是一個比較大的成本，再加上調(diào)度系統(tǒng)、計算資源、運行性能等方面，就需要數(shù)倉團隊在一開始就要把數(shù)據(jù)模型提前建立好，做好ods層到dw層、ads層的劃分，維度和事實之間的建設(shè)；

數(shù)倉性能，時間問題（hive）：因為埋點數(shù)據(jù)的體量問題，落表的時候，一定會存在大量的冗余字段，如果集群資源比較緊張，對于常規(guī)數(shù)據(jù)的統(tǒng)計、計算都會帶來性能上的問題；在數(shù)據(jù)團隊的架構(gòu)中，有對外提供數(shù)據(jù)應(yīng)用服務(wù)，對于數(shù)據(jù)的實時計算就有一定的要求，什么場景下應(yīng)該是T+1，什么場景下應(yīng)該是偽實時，避免數(shù)據(jù)調(diào)度任務(wù)影響前臺應(yīng)用產(chǎn)出。 有哪些前端埋點和前端監(jiān)控產(chǎn)品代碼埋點優(yōu)點傳遞多樣化自定義屬性、自定義事件，傳遞比較豐富的數(shù)據(jù)到服務(wù)端。

埋點本身現(xiàn)在已經(jīng)有太多的集成解決方案，如webfunny、神策、GIO等平臺，但是在實踐的過程中仍然還是會碰都很多問題，給前端埋點同學(xué)分享下：埋點實踐過程中碰到的坑點。

①埋點開發(fā)技術(shù)執(zhí)行不到位的問題絕大多數(shù)情況下我們說埋點，一般都是說前端埋點，前端開發(fā)工程師在做埋點的時候又多是人為埋點，在開發(fā)過程中，會造成部分信息冗余、重復(fù)、記錄不完整的情況存在；

②多產(chǎn)品之間的模塊差異化問題埋點不能夠只有一套標(biāo)準(zhǔn)規(guī)范，多生態(tài)應(yīng)用下，業(yè)務(wù)繁瑣，在產(chǎn)品、技術(shù)的架構(gòu)上有明顯的差異，不同的產(chǎn)品、模塊、坑位、點擊事件的定義也可能有一定的區(qū)別，這時候可能需要根據(jù)場景劃分不同的埋點標(biāo)準(zhǔn)；

③自定義埋點信息的鍵對設(shè)計問題往往會在埋點里面增加一個json的字段（bdata），在埋點的時候?qū)懭胱远x的業(yè)務(wù)信息進行場景識別，譬如活動id、業(yè)務(wù)信息、用戶快照的基本信息等，不同開發(fā)寫入的自定義字段格式可能會有差異；

埋點行為數(shù)據(jù)對畫像建設(shè)的價值。

常規(guī)的數(shù)據(jù)標(biāo)簽主要是用戶當(dāng)前的狀態(tài)或者行為的結(jié)果值，缺少行為過程的畫像刻畫；而埋點行為數(shù)據(jù)則可以將這部分內(nèi)容補齊，描述用戶的行為過程，讓運營人員可以時刻關(guān)注用戶的行為階段并給予個性化的反饋。

同時，相較于數(shù)據(jù)的畫像，基于埋點數(shù)據(jù)的用戶畫像更新頻率多為日，甚至可以實時更新，動態(tài)變化屬性更強，時效性也更高。因此，埋點行為數(shù)據(jù)是構(gòu)建完整畫像數(shù)據(jù)的重要組成部分，不僅豐富了用戶數(shù)據(jù)的維度，還讓畫像標(biāo)簽更加數(shù)字?jǐn)M人化，更加完整地抽象出用戶信息全貌。 可視化埋點方案適用場景業(yè)務(wù)上下文數(shù)據(jù)相對簡單，操作交互比較固定的界面。

當(dāng)我們點擊一個控件時，要上報哪些內(nèi)容才能全的分析這個點擊行為呢？

準(zhǔn)確的說，一個事件的觸發(fā)，有4個因素：觸發(fā)者、觸發(fā)位置、觸發(fā)的事件、觸發(fā)的時間。(3)觸發(fā)的事件事件類型有瀏覽、點擊、曝光、懸浮，下拉、滾動、長按、右鍵等等，常用的還是瀏覽和點擊。(4)觸發(fā)的事件事件觸發(fā)的時間一般取的是客戶端時間，也就是用戶的本地時間，如果用戶的設(shè)備是移動端，取的就是手機時間，如果是電腦，取的就是電腦的時間。

但是客戶端的時間不太準(zhǔn)確，因為用戶可以去更改設(shè)備時間。所以我們需要一個機制去校準(zhǔn)客戶端時間。一般的做法是，在上報事件時，我們會上報事件觸發(fā)時間t1和數(shù)據(jù)發(fā)送時間t2，服務(wù)端也會拿到一個接收數(shù)據(jù)的時間t3，如果t3-t2>60s，則認(rèn)為客戶端時間不準(zhǔn)，要對客戶端時間進行修正，修正后的客戶端時間是：t1+(t3-t2)為啥t3-t2>60s會認(rèn)為不準(zhǔn)，因為數(shù)據(jù)發(fā)送到接收的時間，一般不會超過60s。 前端監(jiān)控和前端埋點方案設(shè)計。有效的前端埋點方案

前端監(jiān)控和前端埋點sdk。前端埋點方案

埋點的功能作用：分析運營策略的合理性，優(yōu)化用戶體驗，提高使用效率。（精細營銷、場景化提示/私人助理）比如用戶去餐廳購買產(chǎn)品，每次都需要在APP中選擇是否使用優(yōu)惠券，但是通過埋點發(fā)現(xiàn)，全部的用戶對于該商家都是選擇的否，那么說明該商家是從來沒有進行優(yōu)惠券的發(fā)放，那么就可以考慮在商家版中增加一個是否讓用戶選擇優(yōu)惠券的選項，若商家沒有優(yōu)惠券，那么用戶就可以直接跳過選擇是否使用優(yōu)惠券，從而提升用戶體驗及使用效率，分析用戶消費行為，分析不同渠道用戶行為差異。前端埋點方案

上海觀縱科技有限公司是我國webfunny前端監(jiān)控，webfunny前端埋點，全鏈路應(yīng)用性能監(jiān)控，Argus-IT運維監(jiān)控專業(yè)化較早的有限責(zé)任公司之一，公司始建于2022-11-14，在全國各個地區(qū)建立了良好的商貿(mào)渠道和技術(shù)協(xié)作關(guān)系。公司主要提供一般項目:技術(shù)服務(wù)、技術(shù)開發(fā)、技術(shù)咨詢、技術(shù)交流、技術(shù)轉(zhuǎn)讓、技術(shù)推廣;軟件開發(fā);人工智能基礎(chǔ)軟件開發(fā);人工智能應(yīng)用軟件開發(fā);數(shù)據(jù)處理服務(wù);信息技術(shù)咨詢服務(wù);信息系統(tǒng)集成服務(wù):信息系統(tǒng)運行維護服務(wù);計算機系統(tǒng)服務(wù);軟件銷售;計算機軟硬件及輔助設(shè)備批發(fā);計算機軟硬件及輔助設(shè)備零售;電子產(chǎn)品銷售;通信設(shè)備銷售;通訊設(shè)備銷售;咨詢策劃服務(wù);市場調(diào)查(不含涉外調(diào)查);廣告制作;廣告發(fā)布;廣告設(shè)計、代理;會議及展覽服務(wù);貨物進出口。(除依法須經(jīng)批準(zhǔn)的項目外，憑營業(yè)執(zhí)照依法自主開展經(jīng)營活動) 許可項目:建筑智能化系統(tǒng)設(shè)計;建設(shè)工程施工;網(wǎng)絡(luò)文化經(jīng)營;互聯(lián)網(wǎng)信息服務(wù)。(依法須經(jīng)批準(zhǔn)的項目，經(jīng)相關(guān)部門批準(zhǔn)后方可開展經(jīng)營活動，具體經(jīng)營項目以相關(guān)部門批準(zhǔn)文件或許可證件為準(zhǔn))等領(lǐng)域內(nèi)的業(yè)務(wù)，產(chǎn)品滿意，服務(wù)可高，能夠滿足多方位人群或公司的需要。多年來，已經(jīng)為我國傳媒、廣電行業(yè)生產(chǎn)、經(jīng)濟等的發(fā)展做出了重要貢獻。