埋點(diǎn)本身現(xiàn)在已經(jīng)有太多的集成解決方案,如webfunny、神策、GIO等平臺(tái),但是在實(shí)踐的過程中仍然還是會(huì)碰都很多問題,給前端埋點(diǎn)同學(xué)分享下:埋點(diǎn)實(shí)踐過程中碰到的坑點(diǎn)。
①前后端埋點(diǎn)不一致的問題前端請(qǐng)求服務(wù)端的數(shù)據(jù)大多是存在binlog里面的,數(shù)據(jù)日志同步解析的過程里面可能會(huì)存在丟包的可能性,數(shù)倉的穩(wěn)定性也會(huì)影響數(shù)據(jù)質(zhì)量;后端服務(wù)信息存儲(chǔ)的數(shù)據(jù)是存在mysql,表字段結(jié)構(gòu)化,分多表存儲(chǔ),需要靠主鍵進(jìn)行關(guān)聯(lián),有大量的ETL過程。兩者之間可能因?yàn)閿?shù)據(jù)清洗、處理、實(shí)時(shí)技術(shù)等原因,造成數(shù)據(jù)差異化;
②自埋點(diǎn)和第三方應(yīng)用統(tǒng)計(jì)口徑的問題自埋點(diǎn)一般都會(huì)定義一個(gè)id作為區(qū)分用戶的標(biāo)志,但是第三方是缺少用戶屬性信息的判斷,一般會(huì)以設(shè)備號(hào)uuid/imse,或者IP地址段、mac地址段作為區(qū)分標(biāo)志,從而造成統(tǒng)計(jì)數(shù)據(jù)上的差異化,對(duì)于留存分析、轉(zhuǎn)化分析、流失分析需要用到明細(xì)數(shù)據(jù)的場(chǎng)景,可兼容性不是很友好; 代碼埋點(diǎn)方案優(yōu)點(diǎn):可以按照業(yè)務(wù)上報(bào)詳細(xì)、定制化的數(shù)據(jù)。前端埋點(diǎn)曝光事件系統(tǒng)哪家好
有不少開發(fā)人員認(rèn)為埋點(diǎn)不分前端和后端的,也不分客戶端,只要有需求要對(duì)某段代碼進(jìn)行分析或者性能上的要求就會(huì)有埋點(diǎn)。
埋點(diǎn)就是插入一段跟現(xiàn)在業(yè)務(wù)邏輯毫無相干的代碼進(jìn)行某些數(shù)據(jù)收集,通過對(duì)于這些數(shù)據(jù)進(jìn)行分析,我們可以得到很多有用的信息。前端埋點(diǎn)在性能要求很高的網(wǎng)站大量普及,比如說淘寶,京東等等日入訪問可達(dá)百萬甚至千萬級(jí)別的網(wǎng)站,對(duì)于這些網(wǎng)站進(jìn)行埋點(diǎn)是非常有必要的。
通常來說,埋點(diǎn)階段是在頁面onLoad階段即一旦頁面加載完所有內(nèi)容,就會(huì)執(zhí)行這段數(shù)據(jù)。也可以根據(jù)不同的業(yè)務(wù)邏輯進(jìn)行代碼處理。 專業(yè)的前端埋點(diǎn)自定義埋點(diǎn)方案埋點(diǎn)是數(shù)據(jù)的來源,采集的數(shù)據(jù)可以分析網(wǎng)站/APP的使用情況,用戶行為習(xí)慣等。
前端埋點(diǎn)的3種主流方案:
一、無痕埋點(diǎn)(全埋點(diǎn))方案,利用瀏覽器或APP自帶的監(jiān)控方式,對(duì)用戶的瀏覽頁面、點(diǎn)擊等行為進(jìn)行收集,一般用于粗顆粒度的數(shù)據(jù)分析,例如公司的slardar:數(shù)據(jù)噪聲大不管有用沒有;數(shù)據(jù)都會(huì)被收集,無法定制化埋點(diǎn);無法采集到指定事件和業(yè)務(wù)屬性;可供DA使用的信息較少;接入簡(jiǎn)單,幾乎無侵入,不需要額外的開發(fā)成本;用戶操作行為收集非常完整,幾乎不會(huì)遺漏。
二、代碼埋點(diǎn)方案,前端開發(fā)人員在代碼中自定義監(jiān)控和收集:工作量大,而且對(duì)代碼侵入性很大,后期維護(hù)也不是很方便;可以精確埋點(diǎn),具備明確的事件標(biāo)識(shí);業(yè)務(wù)屬性非常豐富;埋點(diǎn)觸發(fā)方式可以靈活定義;DA使用更方便和精確。
三、埋點(diǎn)sdk方案,sdk向外暴露上報(bào)埋點(diǎn)的接口,監(jiān)控和收集過程前端開發(fā)人員無感知。業(yè)務(wù)開發(fā)只需關(guān)注事件標(biāo)識(shí)、業(yè)務(wù)屬性等;兼顧無痕埋點(diǎn)優(yōu)點(diǎn)和代碼埋點(diǎn)的優(yōu)勢(shì)。
埋點(diǎn)的功能作用:分析運(yùn)營(yíng)策略的合理性,優(yōu)化用戶體驗(yàn),提高使用效率。(精細(xì)營(yíng)銷、場(chǎng)景化提示/私人助理)比如用戶去餐廳購買產(chǎn)品,每次都需要在APP中選擇是否使用優(yōu)惠券,但是通過埋點(diǎn)發(fā)現(xiàn),全部的用戶對(duì)于該商家都是選擇的否,那么說明該商家是從來沒有進(jìn)行優(yōu)惠券的發(fā)放,那么就可以考慮在商家版中增加一個(gè)是否讓用戶選擇優(yōu)惠券的選項(xiàng),若商家沒有優(yōu)惠券,那么用戶就可以直接跳過選擇是否使用優(yōu)惠券,從而提升用戶體驗(yàn)及使用效率,分析用戶消費(fèi)行為,分析不同渠道用戶行為差異。數(shù)據(jù)埋點(diǎn)是一種常用的數(shù)據(jù)采集的方法。
前端埋點(diǎn)-數(shù)倉庫表的開發(fā)成本:
埋點(diǎn)數(shù)據(jù)落到數(shù)倉后,需要預(yù)先建立哪些表,如何做埋點(diǎn)數(shù)據(jù)的分層;畢竟埋點(diǎn)的數(shù)據(jù)體量是非常大的,TB級(jí)數(shù)據(jù)的存儲(chǔ)本身就是一個(gè)比較大的成本,再加上調(diào)度系統(tǒng)、計(jì)算資源、運(yùn)行性能等方面,就需要數(shù)倉團(tuán)隊(duì)在一開始就要把數(shù)據(jù)模型提前建立好,做好ods層到dw層、ads層的劃分,維度和事實(shí)之間的建設(shè);
數(shù)倉性能,時(shí)間問題(hive):因?yàn)槁顸c(diǎn)數(shù)據(jù)的體量問題,落表的時(shí)候,一定會(huì)存在大量的冗余字段,如果集群資源比較緊張,對(duì)于常規(guī)數(shù)據(jù)的統(tǒng)計(jì)、計(jì)算都會(huì)帶來性能上的問題;在數(shù)據(jù)團(tuán)隊(duì)的架構(gòu)中,有對(duì)外提供數(shù)據(jù)應(yīng)用服務(wù),對(duì)于數(shù)據(jù)的實(shí)時(shí)計(jì)算就有一定的要求,什么場(chǎng)景下應(yīng)該是T+1,什么場(chǎng)景下應(yīng)該是偽實(shí)時(shí),避免數(shù)據(jù)調(diào)度任務(wù)影響前臺(tái)應(yīng)用產(chǎn)出。 前端埋點(diǎn)怎么快速實(shí)現(xiàn)。如何實(shí)現(xiàn)前端埋點(diǎn)頁面埋點(diǎn)平臺(tái)
頁面停留埋點(diǎn)事件主要是記錄前一頁瀏覽時(shí)間。前端埋點(diǎn)曝光事件系統(tǒng)哪家好
大數(shù)據(jù)時(shí)代,多數(shù)的web或app產(chǎn)品都會(huì)使用第三方或自己開發(fā)相應(yīng)的數(shù)據(jù)系統(tǒng),進(jìn)行用戶行為數(shù)據(jù)或其它信息數(shù)據(jù)的收集,在這個(gè)過程中,埋點(diǎn)是比較重要的一環(huán)。作為開發(fā)和測(cè)試人員你知道什么是數(shù)據(jù)埋點(diǎn)嗎?作為測(cè)試重點(diǎn)要關(guān)注哪些方面?埋點(diǎn)測(cè)試的過程有兩個(gè)比較重要的環(huán)節(jié),埋點(diǎn)上報(bào)和埋點(diǎn)落庫。
埋點(diǎn)上報(bào):無論是前端埋點(diǎn)還是后端埋點(diǎn),是否正常按照相關(guān)規(guī)則進(jìn)行上報(bào),相關(guān)的事件名、屬性值都是否完整正確上報(bào)。
埋點(diǎn)落庫:埋點(diǎn)上報(bào)完的數(shù)據(jù)是需要存儲(chǔ)到數(shù)據(jù)庫當(dāng)中再進(jìn)行相關(guān)的數(shù)據(jù)統(tǒng)計(jì)、分析、歸類等等,除了檢查埋點(diǎn)上報(bào),還要看終數(shù)據(jù)是否正常落庫,相關(guān)數(shù)據(jù)字段是否正常。 前端埋點(diǎn)曝光事件系統(tǒng)哪家好
上海觀縱科技有限公司發(fā)展規(guī)模團(tuán)隊(duì)不斷壯大,現(xiàn)有一支專業(yè)技術(shù)團(tuán)隊(duì),各種專業(yè)設(shè)備齊全。專業(yè)的團(tuán)隊(duì)大多數(shù)員工都有多年工作經(jīng)驗(yàn),熟悉行業(yè)專業(yè)知識(shí)技能,致力于發(fā)展webfunny,walkingfunny,argus的品牌。公司堅(jiān)持以客戶為中心、一般項(xiàng)目:技術(shù)服務(wù)、技術(shù)開發(fā)、技術(shù)咨詢、技術(shù)交流、技術(shù)轉(zhuǎn)讓、技術(shù)推廣;軟件開發(fā);人工智能基礎(chǔ)軟件開發(fā);人工智能應(yīng)用軟件開發(fā);數(shù)據(jù)處理服務(wù);信息技術(shù)咨詢服務(wù);信息系統(tǒng)集成服務(wù):信息系統(tǒng)運(yùn)行維護(hù)服務(wù);計(jì)算機(jī)系統(tǒng)服務(wù);軟件銷售;計(jì)算機(jī)軟硬件及輔助設(shè)備批發(fā);計(jì)算機(jī)軟硬件及輔助設(shè)備零售;電子產(chǎn)品銷售;通信設(shè)備銷售;通訊設(shè)備銷售;咨詢策劃服務(wù);市場(chǎng)調(diào)查(不含涉外調(diào)查);廣告制作;廣告發(fā)布;廣告設(shè)計(jì)、代理;會(huì)議及展覽服務(wù);貨物進(jìn)出口。(除依法須經(jīng)批準(zhǔn)的項(xiàng)目外,憑營(yíng)業(yè)執(zhí)照依法自主開展經(jīng)營(yíng)活動(dòng)) 許可項(xiàng)目:建筑智能化系統(tǒng)設(shè)計(jì);建設(shè)工程施工;網(wǎng)絡(luò)文化經(jīng)營(yíng);互聯(lián)網(wǎng)信息服務(wù)。(依法須經(jīng)批準(zhǔn)的項(xiàng)目,經(jīng)相關(guān)部門批準(zhǔn)后方可開展經(jīng)營(yíng)活動(dòng),具體經(jīng)營(yíng)項(xiàng)目以相關(guān)部門批準(zhǔn)文件或許可證件為準(zhǔn))市場(chǎng)為導(dǎo)向,重信譽(yù),保質(zhì)量,想客戶之所想,急用戶之所急,全力以赴滿足客戶的一切需要。自公司成立以來,一直秉承“以質(zhì)量求生存,以信譽(yù)求發(fā)展”的經(jīng)營(yíng)理念,始終堅(jiān)持以客戶的需求和滿意為重點(diǎn),為客戶提供良好的webfunny前端監(jiān)控,webfunny前端埋點(diǎn),全鏈路應(yīng)用性能監(jiān)控,Argus-IT運(yùn)維監(jiān)控,從而使公司不斷發(fā)展壯大。