chinesefreesexvideos高潮,欧美极品少妇性运交,久久久国产一区二区三区,99久久婷婷国产综合精品,成人国产一区二区三区

APP推廣合作
聯(lián)系“鳥(niǎo)哥筆記小喬”
實(shí)戰(zhàn)干貨|實(shí)驗(yàn)多樣本少,那該如何是好
2020-04-22 17:19:06

在之前有關(guān)實(shí)驗(yàn)設(shè)計(jì)的文章中,我們簡(jiǎn)單提到過(guò)正交分層,它的作用在于將有限的用戶(hù)數(shù)或流量,同時(shí)用于多個(gè)實(shí)驗(yàn)中而互不干擾。理想情況下,正交分層體系中的每一層,就像是一個(gè)“平行宇宙”,可以各自進(jìn)行獨(dú)立的實(shí)驗(yàn)。在正交分層的體系里,一個(gè)用戶(hù)很可能是同時(shí)被多個(gè)實(shí)驗(yàn)命中的。既然這樣,如何能做到實(shí)驗(yàn)間沒(méi)有互相干擾呢?


正交分層如何實(shí)現(xiàn)“平行宇宙”




圖片來(lái)自網(wǎng)絡(luò)


AB實(shí)驗(yàn)中的隨機(jī)分組通過(guò)性能較好的哈希算法,將用戶(hù)ID進(jìn)行特殊轉(zhuǎn)換處理,確保分組時(shí)盡可能做到隨機(jī)??梢岳斫獬蓪?duì)我們每個(gè)人的手機(jī)號(hào)做一些復(fù)雜處理,避免直接按照尾號(hào)分組時(shí),出現(xiàn)尾號(hào)8用戶(hù)群和尾號(hào)4用戶(hù)群之間的樣本有偏差。


隨機(jī)分組是發(fā)生在每一個(gè)分層中的,而正交分層是指層與層之間需要保證正交性,有現(xiàn)成的檢驗(yàn)方法,感興趣的同學(xué)可以自行查找,此處先不做贅述。借助一系列正交哈希算法(目前較多采用正交表算法),我們可以保證任意兩層之間的實(shí)驗(yàn)獨(dú)立性。



如上圖,假設(shè)我們選擇同一個(gè)用戶(hù)群體,任意取到若干正交分層中的兩層:分別記為第N層和第N+1層。我們決定對(duì)第N層進(jìn)行AB實(shí)驗(yàn),即將該層的用戶(hù)隨機(jī)分為A、B兩組;同時(shí)我們?cè)賹?duì)第N+1層進(jìn)行AB實(shí)驗(yàn),記為A1B1兩組。兩組實(shí)驗(yàn)覆蓋到的人群是一樣的,我們下發(fā)不同的策略。正交分層能夠做到第N層中的A組用戶(hù),在第N+1層隨機(jī)分散到A1B1兩個(gè)組。當(dāng)我們?cè)诜治龅?/span>N+1層實(shí)驗(yàn)效果時(shí),可以認(rèn)為A1組和B1組所受到來(lái)自第N層策略的影響是相同的。因此,在分析A1、B1兩組間的效果差異時(shí),可以將來(lái)自其他層的影響忽略不計(jì)。


通過(guò)正交分層,我們可以做到樣本量有限時(shí),依然可以同時(shí)進(jìn)行多組實(shí)驗(yàn),這有助于我們更快速找到有效的策略。因此,正交分層也成為了成熟實(shí)驗(yàn)平臺(tái)的標(biāo)配。然而,并不是滿(mǎn)足了正交分層,我們就可以認(rèn)為可以無(wú)視不同層間的策略干擾,下面我們?cè)敿?xì)介紹。


正交分層存在局限性



正交分層若想保證策略間“無(wú)干擾”,還需要一個(gè)前提:不同層間策略的相關(guān)性需要盡可能低。先舉個(gè)例子說(shuō)明策略相關(guān)性。

比如,常見(jiàn)的給用戶(hù)發(fā)紅包的策略,假定策略1是每人發(fā)0.5元,策略2是每人發(fā)1.0元。這兩個(gè)策略都是發(fā)紅包,是高度相關(guān)的(本質(zhì)上是同一類(lèi)),其效果會(huì)產(chǎn)生干擾。試想,如果我們實(shí)驗(yàn)時(shí)分別取一層來(lái)下發(fā)策略1,另一層與之正交,下發(fā)策略2。由第一部分的解釋,策略2將會(huì)均勻的影響到策略1的實(shí)驗(yàn)組和對(duì)照組。就這個(gè)例子看,因?yàn)椴呗?/span>2下發(fā)的金額較高,效果大概率會(huì)好于策略1,所以當(dāng)分析策略1效果時(shí),很可能發(fā)現(xiàn)其實(shí)驗(yàn)組相比對(duì)照組沒(méi)有提升,得到“發(fā)錢(qián)無(wú)效“的實(shí)驗(yàn)結(jié)論。其原因是策略1(弱策略)的實(shí)驗(yàn)組和對(duì)照組均勻的受到了策略2(強(qiáng)策略)的影響,而策略2覆蓋掉了策略1的效果。

策略相關(guān)性難以準(zhǔn)確量化,可以通過(guò)策略種類(lèi)、參數(shù)是否會(huì)出現(xiàn)增強(qiáng)、削弱、替代等,來(lái)判斷策略是否會(huì)存在相互影響。上面是一個(gè)典型的強(qiáng)策略覆蓋弱策略的例子,它會(huì)讓弱策略看起來(lái)是無(wú)效的。可見(jiàn)正交分層有其明顯的局限性,即便是使用了正交分層,依然無(wú)法避免相關(guān)策略間的干擾。

下面再舉一些常見(jiàn)的、需要注意的場(chǎng)景:

  • 頭條、抖音信息流,針對(duì)某特征設(shè)置不同權(quán)重的推薦算法實(shí)驗(yàn)。如果使用正交分層,權(quán)重較高的策略效果很可能覆蓋權(quán)重較低的策略,得到低權(quán)重策略無(wú)效的結(jié)論
  • 在百度搜索結(jié)果頁(yè)中,用戶(hù)點(diǎn)擊會(huì)調(diào)起百度,這是一種常見(jiàn)的拉活方式(如下圖)。對(duì)不同調(diào)起方式(例如點(diǎn)擊百度知道、點(diǎn)擊貼吧調(diào)起)做效果分析時(shí),二者可能存在干擾。比如說(shuō),百度知道能夠覆蓋的關(guān)鍵詞和問(wèn)題更多,極有可能每一位搜索用戶(hù)每天都會(huì)被它調(diào)起1次,而貼吧覆蓋的搜索query相對(duì)少,使用正交分層去做這個(gè)實(shí)驗(yàn)(一層是點(diǎn)擊知道調(diào)起,另一層是點(diǎn)擊貼吧調(diào)起),很有可能會(huì)得到“通過(guò)貼吧調(diào)起百度App是無(wú)效的”這種結(jié)論

 


類(lèi)似的情形,你還碰到哪些?


實(shí)驗(yàn)分析需要基于實(shí)驗(yàn)場(chǎng)景制定針對(duì)性的分析方法,更需要選擇對(duì)正確的實(shí)驗(yàn)方式。當(dāng)需要驗(yàn)證這種相關(guān)策略的差異時(shí),建議使用同一層來(lái)進(jìn)行分組,對(duì)每個(gè)組進(jìn)行策略互斥的實(shí)驗(yàn)。


這是尾巴


沒(méi)錯(cuò),這就是實(shí)驗(yàn)三部曲之3,主要供有一些實(shí)驗(yàn)經(jīng)驗(yàn)、或者對(duì)實(shí)驗(yàn)感興趣的同學(xué)了解。因?yàn)閮?nèi)容略生硬,我又把它分成了上、下兩部分,這一篇是上,下一篇是《容易被忽視的樣本比率偏差(SRM)》,明天同時(shí)段發(fā)出~ 

《實(shí)驗(yàn)三部曲》并不能覆蓋增長(zhǎng)實(shí)驗(yàn)中的很多細(xì)節(jié),我們不盡于此,后續(xù)繼續(xù)用這種小篇幅的文章來(lái)做單點(diǎn)突破。歡迎對(duì)用戶(hù)增長(zhǎng)實(shí)驗(yàn)感興趣的你,留言分享你認(rèn)為實(shí)驗(yàn)分析中容易被忽視的坑,一周后我會(huì)給點(diǎn)贊最高(截至4月29日18點(diǎn))的留言主送去一份神秘禮物。


轉(zhuǎn)發(fā)是最大的打賞,在看的你最好看~

運(yùn)營(yíng)那些事兒
分享到朋友圈
收藏
收藏
評(píng)分

綜合評(píng)分:

我的評(píng)分
Xinstall 15天會(huì)員特權(quán)
Xinstall是專(zhuān)業(yè)的數(shù)據(jù)分析服務(wù)商,幫企業(yè)追蹤渠道安裝來(lái)源、裂變拉新統(tǒng)計(jì)、廣告流量指導(dǎo)等,廣泛應(yīng)用于廣告效果統(tǒng)計(jì)、APP地推與CPS/CPA歸屬統(tǒng)計(jì)等方面。
20羽毛
立即兌換
一書(shū)一課30天會(huì)員體驗(yàn)卡
領(lǐng)30天VIP會(huì)員,110+門(mén)職場(chǎng)大課,250+本精讀好書(shū)免費(fèi)學(xué)!助你提升職場(chǎng)力!
20羽毛
立即兌換
順豐同城急送全國(guó)通用20元優(yōu)惠券
順豐同城急送是順豐推出的平均1小時(shí)送全城的即時(shí)快送服務(wù),專(zhuān)業(yè)安全,準(zhǔn)時(shí)送達(dá)!
30羽毛
立即兌換
運(yùn)營(yíng)那些事兒
運(yùn)營(yíng)那些事兒
發(fā)表文章43451
確認(rèn)要消耗 羽毛購(gòu)買(mǎi)
實(shí)戰(zhàn)干貨|實(shí)驗(yàn)多樣本少,那該如何是好嗎?
考慮一下
很遺憾,羽毛不足
我知道了

我們致力于提供一個(gè)高質(zhì)量?jī)?nèi)容的交流平臺(tái)。為落實(shí)國(guó)家互聯(lián)網(wǎng)信息辦公室“依法管網(wǎng)、依法辦網(wǎng)、依法上網(wǎng)”的要求,為完善跟帖評(píng)論自律管理,為了保護(hù)用戶(hù)創(chuàng)造的內(nèi)容、維護(hù)開(kāi)放、真實(shí)、專(zhuān)業(yè)的平臺(tái)氛圍,我們團(tuán)隊(duì)將依據(jù)本公約中的條款對(duì)注冊(cè)用戶(hù)和發(fā)布在本平臺(tái)的內(nèi)容進(jìn)行管理。平臺(tái)鼓勵(lì)用戶(hù)創(chuàng)作、發(fā)布優(yōu)質(zhì)內(nèi)容,同時(shí)也將采取必要措施管理違法、侵權(quán)或有其他不良影響的網(wǎng)絡(luò)信息。


一、根據(jù)《網(wǎng)絡(luò)信息內(nèi)容生態(tài)治理規(guī)定》《中華人民共和國(guó)未成年人保護(hù)法》等法律法規(guī),對(duì)以下違法、不良信息或存在危害的行為進(jìn)行處理。
1. 違反法律法規(guī)的信息,主要表現(xiàn)為:
    1)反對(duì)憲法所確定的基本原則;
    2)危害國(guó)家安全,泄露國(guó)家秘密,顛覆國(guó)家政權(quán),破壞國(guó)家統(tǒng)一,損害國(guó)家榮譽(yù)和利益;
    3)侮辱、濫用英烈形象,歪曲、丑化、褻瀆、否定英雄烈士事跡和精神,以侮辱、誹謗或者其他方式侵害英雄烈士的姓名、肖像、名譽(yù)、榮譽(yù);
    4)宣揚(yáng)恐怖主義、極端主義或者煽動(dòng)實(shí)施恐怖活動(dòng)、極端主義活動(dòng);
    5)煽動(dòng)民族仇恨、民族歧視,破壞民族團(tuán)結(jié);
    6)破壞國(guó)家宗教政策,宣揚(yáng)邪教和封建迷信;
    7)散布謠言,擾亂社會(huì)秩序,破壞社會(huì)穩(wěn)定;
    8)宣揚(yáng)淫穢、色情、賭博、暴力、兇殺、恐怖或者教唆犯罪;
    9)煽動(dòng)非法集會(huì)、結(jié)社、游行、示威、聚眾擾亂社會(huì)秩序;
    10)侮辱或者誹謗他人,侵害他人名譽(yù)、隱私和其他合法權(quán)益;
    11)通過(guò)網(wǎng)絡(luò)以文字、圖片、音視頻等形式,對(duì)未成年人實(shí)施侮辱、誹謗、威脅或者惡意損害未成年人形象進(jìn)行網(wǎng)絡(luò)欺凌的;
    12)危害未成年人身心健康的;
    13)含有法律、行政法規(guī)禁止的其他內(nèi)容;


2. 不友善:不尊重用戶(hù)及其所貢獻(xiàn)內(nèi)容的信息或行為。主要表現(xiàn)為:
    1)輕蔑:貶低、輕視他人及其勞動(dòng)成果;
    2)誹謗:捏造、散布虛假事實(shí),損害他人名譽(yù);
    3)嘲諷:以比喻、夸張、侮辱性的手法對(duì)他人或其行為進(jìn)行揭露或描述,以此來(lái)激怒他人;
    4)挑釁:以不友好的方式激怒他人,意圖使對(duì)方對(duì)自己的言論作出回應(yīng),蓄意制造事端;
    5)羞辱:貶低他人的能力、行為、生理或身份特征,讓對(duì)方難堪;
    6)謾罵:以不文明的語(yǔ)言對(duì)他人進(jìn)行負(fù)面評(píng)價(jià);
    7)歧視:煽動(dòng)人群歧視、地域歧視等,針對(duì)他人的民族、種族、宗教、性取向、性別、年齡、地域、生理特征等身份或者歸類(lèi)的攻擊;
    8)威脅:許諾以不良的后果來(lái)迫使他人服從自己的意志;


3. 發(fā)布垃圾廣告信息:以推廣曝光為目的,發(fā)布影響用戶(hù)體驗(yàn)、擾亂本網(wǎng)站秩序的內(nèi)容,或進(jìn)行相關(guān)行為。主要表現(xiàn)為:
    1)多次發(fā)布包含售賣(mài)產(chǎn)品、提供服務(wù)、宣傳推廣內(nèi)容的垃圾廣告。包括但不限于以下幾種形式:
    2)單個(gè)帳號(hào)多次發(fā)布包含垃圾廣告的內(nèi)容;
    3)多個(gè)廣告帳號(hào)互相配合發(fā)布、傳播包含垃圾廣告的內(nèi)容;
    4)多次發(fā)布包含欺騙性外鏈的內(nèi)容,如未注明的淘寶客鏈接、跳轉(zhuǎn)網(wǎng)站等,誘騙用戶(hù)點(diǎn)擊鏈接
    5)發(fā)布大量包含推廣鏈接、產(chǎn)品、品牌等內(nèi)容獲取搜索引擎中的不正當(dāng)曝光;
    6)購(gòu)買(mǎi)或出售帳號(hào)之間虛假地互動(dòng),發(fā)布干擾網(wǎng)站秩序的推廣內(nèi)容及相關(guān)交易。
    7)發(fā)布包含欺騙性的惡意營(yíng)銷(xiāo)內(nèi)容,如通過(guò)偽造經(jīng)歷、冒充他人等方式進(jìn)行惡意營(yíng)銷(xiāo);
    8)使用特殊符號(hào)、圖片等方式規(guī)避垃圾廣告內(nèi)容審核的廣告內(nèi)容。


4. 色情低俗信息,主要表現(xiàn)為:
    1)包含自己或他人性經(jīng)驗(yàn)的細(xì)節(jié)描述或露骨的感受描述;
    2)涉及色情段子、兩性笑話的低俗內(nèi)容;
    3)配圖、頭圖中包含庸俗或挑逗性圖片的內(nèi)容;
    4)帶有性暗示、性挑逗等易使人產(chǎn)生性聯(lián)想;
    5)展現(xiàn)血腥、驚悚、殘忍等致人身心不適;
    6)炒作緋聞、丑聞、劣跡等;
    7)宣揚(yáng)低俗、庸俗、媚俗內(nèi)容。


5. 不實(shí)信息,主要表現(xiàn)為:
    1)可能存在事實(shí)性錯(cuò)誤或者造謠等內(nèi)容;
    2)存在事實(shí)夸大、偽造虛假經(jīng)歷等誤導(dǎo)他人的內(nèi)容;
    3)偽造身份、冒充他人,通過(guò)頭像、用戶(hù)名等個(gè)人信息暗示自己具有特定身份,或與特定機(jī)構(gòu)或個(gè)人存在關(guān)聯(lián)。


6. 傳播封建迷信,主要表現(xiàn)為:
    1)找人算命、測(cè)字、占卜、解夢(mèng)、化解厄運(yùn)、使用迷信方式治??;
    2)求推薦算命看相大師;
    3)針對(duì)具體風(fēng)水等問(wèn)題進(jìn)行求助或咨詢(xún);
    4)問(wèn)自己或他人的八字、六爻、星盤(pán)、手相、面相、五行缺失,包括通過(guò)占卜方法問(wèn)婚姻、前程、運(yùn)勢(shì),東西寵物丟了能不能找回、取名改名等;


7. 文章標(biāo)題黨,主要表現(xiàn)為:
    1)以各種夸張、獵奇、不合常理的表現(xiàn)手法等行為來(lái)誘導(dǎo)用戶(hù);
    2)內(nèi)容與標(biāo)題之間存在嚴(yán)重不實(shí)或者原意扭曲;
    3)使用夸張標(biāo)題,內(nèi)容與標(biāo)題嚴(yán)重不符的。


8.「飯圈」亂象行為,主要表現(xiàn)為:
    1)誘導(dǎo)未成年人應(yīng)援集資、高額消費(fèi)、投票打榜
    2)粉絲互撕謾罵、拉踩引戰(zhàn)、造謠攻擊、人肉搜索、侵犯隱私
    3)鼓動(dòng)「飯圈」粉絲攀比炫富、奢靡享樂(lè)等行為
    4)以號(hào)召粉絲、雇用網(wǎng)絡(luò)水軍、「養(yǎng)號(hào)」形式刷量控評(píng)等行為
    5)通過(guò)「蹭熱點(diǎn)」、制造話題等形式干擾輿論,影響傳播秩序


9. 其他危害行為或內(nèi)容,主要表現(xiàn)為:
    1)可能引發(fā)未成年人模仿不安全行為和違反社會(huì)公德行為、誘導(dǎo)未成年人不良嗜好影響未成年人身心健康的;
    2)不當(dāng)評(píng)述自然災(zāi)害、重大事故等災(zāi)難的;
    3)美化、粉飾侵略戰(zhàn)爭(zhēng)行為的;
    4)法律、行政法規(guī)禁止,或可能對(duì)網(wǎng)絡(luò)生態(tài)造成不良影響的其他內(nèi)容。


二、違規(guī)處罰
本網(wǎng)站通過(guò)主動(dòng)發(fā)現(xiàn)和接受用戶(hù)舉報(bào)兩種方式收集違規(guī)行為信息。所有有意的降低內(nèi)容質(zhì)量、傷害平臺(tái)氛圍及欺凌未成年人或危害未成年人身心健康的行為都是不能容忍的。
當(dāng)一個(gè)用戶(hù)發(fā)布違規(guī)內(nèi)容時(shí),本網(wǎng)站將依據(jù)相關(guān)用戶(hù)違規(guī)情節(jié)嚴(yán)重程度,對(duì)帳號(hào)進(jìn)行禁言 1 天、7 天、15 天直至永久禁言或封停賬號(hào)的處罰。當(dāng)涉及欺凌未成年人、危害未成年人身心健康、通過(guò)作弊手段注冊(cè)、使用帳號(hào),或者濫用多個(gè)帳號(hào)發(fā)布違規(guī)內(nèi)容時(shí),本網(wǎng)站將加重處罰。


三、申訴
隨著平臺(tái)管理經(jīng)驗(yàn)的不斷豐富,本網(wǎng)站出于維護(hù)本網(wǎng)站氛圍和秩序的目的,將不斷完善本公約。
如果本網(wǎng)站用戶(hù)對(duì)本網(wǎng)站基于本公約規(guī)定做出的處理有異議,可以通過(guò)「建議反饋」功能向本網(wǎng)站進(jìn)行反饋。
(規(guī)則的最終解釋權(quán)歸屬本網(wǎng)站所有)

我知道了
恭喜你~答對(duì)了
+5羽毛
下一次認(rèn)真讀哦
成功推薦給其他人
+ 10羽毛
評(píng)論成功且進(jìn)入審核!審核通過(guò)后,您將獲得10羽毛的獎(jiǎng)勵(lì)。分享本文章給好友閱讀最高再得15羽毛~
(羽毛可至 "羽毛精選" 兌換禮品)
好友微信掃一掃
復(fù)制鏈接