2006年10月3日
中時偏頗的民調取樣
我們都知道中時、聯合、TVBS的民調從來沒有準過,而民調不準的原因依我的判斷,最主要在於因為機構效應導致取樣有偏差,難得今天中國時報有足夠的資訊讓我能夠計算在他的取樣中,偏藍、偏綠、與所謂的中間選民的比例有多少。
由下面這段資料,我可以用貝氏定理(baye's rule 如上圖)算出取樣中偏藍、偏綠、與中間選民的分佈狀況。
X1:偏藍受訪者的比例
X2:偏綠受訪者的比例
X3:偏中間受訪者的比例
根據貝氏定理
0.77=0.93X1+0.46X2+0.658X3
0.166=0.044X1+0.504X2+0.22X3
1=X1+X2+X3
解上列方程式的結果可以得到
X1=0.4980
X2=0.1185
X3=0.3835
偏綠受訪者的比例連12%都不到,雖然一般人普遍相信台北市的基本盤藍大於綠,但是要說偏綠的公民連12%都不到,恐怕連郝龍斌自己都不相信,中國時報敢公布取樣如此偏頗的民調,更是勇氣可嘉。
進一步用貝氏定理推算,中時所謂的偏中間選民中,支持謝長廷的比例只有26.05%,支持郝龍斌的則高達55.31%,是謝長廷的兩倍多,這些人真的是中間選民嗎?令人懷疑。
假設我們以中時的民調為基準但是修正他的取樣誤差,以最近一次選舉結果的藍綠分佈大約是55:45為基準推算,謝長廷的支持率變為34.1%而郝龍斌的支持率則為57.31%,要注意的是,這份民調是在宋楚瑜不參選的前提下所做,一旦宋楚瑜參選而且拿下24%以上的選票,郝龍斌就會以些微的票數落敗,所以宋楚瑜雖然成事不足,但是敗事卻是綽綽有餘,泛紅民眾如果相信中時取樣偏頗的民調,以為老宋不足以敗事,到時候選輸不甘願,別忘了找中國時報算帳。
按這裡訂閱酥餅的BLOG
最新文章
由下面這段資料,我可以用貝氏定理(baye's rule 如上圖)算出取樣中偏藍、偏綠、與中間選民的分佈狀況。
問及民眾誰會當選台北市長時,77%認為郝龍斌會當選台北市長,16.6%認為謝長廷會當選,1.2%認為周玉蔻會當選。和第一題相較,郝龍斌的看好度和支持度大約有10%的差距,這樣的結果頗值得玩味。
政黨傾向為泛藍的民眾認為謝長廷會當選的比例只有4.4%,政黨傾向為泛綠的民眾認為謝長廷會當選的比例為50.4%,政黨傾向為中立的民眾認為謝長廷會當選的比例為22%。
政黨傾向為泛藍的民眾認為郝龍斌會當選的比例為93%,政黨傾向為泛綠的民眾認為郝龍斌會當選的比例為46%,政黨傾向為中立的民眾認為郝龍斌會當選的比例為65.8%。
X1:偏藍受訪者的比例
X2:偏綠受訪者的比例
X3:偏中間受訪者的比例
根據貝氏定理
0.77=0.93X1+0.46X2+0.658X3
0.166=0.044X1+0.504X2+0.22X3
1=X1+X2+X3
解上列方程式的結果可以得到
X1=0.4980
X2=0.1185
X3=0.3835
偏綠受訪者的比例連12%都不到,雖然一般人普遍相信台北市的基本盤藍大於綠,但是要說偏綠的公民連12%都不到,恐怕連郝龍斌自己都不相信,中國時報敢公布取樣如此偏頗的民調,更是勇氣可嘉。
進一步用貝氏定理推算,中時所謂的偏中間選民中,支持謝長廷的比例只有26.05%,支持郝龍斌的則高達55.31%,是謝長廷的兩倍多,這些人真的是中間選民嗎?令人懷疑。
假設我們以中時的民調為基準但是修正他的取樣誤差,以最近一次選舉結果的藍綠分佈大約是55:45為基準推算,謝長廷的支持率變為34.1%而郝龍斌的支持率則為57.31%,要注意的是,這份民調是在宋楚瑜不參選的前提下所做,一旦宋楚瑜參選而且拿下24%以上的選票,郝龍斌就會以些微的票數落敗,所以宋楚瑜雖然成事不足,但是敗事卻是綽綽有餘,泛紅民眾如果相信中時取樣偏頗的民調,以為老宋不足以敗事,到時候選輸不甘願,別忘了找中國時報算帳。
按這裡訂閱酥餅的BLOG
最新文章
引用URL
http://cgi.blog.roodo.com/trackback/2224286
引用列表:
光看標題,中國時報這一則「真的這麼準?自由時報應公布民調方法」就讓我覺得蠻好笑的
真的這麼神?考第一名者應公布讀書方法【Passion: 慕容理深のblog】
at 2006年12月14日 11:03
台灣有家報紙,以敵國之名為名,報社內一向把「中國(China)」竄改為「大陸」,所以我也叫他「大陸時報」。這家報社平常假造新聞、假造民調,沒被天打雷劈,火燒報社,苟活至今,已屬...
大陸時報,你丟的臉還不夠嗎?【陳凱劭的BLOG】
at 2006年12月14日 22:18
現在才看到酥餅這篇文章,當時2006/10/3,酥餅運用中時民調的數據,以貝氏定理推算中時民調中的藍綠中間選民結構之後,得出中時民調選民結構有誤,然後自己再用基本盤的概念代入修正,得
誰的御用媒體?誰的謊言?【無差別格逗留】
at 2007年04月11日 01:08
酥餅的這篇分析太妙了,讓人看清中時的民調水準 :)
Posted by 妙子
at 2006年10月3日 00:51
統計果然是到處好用的強力工具啊~~
Posted by alann
at 2006年10月3日 01:23
上了一門統計課...(酥餅老師我引用囉!)
Posted by jonlien
at 2006年10月3日 02:10
哎呀!泛藍媒體的數學不好,大家又不是今天才知道.
早在2004年總統選舉開票的時候以及週守訓的恒等公式,就已經看出來泛藍的數學是有多爛啊!
對了!還有那個甚麼中研院的教授,發明的甚麼饅頭理論,也在在證明泛藍的數學真糟.
早在2004年總統選舉開票的時候以及週守訓的恒等公式,就已經看出來泛藍的數學是有多爛啊!
對了!還有那個甚麼中研院的教授,發明的甚麼饅頭理論,也在在證明泛藍的數學真糟.
Posted by 孟芬
at 2006年10月3日 03:57
有誰會信這些民調呢?根本只是意圖影響選情,操弄族群的工具。
上面孟芬指的例子大家記憶猶新,但是當事人有出來認錯嗎?強力播放的媒體有負任何一點責任嗎?沒有啊,所以那群無知的氾濫選民到今天還是以為他們的數學真是棒哦。
不只是數學糟,他們根本愧對自己背上那四個大字:禮義廉恥
喔,難怪要寫到背上,自己看不到指著別人說就好了。
又或者是他們對自己的警惕吧?就像以前路邊常常見到的勿隨地便溺,勿隨地吐痰一類的,缺什麼就強調什麼吧。
原來如此!
上面孟芬指的例子大家記憶猶新,但是當事人有出來認錯嗎?強力播放的媒體有負任何一點責任嗎?沒有啊,所以那群無知的氾濫選民到今天還是以為他們的數學真是棒哦。
不只是數學糟,他們根本愧對自己背上那四個大字:禮義廉恥
喔,難怪要寫到背上,自己看不到指著別人說就好了。
又或者是他們對自己的警惕吧?就像以前路邊常常見到的勿隨地便溺,勿隨地吐痰一類的,缺什麼就強調什麼吧。
原來如此!
Posted by blahblah
at 2006年10月3日 09:26
這年頭還在玩民調?他們就是玩過火才輸了2004的大選!
Posted by Scott
at 2006年10月3日 09:56
這對中國時報的記者太難了啦.會基本數學就不錯了啦!
什麼樣的報紙就有什麼樣的記者.
什麼樣的報紙就有什麼樣的記者.
Posted by Chi
at 2006年10月3日 10:00
他們的調查問卷可能都是發到黃復興黨部吧.
Posted by kuby
at 2006年10月3日 10:19
Posted by Irene
at 2006年10月3日 11:02
酥餅:我在寫這篇的時候還假設中時沒有惡意作假,只是取樣偏頗又不知道是無知還是不負責,公布這種民調。
但是看上面TVBS的例子,好像有蓄意作假的嫌疑,謝長廷的支持率只有十出頭?到時候投票就知道,這些媒體高層真的是現實感出了問題。
Posted by 酥餅
at 2006年10月3日 11:27
各報使用民調數據拿來操弄新聞早不是新聞,大部份都是拿來自己爽。看看就好
Posted by 大喻頭
at 2006年10月3日 15:09
泛統媒體的政治民調
其準確性
都是在誤差值之內
但誤差值接近100%...
其準確性
都是在誤差值之內
但誤差值接近100%...
Posted by hyc
at 2006年10月3日 18:22
泛統媒體的政治民調
其準確性
都是在誤差值之內
但誤差值接近100%...
其準確性
都是在誤差值之內
但誤差值接近100%...
Posted by hyc
at 2006年10月3日 18:22
建議酥餅大將你的計算所估, 寄給中時! 看他們怎麼說!
若中時不收件, 再寄給自由時報!
若中時不收件, 再寄給自由時報!
Posted by Janet
at 2006年10月3日 20:44
按酥餅老師的分析,根據中時報導,本抽樣調查共計抽取1112個樣本。
即:
X1:偏藍受訪者的比例=0.4980=554人
X2:偏綠受訪者的比例=0.1185=132人
X3:偏中間受訪者的比例=0.3835=426人
又
其中中間受訪者約0.658偏藍,約0.22偏綠
中間偏藍受訪者=0.658*426=280人
中間偏綠受訪者=0.220*426=94人
合計
偏藍樣本約=554+280=834人
偏綠樣本約=132+94=226人
此分析藍綠分佈比例約 80:20,
按酥餅老師提出最近一次選舉藍綠分佈實際約55:45,
只要將中時報導的謝長廷支持度加上25%(45.7%)、郝龍斌減掉25%(42.7%),
則可謂接近真實民調。^^
要玩數字...大家一起來,有什麼好怕的!
即:
X1:偏藍受訪者的比例=0.4980=554人
X2:偏綠受訪者的比例=0.1185=132人
X3:偏中間受訪者的比例=0.3835=426人
又
其中中間受訪者約0.658偏藍,約0.22偏綠
中間偏藍受訪者=0.658*426=280人
中間偏綠受訪者=0.220*426=94人
合計
偏藍樣本約=554+280=834人
偏綠樣本約=132+94=226人
此分析藍綠分佈比例約 80:20,
按酥餅老師提出最近一次選舉藍綠分佈實際約55:45,
只要將中時報導的謝長廷支持度加上25%(45.7%)、郝龍斌減掉25%(42.7%),
則可謂接近真實民調。^^
要玩數字...大家一起來,有什麼好怕的!
Posted by Geral
at 2006年10月3日 21:58
現在成數學高手的園地了!
其實這些現象不足為奇!
因為台北市另名"中國城"也!
凡是泛藍甚至泛紅軍本來就臉皮就很厚, 視力有選擇性視障, 說話也有選擇性語障!
不過個性倒是很"癩"皮! 看施明德現在說話的方式與內容, 把蘇縣長成"囚犯縣長", 怎麼沒聽他當時被國民黨關起來時, 對蔣家有說什麼話???
這叫只會欺負老實人, 不敢對兇神惡煞說半句話!
國民黨許水德說:法院是國民黨開的!
現在總統夫人在sogo案並無牽涉事証, 他們卻說檢察官有問題, 被政治壓迫!
好像只要靠向統一派的人, 變成無賴似, 說話可以不負責任, 真使人生氣!
其實這些現象不足為奇!
因為台北市另名"中國城"也!
凡是泛藍甚至泛紅軍本來就臉皮就很厚, 視力有選擇性視障, 說話也有選擇性語障!
不過個性倒是很"癩"皮! 看施明德現在說話的方式與內容, 把蘇縣長成"囚犯縣長", 怎麼沒聽他當時被國民黨關起來時, 對蔣家有說什麼話???
這叫只會欺負老實人, 不敢對兇神惡煞說半句話!
國民黨許水德說:法院是國民黨開的!
現在總統夫人在sogo案並無牽涉事証, 他們卻說檢察官有問題, 被政治壓迫!
好像只要靠向統一派的人, 變成無賴似, 說話可以不負責任, 真使人生氣!
Posted by Janet
at 2006年10月3日 23:43
現在成數學高手的園地了!
其實這些現象不足為奇!
因為台北市另名"中國城"也!
凡是泛藍甚至泛紅軍本來就臉皮就很厚, 視力有選擇性視障, 說話也有選擇性語障!
不過個性倒是很"癩"皮! 看施明德現在說話的方式與內容, 把蘇縣長說成"囚犯縣長", 怎麼沒聽他當時被國民黨關起來時, 對蔣家有說什麼話???
這叫只會欺負老實人, 不敢對兇神惡煞說半句話!
國民黨許水德說:法院是國民黨開的!
現在總統夫人在sogo案並無牽涉事証, 他們卻說檢察官有問題, 被政治壓迫!
好像只要靠向統一派的人, 變成無賴似, 說話可以不負責任, 真使人生氣!
其實這些現象不足為奇!
因為台北市另名"中國城"也!
凡是泛藍甚至泛紅軍本來就臉皮就很厚, 視力有選擇性視障, 說話也有選擇性語障!
不過個性倒是很"癩"皮! 看施明德現在說話的方式與內容, 把蘇縣長說成"囚犯縣長", 怎麼沒聽他當時被國民黨關起來時, 對蔣家有說什麼話???
這叫只會欺負老實人, 不敢對兇神惡煞說半句話!
國民黨許水德說:法院是國民黨開的!
現在總統夫人在sogo案並無牽涉事証, 他們卻說檢察官有問題, 被政治壓迫!
好像只要靠向統一派的人, 變成無賴似, 說話可以不負責任, 真使人生氣!
Posted by Janet
at 2006年10月3日 23:45
當然我也不相信這些媒體的民調,不過,造成民調有誤差的因素很多,傾台灣的選民向來不太願意在問卷中表態,甚至還會反向操作,也是造成民調不準的原因。所以,看看就好囉。
Posted by 情緒話
at 2006年10月4日 11:18
媒體的選舉民調都不是預測用的
因為大部分的水準差太遠了
除非他們敢聲稱自己是做預測的
在我印象裡過去只有三家媒體做過預測
但其中兩家做的很差,預測結果還是差很多
另一家幾次都滿準的,但是整個民調中心都已經換人
因為大部分的水準差太遠了
除非他們敢聲稱自己是做預測的
在我印象裡過去只有三家媒體做過預測
但其中兩家做的很差,預測結果還是差很多
另一家幾次都滿準的,但是整個民調中心都已經換人
Posted by 路過的
at 2006年10月5日 12:31
中國時報打電話說要送我兩個月不用錢的~
我跟他說不用~我家訂自由時報~哈
我跟他說不用~我家訂自由時報~哈
Posted by 嘿美
at 2006年10月5日 23:23
各位來看看我抓TVBS的大包吧 看台灣媒體"報導"美國紅潮, 台灣媒體果然非常predictable, 唉唉唉~
Posted by 阿峰
at 2006年10月7日 14:14
貝氏定理在上數理統計好像學過(抓頭回憶中,老師別扁我!!) 非常直觀的實用定理,但酥餅大哥看到誤差,想到用貝氏定理證明取樣"誤差",請受我一拜.
>>宋楚瑜雖然成事不足,但是敗事卻是綽綽有餘.....
北市市長之選情勢頗有八年前,黃大洲與趙少康,鷸蚌相爭, 魚翁(陳水扁)得利之勢,否則,陳水扁很難選上"臺灣中國城"市長之位.
紅衫軍再鬧下去吧~~~~~~馬英九的總統夢恐怕就........... 只是不忍心苦了臺灣為衣食奔波的平民百姓.
從阿峰那過來的,到寶地第一次留言,請多指教!!
>>宋楚瑜雖然成事不足,但是敗事卻是綽綽有餘.....
北市市長之選情勢頗有八年前,黃大洲與趙少康,鷸蚌相爭, 魚翁(陳水扁)得利之勢,否則,陳水扁很難選上"臺灣中國城"市長之位.
紅衫軍再鬧下去吧~~~~~~馬英九的總統夢恐怕就........... 只是不忍心苦了臺灣為衣食奔波的平民百姓.
從阿峰那過來的,到寶地第一次留言,請多指教!!
Posted by Carine
at 2006年10月7日 19:40
如果你接到中時、聯合、TVBS的民調電話, 你會拒訪、還是承認自己偏藍、偏綠、偏中間? 為什麼?
Posted by 也來民調
at 2006年10月8日 05:02
酥餅:阿峰,你可不可以幫我們比較一下,美國所謂的「紅潮」進行多久,有沒有連續將近一個月24小時不停的吵,還有,有沒有人主張脫離憲政制度,無論如何要布希下台?感謝:)
Carine,歡迎歡迎,以後常來開講。
Posted by 酥餅
at 2006年10月8日 05:49
呵呵! 答案很明顯了嘛,「拒訪」! 情緒話一點都不情緒化. 偏綠選民造成統媒民調取樣偏頗、調查結果失真, 讓飯桶們受騙上當, 然後又回過頭來恥笑統媒偏頗, 真是得了便宜又賣乖啊!
Posted by 也來民調
at 2006年10月9日 07:01
酥餅:負責任的民調機構知道自己的取樣如此偏頗在修正取樣錯誤前是不應該公布民調的,可惜台灣有些媒體不知道是沒知識還是不怕丟臉,不但敢公布這種民調,還做成新聞怕別人不知道。
Posted by 酥餅
at 2006年10月9日 07:33
是啊, 如果知道是不應該公布的. 但是你怎麼知道他們知不知道? 光以12%這個數字嗎? 可是前一陣子, 不也有民調說民進黨的支持度掉到18%? 這當然也可能是偏頗的, 可是如果有人相信全國的民進黨支持度是18%, 那麼他會相信在台北市民進黨的支持度是12%也不會很奇怪呀. 畢竟, 媒體素質爛是大家都知道的事實, 期望他們突然變聰明, 不是很不實際?
中間選民應該有什麼樣的面貌呢? 難道中間選民是丟骰子決定支持誰, 所以平均一半時間投藍, 一半時間投綠; 在某一個時刻, 一大群中間選民也應該一半投藍, 一半投綠?
為什麼宋楚瑜拿下13%以上的選票, 郝龍斌就會以些微的票數落敗? (57.31%-
13%=44.31% > 34.1%)
中間選民應該有什麼樣的面貌呢? 難道中間選民是丟骰子決定支持誰, 所以平均一半時間投藍, 一半時間投綠; 在某一個時刻, 一大群中間選民也應該一半投藍, 一半投綠?
為什麼宋楚瑜拿下13%以上的選票, 郝龍斌就會以些微的票數落敗? (57.31%-
13%=44.31% > 34.1%)
Posted by 也來民調
at 2006年10月9日 13:33
酥餅:呵呵,這你倒是抓到我的毛病了,看來要24%才能讓郝龍斌落敗,那大家鼓勵宋楚瑜出來最後一戰好了。
Posted by 酥餅
at 2006年10月9日 14:05
有個朋友及其週遭朋友每回選舉期間接到中資媒體的民意調查,一律報該媒體所支持的候選人。
以這次北市長選舉為例,中國時報民調中心問:你會投票給哪位候選人?他會回答:郝龍斌。(實際是要投給謝長廷)
他說,他如此配合演出,有一部分是為了要看中資媒體出洋相。
因為,長期以來感覺不到中資媒體對台灣民意的尊重,既然它如此自以為是,何必尊重它?
就玩它一玩唄!^^
嗯,會這樣玩的...包括他們那一區的居民,以及居民的親朋好友們,話說,這行為對他們而言叫做〝常識〞
這次自由時報民調最準確,下回,那些中資媒體不知會不會假裝成自由時報的民調中心?
不過,這樣好像是免費在幫自由時報做宣傳,報上真實的民調中心又會被玩...真是兩難啊~@@)
沒接過民調電話,要是我,大概會直接掛電話...
要投給誰,是我家的事吧?問那麼多!
以這次北市長選舉為例,中國時報民調中心問:你會投票給哪位候選人?他會回答:郝龍斌。(實際是要投給謝長廷)
他說,他如此配合演出,有一部分是為了要看中資媒體出洋相。
因為,長期以來感覺不到中資媒體對台灣民意的尊重,既然它如此自以為是,何必尊重它?
就玩它一玩唄!^^
嗯,會這樣玩的...包括他們那一區的居民,以及居民的親朋好友們,話說,這行為對他們而言叫做〝常識〞
這次自由時報民調最準確,下回,那些中資媒體不知會不會假裝成自由時報的民調中心?
不過,這樣好像是免費在幫自由時報做宣傳,報上真實的民調中心又會被玩...真是兩難啊~@@)
沒接過民調電話,要是我,大概會直接掛電話...
要投給誰,是我家的事吧?問那麼多!
Posted by Geral
at 2006年12月14日 15:29
我相信,中時民調中心的負責人,不可能不知此現象,台灣近十多年來,大大小小選舉幾十次,選舉結果馬上驗證自己民調不準,而且是台灣派候選人嚴重低估。他們一定都知道!不必酥餅老大用學理去教示!
但是,問題就出在,明知有此現象,中時仍樂此不疲,大方放送不準民調,更有甚者,中時還會把自已製造的民調,放頭版頭條做當天最重要新聞,外加各大電視新聞台一起聯播。
所以,中時最可惡的,就是要用這個結果去操弄棄保、操弄選舉。你看陳菊民調那麼低,本土選民放棄自己一票,投票日去遊山玩水,黃俊英捧著高民調數字,自然有財團浥注捐獻,西瓜派投效黃營。單一當選人的選舉,操弄民調的確會影響選舉;多席位的選舉則適得其反,民調最高的候選人有可能被認為最穩反而落選,這是另一回事,在此不深談。
看這一篇中時的聲明:
http://times.hinet.net/news/20061213/polity/da7817b9302c.htm
中時都放馬後砲,坦承選前就知陳菊、黃俊英五五波,結果還在放陳菊輸十幾PA的民調,這就是刻意造假的證據!
但是,問題就出在,明知有此現象,中時仍樂此不疲,大方放送不準民調,更有甚者,中時還會把自已製造的民調,放頭版頭條做當天最重要新聞,外加各大電視新聞台一起聯播。
所以,中時最可惡的,就是要用這個結果去操弄棄保、操弄選舉。你看陳菊民調那麼低,本土選民放棄自己一票,投票日去遊山玩水,黃俊英捧著高民調數字,自然有財團浥注捐獻,西瓜派投效黃營。單一當選人的選舉,操弄民調的確會影響選舉;多席位的選舉則適得其反,民調最高的候選人有可能被認為最穩反而落選,這是另一回事,在此不深談。
看這一篇中時的聲明:
http://times.hinet.net/news/20061213/polity/da7817b9302c.htm
中時都放馬後砲,坦承選前就知陳菊、黃俊英五五波,結果還在放陳菊輸十幾PA的民調,這就是刻意造假的證據!
Posted by Kai-shao
at 2006年12月14日 23:24
其實要看民調現在要看國民黨內部的民調!
民進黨的民調在執政後就不準了!若準就不會輸到脫褲子!
這次我大略看一下112立委選舉,發現其實TVBS還蠻準的,可以供參考,至少在南部還真的預測出國民黨能夠贏或有機會的區域!
民進黨的民調在執政後就不準了!若準就不會輸到脫褲子!
這次我大略看一下112立委選舉,發現其實TVBS還蠻準的,可以供參考,至少在南部還真的預測出國民黨能夠贏或有機會的區域!
Posted by 愛台灣
at 2008年01月24日 00:40
中時聯合總統選舉民調和實際開票結果誤差20%
應可申報金氏世界紀錄,
國外媒體誤差2%就被視為很離譜了!
應可申報金氏世界紀錄,
國外媒體誤差2%就被視為很離譜了!
Posted by 綠卡
at 2008年02月10日 10:51
我覺得飯桶的民調是坐給自已的人看的爽的
這種現象也不足惟奇要看飯桶媒體做的民調
最好是躲在廁所裡看
看完拿來當衛生紙擦屁股還差不多
最好不要在吃飯看不然下場就是會不消化
這就是所謂的蔣公便秘猜一個謎底
謎底中正不痾
這種現象也不足惟奇要看飯桶媒體做的民調
最好是躲在廁所裡看
看完拿來當衛生紙擦屁股還差不多
最好不要在吃飯看不然下場就是會不消化
這就是所謂的蔣公便秘猜一個謎底
謎底中正不痾
Posted by 阿瑋
at 2008年03月2日 22:35




