Re: [新聞] 外媒質疑DXOMark的評分機制,一個付錢分數越高的標準
我個人認為這篇文章把很多概念全部拉在一起講,反而讓主題混亂。
甚至有點先射箭後畫靶了。
裡面講到的幾個論點:
1. DXO 分數是不是跟付費與否成正比?
簡單檢視:
有付費一定高分 ? 沒付錢一定低分 ?
以目前各家測試結果而言,顯然沒有一定的相關性的。
2. DXO 測項是否足夠全面?
無疑不夠全面,比如說變焦與夜間拍攝測試很久到最近才加上。
但有其他機構測項比 DXO 更全面的嗎 ? 似乎是沒有。
那 DXO 的測試結果當然具有參考性。
3. DXO 測試標準對各廠商是否一致?
這個項目文章中有點東拉西扯了
裡面把兩個概念拿來混著講:
1. 測項測試標準一致性問題:
在同一個測項中,比如曝光,廠商付費與否會有不一樣的「測試標準」嗎 ?
我想是沒有,如果雙標情況,早就被噴爆了。
2. DXO 測試的產品,是否有先經過針對 DXO 測試標準優化過的?
以第一點的「測試標準」來說,應該會是一樣的。
因為各項數據其實都有科學上嚴格的定義。
以曝光來說,相機曝光只認「黑」跟「白」,與顏色無關。
正確曝光值定義在 18% 灰度的參數值,曝光中心點一律會準在這點。
相機演算法對 18% 灰度的偏差就是曝光值的偏差,這是有嚴格定義的。
真正有問題的在第二點:拿針對測試標準優化過的機型來測是否算作弊 ?
這其實有點偷換概念。
這有點像是你質疑一個在考前寫過考古題,知道出題方向的考生作弊一樣。
又或是
在考前老師已經說了某幾題會考,A 就是不去看,而 B 寫完也背好答案了。
考試時 B 全對,A 對錯各半,這時候你說 B 作弊一樣。
以此來質疑「公平性」,難道不覺得哪邊怪怪的嗎 ?
最重要的一點是:
至今仍沒有證據顯示 DXO 有針對付費客戶給予特殊優化或諮詢,而這個優化會直接影響
測試標準的適用性。
比如 DXO 曝光度測試標準除了黑、白,還另外加上了黃,但卻沒有告訴未付費廠商。
又或者 DXO 有跟付費廠商說測項有白平衡,但卻沒跟未付費廠商說。
這個才會有問題。
但目前沒有證據顯示 DXO 在測試標準上對於客戶付費與否有不一樣的標準。
所有的推論僅僅在於 DXOMark 背後的 DXO Labs 是諮詢公司這一點而已。
就算 DXO Labs 真的有提供客戶優化指導,只要測項跟標準一致,為何就不客觀不公平了?
4. DXO 分數絕對值是否真實代表相機水準?
因為測項的不全面,看絕對值應該是無法客觀的。
這在於測項的不全面,是沒測到,而與是否優化無關,因為標準就擺在那裡。
5. DXO 分數相對值是否可以代表各廠相機相對水準?
測項雖不是完全全面,但只要各家測試的「測項」與「標準」一致。
那相對值就應該有參考性。
6. DXO 有沒有為特定廠商帶風向?
以文章所述:
「DXO 的業務都是來自這些大公司,而這對他們的評論就會有很多影響,像是必須鼓勵消
費者購買某些特定手機,而不是其他。當然,目前沒有任何證據證明有這狀況。」
所以以全文來看,其實作者就是先以 DXO Labs 提供各廠商諮詢這一點,
來質疑 DXOMark 不具客觀公平性。
但測試的客觀性與公平性,在於測項與標準是否一致。
若無法證明「測項」與「標準」對廠商付費與否有雙標,那就不能推論公平性問題。
--
願你走出半生,歸來仍是少年。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 220.133.4.201 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/MobileComm/M.1574002857.A.366.html
推
11/17 23:19,
4年前
, 1F
11/17 23:19, 1F
→
11/17 23:19,
4年前
, 2F
11/17 23:19, 2F
推
11/17 23:23,
4年前
, 3F
11/17 23:23, 3F
推
11/17 23:34,
4年前
, 4F
11/17 23:34, 4F
→
11/17 23:35,
4年前
, 5F
11/17 23:35, 5F
推
11/17 23:35,
4年前
, 6F
11/17 23:35, 6F
→
11/17 23:35,
4年前
, 7F
11/17 23:35, 7F
→
11/17 23:35,
4年前
, 8F
11/17 23:35, 8F
這個就是我講的第二點:是否足夠全面。
以目前來看明顯是不夠的,但無奈的是我們可能也很難找到全部面向都測到的機構。
那只能取測到最多面向的機構的數據了。
→
11/17 23:35,
4年前
, 9F
11/17 23:35, 9F
→
11/17 23:35,
4年前
, 10F
11/17 23:35, 10F
推
11/17 23:38,
4年前
, 11F
11/17 23:38, 11F
→
11/17 23:38,
4年前
, 12F
11/17 23:38, 12F
→
11/17 23:38,
4年前
, 13F
11/17 23:38, 13F
你講的這點其實是個值得討論的問題。
著名的例子就是小米。
小米送測的軟體版本跟實際面向消費者的版本不同,所以導致消費者使用體驗跟 DXO 評測
結果有差異。
但這指代表了:DXO 評測結果不能完全代表消費者端的實際體驗。
但這並不能代表 DXO 評測「不公平」或「不客觀」。
推
11/17 23:40,
4年前
, 14F
11/17 23:40, 14F
→
11/17 23:40,
4年前
, 15F
11/17 23:40, 15F
說有諮詢的是板上鄉民跟文章,而不是我。
→
11/17 23:41,
4年前
, 16F
11/17 23:41, 16F
→
11/17 23:41,
4年前
, 17F
11/17 23:41, 17F
我只是有多少資料說多少話,沒有資訊的我都當沒有。
→
11/17 23:42,
4年前
, 18F
11/17 23:42, 18F
→
11/17 23:42,
4年前
, 19F
11/17 23:42, 19F
我說沒證據對方有作弊,就不能說對方作弊。
而你是先說對方作弊,要對方證明沒作弊。
你覺得對?
你要不要先證明他們作弊,不然也是廢話。
推
11/17 23:49,
4年前
, 20F
11/17 23:49, 20F
→
11/17 23:49,
4年前
, 21F
11/17 23:49, 21F
噓
11/17 23:49,
4年前
, 22F
11/17 23:49, 22F
因為原文就沒有證據阿。
說沒證據的,你們要不要先提出 DXO 有作弊、不公平、不客觀的證據 ?
推
11/17 23:50,
4年前
, 23F
11/17 23:50, 23F
→
11/17 23:50,
4年前
, 24F
11/17 23:50, 24F
→
11/17 23:50,
4年前
, 25F
11/17 23:50, 25F
推
11/17 23:52,
4年前
, 26F
11/17 23:52, 26F
→
11/17 23:52,
4年前
, 27F
11/17 23:52, 27F
偷換概念。
只要同一年度的標準對各家相同,你就不能說他不客觀不公正。
推
11/17 23:53,
4年前
, 28F
11/17 23:53, 28F
※ 編輯: ceaserman (220.133.4.201 臺灣), 11/17/2019 23:55:17
→
11/17 23:53,
4年前
, 29F
11/17 23:53, 29F
→
11/17 23:58,
4年前
, 30F
11/17 23:58, 30F
推
11/17 23:59,
4年前
, 31F
11/17 23:59, 31F
還有 59 則推文
還有 1 段內文
推
11/18 11:24,
4年前
, 91F
11/18 11:24, 91F
→
11/18 11:24,
4年前
, 92F
11/18 11:24, 92F
→
11/18 11:24,
4年前
, 93F
11/18 11:24, 93F
→
11/18 11:25,
4年前
, 94F
11/18 11:25, 94F
→
11/18 11:26,
4年前
, 95F
11/18 11:26, 95F
→
11/18 11:26,
4年前
, 96F
11/18 11:26, 96F
推
11/18 11:30,
4年前
, 97F
11/18 11:30, 97F
→
11/18 11:31,
4年前
, 98F
11/18 11:31, 98F
噓
11/18 11:39,
4年前
, 99F
11/18 11:39, 99F
→
11/18 11:39,
4年前
, 100F
11/18 11:39, 100F
→
11/18 11:39,
4年前
, 101F
11/18 11:39, 101F
→
11/18 11:39,
4年前
, 102F
11/18 11:39, 102F
→
11/18 11:39,
4年前
, 103F
11/18 11:39, 103F
推
11/18 11:41,
4年前
, 104F
11/18 11:41, 104F
推
11/18 11:44,
4年前
, 105F
11/18 11:44, 105F
→
11/18 11:45,
4年前
, 106F
11/18 11:45, 106F
→
11/18 11:46,
4年前
, 107F
11/18 11:46, 107F
→
11/18 11:46,
4年前
, 108F
11/18 11:46, 108F
→
11/18 11:47,
4年前
, 109F
11/18 11:47, 109F
→
11/18 11:48,
4年前
, 110F
11/18 11:48, 110F
→
11/18 11:49,
4年前
, 111F
11/18 11:49, 111F
→
11/18 11:49,
4年前
, 112F
11/18 11:49, 112F
噓
11/18 12:44,
4年前
, 113F
11/18 12:44, 113F
噓
11/18 12:57,
4年前
, 114F
11/18 12:57, 114F
→
11/18 12:59,
4年前
, 115F
11/18 12:59, 115F
推
11/18 13:04,
4年前
, 116F
11/18 13:04, 116F
→
11/18 13:04,
4年前
, 117F
11/18 13:04, 117F
→
11/18 13:13,
4年前
, 118F
11/18 13:13, 118F
噓
11/18 13:44,
4年前
, 119F
11/18 13:44, 119F
→
11/18 13:44,
4年前
, 120F
11/18 13:44, 120F
→
11/18 13:45,
4年前
, 121F
11/18 13:45, 121F
→
11/18 13:45,
4年前
, 122F
11/18 13:45, 122F
→
11/18 13:46,
4年前
, 123F
11/18 13:46, 123F
噓
11/18 19:09,
4年前
, 124F
11/18 19:09, 124F
噓
11/18 20:24,
4年前
, 125F
11/18 20:24, 125F
→
11/18 20:26,
4年前
, 126F
11/18 20:26, 126F
→
11/18 20:27,
4年前
, 127F
11/18 20:27, 127F
推
11/18 21:03,
4年前
, 128F
11/18 21:03, 128F
→
11/18 21:03,
4年前
, 129F
11/18 21:03, 129F
噓
11/19 09:26,
4年前
, 130F
11/19 09:26, 130F
討論串 (同標題文章)
完整討論串 (本文為第 3 之 3 篇):