| 查看: 23299 | 回復: 64 | |||||
| 【有獎交流】積極回復本帖子,參與交流,就有機會分得作者 mikexu1992 的 44 個金幣 ,回帖就立即獲得 1 個金幣,每人有 1 次機會 | |||||
[交流]
[重發(fā)](獨家詳細版)博士后基金評分方式及其公平性探討——小組分加權,系數(shù)即命運?
|
|||||
|
2021/7/8 更新:昨天聽朋友說基金會領導在基金申請培訓時再次提到了我的帖子,可惜我又沒在現(xiàn)場聽到。感謝官方的認可。 這兩批次的基金申請培訓時,領導都有建議博士后們感興趣的可以來看我的帖子。但是,發(fā)現(xiàn)小木蟲居然在6月中旬左右到7月初的某一天刪除了我的帖子。 咨詢區(qū)長表示沒有違規(guī)內(nèi)容,于是我在今天重新發(fā)布。希望能收到論壇關于刪帖的解釋。 -----------我是分割線----------- 2021/1/6 更新:聽說今天基金會領導在基金申請培訓時提到了我的帖子,算是認可了其中的內(nèi)容。 雖然不在現(xiàn)場,也算是達到了初衷,犧牲前轟轟烈烈了一把吧。 -----------我也是分割線----------- 2020/10/28 更新:目前了解到的最高的加權系數(shù)>2,所以只要原始分50多就能按100多的最終分數(shù)進行排名哦 基準組哭了,100分都不中啊![]() 這一大組中甚至出現(xiàn)了分數(shù)高20分排名反而低70名的情況,是我了解到的最夸張的一組。 而目前看到的最低的加權系數(shù)在0.7不到,也就是這一小組的博士后即使原始分滿分,大致也按70不到的最終分數(shù)進行排名。 并且,那個大組看人數(shù)應該就兩個小組,所以同大組的一個小組加權系數(shù)<0.7,另一個小組的加權系數(shù)是1,系數(shù)小于0.7的那一小組恐怕全軍覆沒了。 -----------太長不看版分割線----------- 太長不看版:大組拆小組,小組分加權,系數(shù)即命運? 可悲的是,當你以為自己不中是寫本子能力實力問題時,也許只是因為系數(shù)運氣;當你以為自己中了是努力修本子終于得到認可,或許還是因為系數(shù)運氣。 而且,其實即使在同一個大組,也有相當一部分沒中的本子原始分是比中了的本子原始分要高的。 -----------原文分割線----------- 68批博士后基金結(jié)果已出,又是小木蟲幾家歡喜幾家愁的時刻。 我這一次是第三次申請,10月13日已經(jīng)通過自己的技術手段知悉沒中,果然結(jié)果一樣。 其實本來是不想發(fā)這個帖子的。因為首先發(fā)帖有風險,其次今年既然已經(jīng)公示,就不會更改了,而我可能是最后一次申請,今后如何或許和我無關了。 但是,我覺得自己作為一個讀書人,實在不應被培養(yǎng)為一個事不關己高高掛起的人。 本人在67批的時候曾經(jīng)攻破了博士后基金的評分方法,知曉了很多中了基金的和沒中基金的人的分數(shù)。 同時,我及時地反饋給了官方,上一批和這一批都曾在名單公示前聯(lián)系博士后基金委,與官方討論技術漏洞和評分方式公平性,但都沒在公示前收到回復。 在這里,我想告訴諸位,博士后基金的真實評分方式是怎樣的。我說的不是保密信息,因為官方曾通過電話公開給許多發(fā)現(xiàn)自己和同事分數(shù)排名不對應的人。 而有趣的是,除開他們,世人都認為博士后基金面上資助因為雙盲,是非常公平并且能反映博士后的真正實力的。那諸位請閱后再談。 由于一些方向的人數(shù)太多,無法按整個大組送到評審老師處,于是官方會把本子以隨機的方式分為若干小組。 這里明確兩個定義,同二級學科的為一個大組,一個大組按人數(shù)多少會分為若干個小組,設某個大組分成的小組共有n個。 由于不同小組的評審老師不同,官方出于公平性考慮,在把不同小組的分數(shù)匯總至大組時,引入了加權系數(shù)的概念。 加權系數(shù)的算法大致是這樣的,即會以小組1為基準,其中有兩份對照本子會被送到小組2~n,由不同的評審小組老師評分。 這樣就獲得了小組1與小組2~n中兩份對照本子的分數(shù),可通過某種算法(可能是均分相除),以正比例函數(shù)的方式,把小組2~n的分數(shù)歸化為小組1的標準。 這里再明確三個定義,每個小組評審老師給出的分數(shù)是原始分,正比例函數(shù)的比例系數(shù)為加權系數(shù),原始分乘以加權系數(shù)是最終分數(shù)。 排名是各個小組的本子匯總到大組,按最終分數(shù)排名的。 其實,也不排除是以一次函數(shù)的方式計算加權系數(shù),但也就是多個截距(y=ax 變 y=ax+b),并不會有太本質(zhì)上的區(qū)別。 是的,官方是為了公平性,出發(fā)點完全是值得肯定的。整個方法是由出色的顧問專家學者提供的,真的是很棒的方法。似乎沒什么不妥。 說完了背景,我們來說實際情況吧。 67批的時候,和我在一個大組且?guī)缀跬值模ǚ植畈坏?.1)朋友,最后是大組前三(我們組120人左右),而我線外。 同樣67批的時候,某個大組原始分超過90分、88分的人不中,而80出頭的朋友中了。 為何會出現(xiàn)這樣的情況?諸位博士后朋友們肯定猜到了。是的,加權系數(shù)。 67批時我的加權系數(shù)是0.99,和我同分的朋友是1.08;今年我的加權系數(shù)是1.01,我知道有個同大組的小組加權系數(shù)是1.09。 試問,滿分100左右的如何和滿分110左右的相比?這也是為何從上一批開始,我就持有一種觀點,就是加權系數(shù)決定命運。 理想和現(xiàn)實總是有差距的,方法雖好,但施行起來似乎…… 接下來說說為何我認為加權系數(shù)可能會有問題,以及產(chǎn)生這種問題的原因。 已知存在1.10左右的加權系數(shù),那么假設一個小組第一名的分數(shù)是90,最終分數(shù)為90*1.1=99,而這個小組的79分將會有79*1.1=86.9的最終分數(shù)。 我相信每個小組的評審老師都是認真負責的,最后各自給出的分數(shù)將會接近于正態(tài)分布,且每個人給的最高分可能在90出頭,均值可能在79上下。 設上線分數(shù)為86.9左右,另一個小組加權系數(shù)為1,某人的分數(shù)為86.5,此人也許是該小組的前三或前五(從這兩批的情況看,這些取值都是合理的)。 看,高加權系數(shù)小組的中位水平的本子是可以反超另一個小組的前三到五。 合理推測,最后中了的本子,絕大多數(shù),也許至少一半都在那些高加權系數(shù)的小組中,而低加權系數(shù)的小組中即使前三,也未必能中。 出現(xiàn)這樣情況的原因還是在于不同評審老師在面對同一個本子時打分有差異,這本是很正常的事。 也就是說,如果每個小組大約是3個評審老師,前面說的對照本子會遇到3*n個評委,而其他本子只有3個評委。 這兩份對照本子在不同小組的3個評審老師手下得到的分數(shù)的差異決定了加權系數(shù)。 但我敢說,這兩份對照本子在各個小組的均分離開3n個評委給出的總均分都是有差異的。 所以,這其實是一種把不同評審老師對兩份對照本子的喜好程度的不同還有水平位次的不同強行拉平的方法。 再說個事情。67批和68批,官方公開的都是加權前的原始分,所以67批時,曾有個熱門帖子,就是很多人發(fā)現(xiàn)自己同一大組的分數(shù)和排名不對應。 可以這樣說,官方是問心無愧的,這是一種標準的算法,并不是一些蟲友懷疑的人為操作,所以官方敢于公開原始分,當有人質(zhì)疑不對應就會解釋原因。 但是,官方為何直接公開原始分呢,大家想過沒有。原因似乎是這樣的,加權后,部分人的總分可能超過100,三項分數(shù)可能超過30、60、10。 如果公開比評分標準中的分數(shù)上限還高的分數(shù),尤其不排除這些人可能本子還沒中,那么引起的問題和質(zhì)疑將是更大的。 事實上這也說明,現(xiàn)行的加權系數(shù)算法在某些情況下是會產(chǎn)生問題的。 例如68批,了解到某一小組的加權系數(shù)超過了2,那么這一小組的最高分可以接近200,基準組即使?jié)M分100也無法超過加權系數(shù)為2的小組的50分…… 而且已知,這一小組里有幾位最終分數(shù)超過100的博士后也沒有中,因為他們的原始分在50左右,本來在自己小組也是很靠后的,若公開100多不中…… 相信大家都認同,世界上沒有絕對的公平。也許我是那種運氣很不好的人,所以67批和68批都死于加權系數(shù)。 羨慕那些有實力也有運氣的博士后朋友。尤其獲得一等資助的博士后們,他們真的是既有拿到小組第一的實力,又有被分到最高加權系數(shù)小組的運氣。 我也確定,官方設立這種加權算法的初衷一定是為了解決很多年前不設加權系數(shù)時產(chǎn)生的某些問題。 由于官方并沒有回復我的反饋,我也沒有機會和官方溝通,我并不知道多年前不設加權系數(shù)時會產(chǎn)生什么問題。 但是可以猜想,會不會是中的本子都分散在特定的幾個單位,例如那些雙一流大學了?這確實會有問題,不過這不正是說明這些單位本來也強嗎。 最后想說,本人雖然有激動過,但在從頭闡述我所知所想時,心態(tài)是愈發(fā)平靜的,也站在博士后和官方兩方換位思考了。 我很希望這個帖子能解決很多蟲友對于博后基金的疑問,也很希望官方能夠讓評分體系越來越科學。 這次公布的依然是原始分,所以可能還會有很多博士后和同事比較后發(fā)現(xiàn)排名和分數(shù)不對應,那么這個帖子也算是替官方作了解釋。 我盡到了自己的義務,例如我在第一次發(fā)現(xiàn)技術漏洞后就和官方溝通過,也多次試圖和官方聯(lián)系交流,現(xiàn)在又把這些非涉密的信息分享給蟲友們。 可能不會再申請博士后基金面上資助了,那么就讓我的最后一次犧牲顯得轟轟烈烈一些吧。 希望學術圈和科研界的未來是美好的。 以上。 某位三申博后基金三掛的博士后 2020/10/27 [ last edited by mikexu1992 on 2021-7-9 at 19:57 ] 2022/1/5 更新:今天基金申請培訓時博管處領導又提了我的帖子,很感謝老師的認可。 我個人已經(jīng)決定離開學術圈了,親們珍重。 [ Last edited by mikexu1992 on 2022-1-5 at 20:34 ] |
基金相關 | 帖子專輯 |
» 搶金幣啦!回帖就可以得到:
+5/365
+1/276
+1/178
+1/173
+2/172
+2/156
+1/86
+1/82
+1/47
+1/12
+1/11
+1/11
+1/9
+1/8
+1/8
+1/8
+1/4
+1/4
+1/2
+1/1
| 發(fā)人深省的帖子!由于對現(xiàn)行的分數(shù)計算過程并不了解,以下純屬個人偏見。分組不隨機或過小都會降低組間的公平性。申請書隨機分組的前提下,減少組數(shù)并按組均分上會或資助數(shù)量能保證評審的公正性,如果非得各組混合排序,可以預先進行組內(nèi)分數(shù)歸一化統(tǒng)一各組的分數(shù)范圍(例如0~100、60~100等)。為減少函評時的二次分組,鑒于評審過程采用結(jié)構化評分,可以增加每位專家評閱的申請書數(shù)量,同時減少每位專家評判的指標數(shù)量,例如,每位專家只對更多申請書的某1或2個方面(例如創(chuàng)新性、可行性等)進行評分。另外,增加評判同一指標的專家數(shù)量,分析同組所有申請書的同一指標得分及排序在所有專家之間的差異性,剔除明顯差異于其他專家的評判結(jié)果后(類似于剔除離群值;應該有統(tǒng)計學方法可以實現(xiàn)),再進行后續(xù)的結(jié)構化分數(shù)計算,同時根據(jù)這個差異性系數(shù)量化各位專家的“大眾化程度”或“離群程度”。 |
|
寫的完在好有什么用?總分是固定的,專家確實是認可你給90多分,但是乘以系數(shù)0.7后也就60多分了。系數(shù)對排名高的,評分高的很不公平? 發(fā)自小木蟲Android客戶端 |
禁蟲 (文學泰斗)
|
本帖內(nèi)容被屏蔽 |
送紅花一朵| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 化學 0703求調(diào)劑 總分293 一志愿211 +3 | 土土小蟲 2026-03-03 | 3/150 |
|
|---|---|---|---|---|
|
[考研] 290求調(diào)劑 +9 | ErMiao1020 2026-03-02 | 9/450 |
|
|
[考研] 292求調(diào)劑 +3 | sgbl 2026-03-03 | 3/150 |
|
|
[考研] 289求調(diào)劑 +7 | BrightLL 2026-03-02 | 9/450 |
|
|
[考研] 一志愿天津大學085600 319分 材料與化工 金屬方向 求調(diào)劑 +4 | 青科11 2026-03-02 | 4/200 |
|
|
[考研] 299求調(diào)劑 +5 | kkcoco25 2026-03-02 | 9/450 |
|
|
[考研] 中國科學技術大學材料與化工281求調(diào)劑,有科研和獲獎經(jīng)歷 +6 | wsxw 2026-03-02 | 7/350 |
|
|
[考研] 324求調(diào)劑 +4 | wxz2 2026-03-03 | 5/250 |
|
|
[考研] 307求調(diào)劑 +6 | wyyyqx 2026-03-01 | 6/300 |
|
|
[考研] 材料化工調(diào)劑 +13 | 今夏不夏 2026-03-01 | 16/800 |
|
|
[考研] 085600求調(diào)劑 +4 | LRZZZZZZ 2026-03-02 | 5/250 |
|
|
[考研] 材料284求調(diào)劑,一志愿鄭州大學英一數(shù)二專碩 +15 | 想上岸的土撥鼠 2026-02-28 | 15/750 |
|
|
[考研] 材料工程274求調(diào)劑 +5 | Lilithan 2026-03-01 | 5/250 |
|
|
[考博] 26超級電容器申博 +3 | dhdjdjend 2026-02-25 | 3/150 |
|
|
[考研] 一志愿東北大學材料專碩328,求調(diào)劑 +3 | shs1083 2026-03-02 | 3/150 |
|
|
[考研] 281求調(diào)劑 +5 | 2026計算機_誠心 2026-03-01 | 8/400 |
|
|
[考研] 化工專碩342,一志愿大連理工大學,求調(diào)劑 +6 | kyf化工 2026-02-28 | 7/350 |
|
|
[考研] 275求調(diào)劑 +3 | L-xin? 2026-03-01 | 6/300 |
|
|
[基金申請]
剛錄用,沒有期刊號,但是在線可看的論文可以放為代表作嗎
10+3
|
arang1 2026-03-01 | 3/150 |
|
|
[考研] 307求調(diào)劑 +4 | 73372112 2026-02-28 | 6/300 |
|