向一個著名的計算機科學會議提交論文有多難？

Gene Spafford的簡短回復幾乎指出了它。Gene Spafford回答了向一個著名的計算機科學會議提交論文有多難？

除了低接受率之外，審查過程中還存在大量噪音（隨機波動）。作為一個主要的例子，對于神經網絡/深度學習領域的旗艦NIPS會議，口頭報告的接受率是非常低，甚至海報展示的接受率都很低。

與此同時，鑒于目前對深度學習的興趣激增，提交的數量正在激增。很難找到足夠的有能力的裁判將兩個或三個放在每篇論文上，特別是考慮到復習論文可能是研究人員可以花時間研究的最不討好的任務。我們中的許多人覺得有義務做一些審查作為我們領域的服務，但沒有真正的獎勵（除了偶爾有機會在其他人之前看到好的論文，但你不應該利用你的東西）看，這很麻煩，并且需要很多時間來做正確的事。所有這些時間都被剝奪了我們自己的研究和寫自己的論文。

因此，我們最終會發現關注點被過度緊張，不感興趣或不稱職的評論者錯過或誤解的故事，或研究生被迫進入最后一分鐘服務審查論文的故事。

作為數據極客的NIPS社區花了一些時間來量化噪音量。沒有“基本事實” - 也就是說，沒有任何神諭可以說是否應該接受論文 - 所以這些研究需要一些隨機的論文子集，將它們交給兩個NIPS典型的審稿人團隊，并期待看兩組的建議是否相同。下面有一些參考文獻，但谷歌搜索可以找到更多。

基本上，兩個群體似乎都拒絕了一些非常弱的論文，其中一些是明星也許這兩個群體都可以接受，并且對于應該接受哪些其他群體存在可怕的分歧。因此，如果您能夠以某種方式向NIPS多次提交一份好的論文，每次都有不同的隨機選擇的裁判，有時會被會議接受，有時候也不會。

NIPS實驗

Nips實驗

HTTPS：//arxiv.org/pdf/1708.09794 ...

由于這樣的問題，我個人認為會議和期刊使用無償專家裁判作為守門和錯誤檢查器，控制其他研究人員可以輕易看到的和他們不能看到的，是一個時間已經過去的系統。

我想在將來，大家將能夠將他們的論文放入一些永久存檔中，以便將來可靠地找到它。這應該對讀者免費，理想情況下，對作者免費。這些紙張的簡單存儲和索引并不是非常昂貴，可以由政府或某些基金會負責。

很多東西都是垃圾。因此，我們需要建立一個質量控制系統，根據該領域受尊敬的人的組織或非正式網絡標記錯誤和問題，評估和推薦。這是我們現在在線評估和推薦產品和服務的方式的擴展。最好的論文會被注意到，因為很多人推薦它們。這不是一個絕對可靠的系統，但可能比現在更好 - 特別是如果我們仔細考慮如何將自我推銷，自私商業利益和網站優化保持在游戲之外。

我沒有完整的設計，但這是我們應該努力的方向。

如果成功，促銷委員會可以使用更可靠的在線聲譽標記來代替當前“出版物數量”指標。

會議可以回到他們交換意見的最初目的，并且不再是促銷的標記。

期刊可以通過邀請，可能包含許多主題問題等方式，專注于長篇形式的想法表達（正如今天更好的非同行評審期刊和技術出版物所做的那樣）。

昂貴的期刊濫用其作為學術質量和進步的仲裁者的地位可能會瀕臨滅絕。

寶寶起名 起名