Хелпикс

Главная

Контакты

Случайная статья



從2017年9月28日10:00 GMT（至2017年10月5日10:00 GMT）。 5 страница

⇐ ПредыдущаяСтр 16 из 22Следующая ⇒


這 些 統 計 數 據 表 明 ： 2015年 的 一 項 研 究 報 告 了 83項 高 度 引 證 的 研 究 ， 聲 稱 具 有 有 效 的 精 神 治 療 。 只 有 16次 成 功 複 製 。 另 有 16人 與 後 續 企 圖 相 矛 盾 ， 其 中 11人 發 現 第 二 次 具 有 較 小 的 效 果 。 同 時 ， 近 一 半 的 研 究 （ 40） 從 未 被 複 製 過 。

最 近 ， 科 學 雜 誌 上 發 表 的 一 項 具 有 里 程 碑 意 義 的 研 究 表 明 ， 頂 尖 心 理 學 期 刊 中 最 近 發 現 的 結 果 只 有 一 小 部 分 可 以 復 制 。 “退 出 手 錶 ”博 客 的 創 始 人 之 一 伊 万 ·奧 斯 基 斯 （ Ivan Oransky） ， 這 也 在 其 他 領 域 發 生 。

對 於 根 本 原 因 ， 我 們 的 調 查 對 象 指 出 了 幾 個 問 題 。 首 先 ， 科 學 家 甚 至 沒 有 激 勵 甚 至 嘗 試 複 製 。 USC的 Keck醫 學 院 的 社 會 科 學 家 Jon-Patrick Allem指 出 ， 資 助 機 構 傾 向 於 支 持 找 到 新 信 息 的 項 目 ， 而 不 是 確 認 舊 的 結 果 。

Allem寫 道 ： “它 們 與 早 期 的 研 究 結 果 或 結 論 相 矛 盾 ”， 也 不 願 意 發 表 複 製 研 究 。 結 果 是 阻 止 科 學 家 檢 查 對 方 的 工 作 。 “新 信 息 勝 過 更 強 有 力 的 證 據 ， 為 工 作 科 學 家 設 定 了 參 數 。 ”

第 二 個 問 題 是 許 多 研 究 難 以 復 制 。 有 時 他 們 的 方 法 太 不 透 明 。 有 時 候 ， 原 始 研 究 的 參 與 者 太 少 ， 無 法 產 生 可 複 制 的 答 案 。 有 時 候 ， 正 如 我 們 在 上 一 節 中 看 到 的 那 樣 ， 這 項 研 究 的 設 計 很 不 完 善 或 是 完 全 錯 誤 。

再 次 ， 這 回 到 了 激 勵 措 施 ： 當 研 究 人 員 必 須 經 常 發 布 並 追 求 積 極 的 結 果 時 ， 用 更 清 晰 的 方 法 進 行 高 質 量 的 研 究 就 沒 有 時 間 了 。

解 決 不 可 再 生 的 問 題 。

科 學 家 們 需 要 更 多 的 胡 蘿 蔔 來 誘 使 他 們 首 先 進 行 複 制 。 現 在 ， 研 究 人 員 被 鼓 勵 發 布 新 的 積 極 成 果 ， 並 允 許 在 筆 記 本 電 腦 或 文 件 抽 屜 中 留 下 負 面 結 果 。

這 困 擾 著 科 學 ， 出 現 了 一 個 名 為 “出 版 偏 見 ”的 問 題 - 並 不 是 所 有 進 行 的 研 究 實 際 上 都 刊 登 在 期 刊 上 ， 而 且 那 些 傾 向 於 有 積 極 和 戲 劇 性 的 結 論 。

如 果 機 構 開 始 根 據 研 究 人 員 的 工 作 質 量 而 不 是 數 量 來 獎 勵 職 位 或 聘 用 員 工 ， 這 可 能 會 鼓 勵 更 多 的 複 制 和 勸 阻 積 極 的 結 果 追 逐 。

麥 克 馬 斯 特 大 學 前 助 理 教 授 克 里 斯 托 弗 ·溫 德 （ Christopher Wynder） 寫 道 ： “需 要 改 變 的 關 鍵 是 績 效 評 估 。 “它 影 響 重 現 性 ， 因 為 確 認 另 一 個 實 驗 室 的 結 果 並 試 圖 發 表 研 究 結 果 沒 有 什 麼 價 值 。 ”

“複 製 研 究 應 該 以 某 種 方 式 激 勵 ， 期 刊 應 該 被 激 勵 出 版 ”負 面 “研 究 ， 所 有 結 果 都 不 重 要 ， 而 不 僅 僅 是 閃 爍 的 範 式 轉 變 結 果 。

- 加 州 大 學 河 濱 分 校 生 物 學 研 究 生 Stephanie Thurmond

下 一 步 是 使 研 究 的 複 制 更 容 易 。 這 可 能 包 括 在 已 發 表 的 研 究 論 文 中 更 有 力 地 分 享 方 法 。 弗 吉 尼 亞 大 學 的 布 萊 恩 ·諾 斯 克 （ Brian Nosek） 說 ： “使 用 這 些 方 法 更 加 詳 細 的 規 範 將 是 非 常 好 的 。 ”

他 還 建 議 在 文 章 末 尾 更 多 地 添 加 補 充 劑 ， 進 入 程 序 性 的 細 節 ， 幫 助 任 何 想 重 複 實 驗 的 人 。 他 說 ： “如 果 我 能 夠 快 速 起 步 ， 我 有 更 好 的 機 會 接 近 結 果 。 ”

Nosek還 詳 細 介 紹 了 可 能 有 助 於 復 制 的 其 他 潛 在 修 復 - 他 在 開 放 科 學 中 心 的 所 有 工 作 。

斯 坦 福 大 學 John Ioannidis說 ， 更 大 程 度 的 透 明 度 和 數 據 共 享 將 使 復 製 成 為 可 能 。 試 圖 複 製 研 究 的 任 何 人 經 常 會 追 查 原 來 的 調 查 人 員 ， 了 解 實 驗 的 細 節 。

他 解 釋 說 ： “最 好 是 有 條 不 紊 地 從 科 學 領 域 的 所 有 領 先 調 查 員 那 裡 進 行 買 入 ， 而 不 是 在 每 一 種 情 況 下 試 圖 找 到 調 查 員 ， 並 要 求 他 或 她 進 行 偵 探 工 作 。 ”關 於 否 則 不 可 用 的 細 節 ， 數 據 和 方 法 。

研 究 人 員 還 可 以 使 用 新 的 工 具 ， 例 如 跟 踪 每 個 版 本 的 數 據 集 的 開 源 軟 件 ， 以 便 他 們 可 以 更 輕 鬆 地 共 享 數 據 ， 並 在 工 作 流 程 中 內 置 透 明 度 。

我 們 的 一 些 受 訪 者 表 示 科 學 家 在 出 版 之 前 就 進 行 了 複 製 。 維 多 利 亞 大 學 社 會 心 理 學 家 約 翰 ·薩 卡 魯 克 （ John Sakaluk） 說 ： “在 文 學 中 提 出 探 索 性 思 想 ， 讓 人 們 花 時 間 閱 讀 之 前 ， 您 應 該 在 實 地 考 察 複 製 自 己 的 發 現 。 ”

例 如 ， 他 認 為 ， 心 理 學 家 可 以 與 少 數 參 與 者 進 行 小 型 實 驗 ， 形 成 想 法 並 產 生 假 設 。 然 而 ， 他 們 需 要 進 行 更 大 的 實 驗 ， 讓 更 多 的 參 與 者 在 將 它 們 發 佈 到 世 界 之 前 複 製 和 確 認 這 些 假 設 。 “這 樣 做 ， ”Sakaluk說 ， “我 們 其 他 人 可 以 有 更 多 的 信 心 ， 這 是 我 們 可 能 希 望 [納 入 ]我 們 自 己 的 研 究 。 ”

 

4. 同 行 評 議 破 裂

同 行 評 議 意 味 著 在 發 布 前 清 除 垃 圾 科 學 。 在 我 們 的 調 查 中 ， 受 訪 者 一 遍 又 一 遍 地 告 訴 我 們 ， 這 個 過 程 失 敗 了 。 它 是 我 們 聽 到 的 研 究 人 員 中 引 起 最 大 憤 怒 的 科 學 機 器 的 一 部 分 。

通 常 ， 同 行 評 審 工 作 如 下 ： 研 究 人 員 在 雜 誌 上 提 交 一 篇 文 章 。 如 果 期 刊 接 受 文 章 審 查 ， 它 將 被 發 送 到 同 一 領 域 的 同 僚 ， 進 行 建 設 性 批 評 和 最 終 發 布 或 拒 絕 。 （ 匿 名 級 別 有 所 不 同; 有 些 期 刊 有 雙 盲 評 論 ， 而 其 他 期 刊 則 轉 為 三 重 審 查 ， 作 者 ， 編 輯 和 評 論 者 不 知 道 誰 是 誰 ） 。

這 聽 起 來 像 一 個 合 理 的 系 統 。 但 是 ， 許 多 研 究 和 系 統 評 價 發 現 同 行 評 議 不 能 可 靠 地 防 止 劣 質 科 學 的 出 版 。

“我 認 為 同 行 評 議 ， 就 像 民 主 一 樣 ， 壞 ， 但 比 別 的 更 好 。 ”

 - 愛 丁 堡 大 學 心 理 學 教 授 蒂 姆 西 ·貝 茨 （ Timothy Bates）

這 個 過 程 經 常 不 能 發 現 手 稿 中 的 欺 詐 或 其 他 問 題 ， 當 您 考 慮 研 究 人 員 在 支 付 審 閱 手 稿 時 不 支 付 報 酬 或 以 其 他 方 式 獲 得 報 酬 ， 這 並 不 奇 怪 。 他 們 從 責 任 感 中 做 出 貢 獻 - 為 他 們 的 研 究 領 域 做 出 貢 獻 ， 並 幫 助 科 學 進 步 。

但 這 意 味 著 找 到 最 好 的 同 行 評 議 手 稿 並 不 容 易 ， 因 為 研 究 人 員 拖 延 工 作 （ 導 致 出 版 延 誤 長 達 兩 年 ） ， 當 他 們 終 於 坐 下 來 - 查 看 一 篇 文 章 ， 他 們 可 能 會 被 趕 上 ， 錯 過 了 研 究 錯 誤 。

麻 省 理 工 大 學 數 學 助 理 教 授 Joel Fish說 ： “問 題 是 ， 大 多 數 裁 判 根 本 不 會 仔 細 審 查 論 文 ， 導 致 出 版 不 正 確 的 論 文 ， 差 距 文 件 和 簡 單 的 不 可 讀 的 論 文 。 ” 。 “這 最 終 成 為 年 輕 研 究 人 員 進 入 該 領 域 的 一 個 大 問 題 ， 因 為 這 意 味 著 他 們 必 須 問 問 哪 些 論 文 是 堅 實 的 ， 哪 些 不 是 。 ”

“科 學 是 流 動 的 ， 出 版 不 是 ， 研 究 需 要 永 久 的 印 刷 ， 嘗 試 複 製 研 究 或 發 表 微 不 足 道 的 成 果 幾 乎 沒 有 什 麼 好 處 ， 訪 問 研 究 是 很 昂 貴 的 。 ”

 - 加 拿 大 漁 業 和 海 洋 水 生 科 學 生 物 學 家 阿 曼 達 ·卡 斯 凱 涅 特 （ Amanda Caskenette）

這 更 不 用 說 同 儕 審 查 欺 凌 的 問 題 。 由 於 過 程 中 的 默 認 是 編 輯 和 同 行 評 審 者 知 道 作 者 是 誰 （ 但 作 者 不 知 道 評 論 是 誰 ） ， 對 研 究 人 員 或 機 構 的 偏 見 可 能 會 進 入 ， 打 開 粗 魯 ， 匆 忙 和 其 他 無 益 的 機 會 註 釋 。 （ 只 需 在 Twitter上 查 看 流 行 的 #SixWordPeerReview主 題 標 籤 ） 。

我 們 的 調 查 對 像 中 沒 有 遺 漏 這 些 問 題 ， 他 們 表 示 同 行 評 議 是 系 統 破 裂 ， 懲 罰 科 學 家 ， 降 低 出 版 物 的 質 量 。 他 們 不 僅 要 改 革 同 行 評 審 過 程 ， 而 且 要 改 變 它 的 概 念 。

修 復 同 行 評 議

在 編 輯 偏 見 和 透 明 度 問 題 上 ， 我 們 的 受 訪 者 意 見 分 歧 。 有 人 建 議 所 有 期 刊 都 應 該 進 行 雙 盲 同 行 評 議 ， 審 核 人 員 不 能 看 到 他 們 正 在 審 核 的 人 的 姓 名 或 附 屬 機 構 ， 而 出 版 作 者 不 知 道 誰 審 核 了 他 們 。 這 裡 的 主 要 目 標 是 減 少 偏 見 。

Pacific Northwest National Lab postdoc Timothy Duignan寫 道 ： “我 們 知 道 科 學 家 根 據 無 意 識 的 定 型 觀 念 作 出 有 偏 見 的 決 定 。 “所 以 ， 而 不 是 根 據 作 者 的 性 別 ， 種 族 ， 國 家 或 機 構 地 位 來 判 斷 一 篇 論 文 - 我 認 為 目 前 發 生 了 很 多 事 情 - 它 應 該 以 其 獨 立 於 這 些 事 物 的 質 量 來 判 斷 。 ”

然 而 還 有 人 認 為 ， 更 多 的 透 明 度 ， 而 不 是 更 少 的 答 案 是 ： “我 們 正 確 地 倡 導 出 版 透 明 度 最 高 的 水 平 ， 我 們 仍 然 有 大 多 數 評 論 是 盲 目 的 ， 我 不 知 道 誰 正 在 審 查 我 ， ”Lamberto寫 道 。 Manzoli， 意 大 利 基 耶 蒂 大 學 的 流 行 病 學 和 公 共 衛 生 教 授 。 “很 多 次 我 們 看 到 很 低 質 量 的 評 論 ， 我 們 不 明 白 是 否 是 一 個 稀 缺 的 知 識 或 利 益 衝 突 的 問 題 。 ”

“我 們 需 要 承 認 學 術 期 刊 的 內 容 是 什 麼 ： 商 店 窗 口 不 完 整 的 研 究 描 述 ， 可 以 對 任 何 出 版 物 進 行 半 任 意 編 輯 [判 斷 ]， 並 且 經 常 會 有 有 害 的 政 策 限 制 訪 問 重 要 的 出 版 物 後 重 要 的 出 版 物 評 估 研 究 。 ”

 - Ben Goldacre， 流 行 病 學 研 究 員 ， 醫 師 和 作 者

也 許 有 一 個 中 間 地 帶 。 例 如 ， eLife是 一 個 新 的 開 放 獲 取 期 刊 ， 其 影 響 因 素 正 在 迅 速 上 升 ， 運 行 著 一 個 合 作 的 同 行 審 查 流 程 。 編 輯 和 同 行 評 審 人 員 在 每 次 提 交 中 協 同 工 作 ， 以 創 建 一 份 關 於 論 文 的 綜 合 評 論 列 表 。 作 者 可 以 回 答 小 組 認 為 最 重 要 的 問 題 ， 而 不 是 面 對 個 人 評 論 者 的 偏 見 和 想 法 。 （ 奇 怪 的 是 ， 這 個 過 程 更 快 -eLife花 費 更 少 的 時 間 來 接 受 論 文 比 自 然 或 細 胞 。 ）

然 而 ， 這 些 大 多 是 增 量 修 復 。 其 他 答 复 者 認 為 ， 我 們 可 能 需 要 從 根 本 上 重 新 思 考 同 行 評 議 的 整 個 過 程 。

Nosek說 ： “目 前 的 同 行 評 審 過 程 包 含 一 個 紙 張 是 最 終 的 概 念 。 “審 查 過 程 是 [一 種 形 式 ]的 認 證 ， 並 且 已 經 完 成 了 一 份 文 件 。 ”但 科 學 不 會 這 樣 工 作 。 科 學 是 一 個 不 斷 發 展 的 過 程 ， 真 理 是 臨 時 的 。 所 以 ， 諾 克 斯 說 ， 科 學 必 須 “擺 脫 對 發 布 的 定 義 的 束 縛 ”。

一 些 受 訪 者 希 望 將 同 行 評 議 視 為 一 個 連 續 的 過 程 ， 其 中 研 究 反 復 和 透 明 地 更 新 並 重 新 發 布 ， 因 為 新 的 反 饋 改 變 了 他 們 - 就 像 維 基 百 科 條 目 。 這 將 需 要 某 種 專 家 眾 包 。

聯 邦 政 府 高 級 科 學 評 論 員 Lakshmi Jayashankar說 ： “科 學 出 版 領 域 ， 特 別 是 生 物 科 學 領 域 ， 似 乎 沒 有 互 聯 網 。 ” “這 篇 文 章 同 行 評 議 是 永 遠 的 ， 這 傷 害 了 那 些 試 圖 把 他 們 的 結 果 快 速 的 公 共 領 域 的 科 學 家 。 ”

在 數 學 和 物 理 學 中 已 經 存 在 一 種 可 能 的 模 型 ， 其 中 有 一 個 很 長 的 “預 印 ”文 章 的 傳 統 。 研 究 發 佈 在 一 個 名 為 arXiv. org的 公 開 網 站 上 ， 經 常 在 同 行 評 審 之 前 發 表 在 期 刊 上 。 在 那 裡 ， 文 章 由 一 個 主 持 人 的 社 區 分 類 和 評 論 ， 提 供 了 另 一 個 機 會 ， 以 過 濾 問 題 ， 然 後 再 進 行 同 行 評 審 。

威 斯 康 星 大 學 古 生 物 學 博 士 生 Scott Hartman寫 道 ： “發 布 預 印 本 將 允 許 科 學 的 群 眾 包 裝 增 加 被 捕 獲 的 錯 誤 數 量 ， 因 為 傳 統 的 同 行 評 審 者 不 能 被 期 望 成 為 每 一 個 子 學 科 的 專 家 。

即 使 文 章 發 表 後 ， 研 究 人 員 也 認 為 同 行 評 審 過 程 不 應 該 停 止 。 他 們 希 望 在 網 上 看 到 更 多 的 “發 布 後 ”同 行 評 議 ， 以 便 學 術 界 可 以 在 文 章 發 表 後 批 評 和 評 論 文 章 。 像 PubPeer和 F1000Research這 樣 的 網 站 已 經 彈 出 來 ， 以 促 進 這 種 發 布 後 的 反 饋 。

匹 茲 堡 大 學 的 老 年 醫 學 研 究 員 貝 基 ·克 拉 克 森 （ Becky Clarkson） 寫 道 ： “我 們 每 年 在 會 議 上 做 幾 次 。 “我 們 可 以 每 天 在 互 聯 網 上 這 樣 做 。 ”

底 線 是 傳 統 的 同 行 評 審 從 未 像 我 們 想 像 的 一 樣 ， 而 且 嚴 重 破 壞 也 是 成 熟 的 。

 

5. 科 學 被 鎖 在 付 費 牆 上 太 多 了

經 過 資 助 ， 進 行 和 同 行 評 審 後 ， 還 有 一 個 問 題 是 讓 其 他 人 能 夠 閱 讀 並 理 解 其 結 果 。

受 訪 者 一 再 表 示 不 滿 ， 科 學 研 究 如 何 傳 播 。 他 們 說 ， 太 多 的 鎖 定 在 付 費 的 期 刊 上 ， 難 度 大 且 訪 問 成 本 高 昂 。 一 些 受 訪 者 也 批 評 了 出 版 過 程 本 身 太 慢 ， 陷 入 了 研 究 的 步 伐 。

關 於 訪 問 問 題 ， 一 些 科 學 家 認 為 ， 學 術 研 究 應 該 是 免 費 的 ， 供 大 家 閱 讀 。 他 們 對 目 前 的 模 式 感 到 憤 怒 ， 其 中 營 利 性 出 版 商 將 期 刊 放 在 價 格 昂 貴 的 支 付 寶 之 後 。


⇐ Предыдущая11121314151617181920Следующая ⇒
  

© helpiks.su При использовании или копировании материалов прямая ссылка на сайт обязательна.