研究の読み方(研究の種類・人数・関連と因果)
研究で分かったことと、目の前の子に必要なことは、同じとは限りません。研究は「ある国の、ある年齢の、たくさんの子の平均の傾向」を示すもので、一人の子の先を決めるものではありません。そのうえで、論文を読むときに見ている点をまとめます。
研究の種類
同じ「研究によると」でも、調べ方で言えることの強さが違います。
| 種類 | どう調べるか | 言えること |
|---|---|---|
| ランダム化比較試験(RCT) | くじで2つ以上の組に分け、一方にだけ何かをして比べる | 組の違いはくじで決まるので、因果に近いことが言える |
| 前向きコホート | 同じ子を何年か追って、前の値と後の値の関係を見る | 時間の順は分かるが、ほかの事情の違いが残る(関連) |
| 横断研究 | 一度だけ測って、値どうしを比べる | どちらが先かも分からない(関連) |
| 自然実験 | 制度の境目(生まれ月の区切りなど)で分かれた人どうしを比べる | 条件しだいで因果に近いことが言える |
| メタ分析 | 同じ問いの研究を集めて、まとめて計算する | 元の研究の種類の強さと弱さを引き継ぐ |
例: 画面の使い方の点と脳の白質の値を一度だけ測って並べた研究(横断研究)では、どちらが先かは分かりません。
人数と、何を1つと数えたか
人数は「何人を調べたか」だけでなく、「その分析に何人が入ったか」「何を1つと数えたか(子ども・家族・組)」を見ます。同じ論文でも、分析ごとに人数が違うことがよくあります。
例1: 論文の表1に載る子どもは1,026人ですが、脳のネットワークの値がある子は414人です。大きな人数の研究と紹介されても、脳の画像の分析は414人です。
例2: 分析に入れた子は8,323人(女子4,153人、49.9%)で、比べたのは条件の近い子どうしの3,021組です。2年後の脳の画像まであるのは749組です。
関連と因果
関連は「一緒に見られた」こと、 因果は「片方を変えると、もう片方が変わる」ことです。観察研究から言えるのは関連までで、因果に近づくには、くじで分ける実験や、制度の境目を使う比較が要ります。
観察研究で関連が見えても、次の3つの読み方が残ります。
- 逆の向き: 子の様子が先で、親の行動が後かもしれない。
- ほかの事情: 収入・家庭の時間の使い方など、両方に関わる事情が表れているだけかもしれない。
- 偶然: 多くの値を比べると、たまたまの差も出る。
例1(逆の向き): 親の叱り方と子の問題行動について、親から子への向き(母 β = .12、父 β = .11(p < .001))と、子から親への向き(母 β = .10、父 β = .09(p < .001))の両方の関係が見られました。
解説: 怒鳴る・ののしる叱り方と13〜14歳の問題行動・気分の落ち込み
例2(ほかの事情): 世帯の収入と画面の使い方の点に相関(ρ = −0.54)があり、収入を条件に入れると、検査の点との関係は統計的に有意ではなくなりました。
「傾向スコアのマッチング」は、測った条件(性別・収入など)の近い人どうしを組にして比べる方法です。測っていない事情の違いは残るので、観察研究であることは変わりません。
差の大きさ
「統計的に有意」は、偶然だけでは説明しにくいという意味で、差が大きいという意味ではありません。人数が多いと、小さな差でも有意になります。論文が出した差の大きさの指標を見ます。
- Cohen の d: 2つの組の平均の差を、ばらつきの幅で割った値。0.2 ほどでも、組どうしの分布は大きく重なります。
- R²・偏イータ二乗: ばらつきのうち、その要因で説明できる割合の目安。
- 相対の値と元の割合: 「1.5倍」のような相対の値だけでなく、「4%が6%に」のような元の割合(絶対の値)を並べて見ます。
例: 睡眠の研究の結晶性知能の差は Cohen の d = 0.17 と 0.08(約2倍)、乳児期の画面の研究の脳のネットワークの関係は β = 0.381、p = 0.005、偏イータ二乗 = 0.024 でした。どちらも小さな値です。
親が答えた値
画面の時間・睡眠時間・叱り方などは、親が質問票に答えた値のことが多く、思い出し違いや、望ましく見える答えに寄る偏りがありえます。このサイトの解説では、測ったものごとに「親の回答」「子の回答」「検査」「脳の画像(MRI)」の印を付けています。
査読前(プレプリント)
プレプリントは、雑誌の査読(ほかの研究者の確認)の前に公開された原稿です。査読で結論が変わることがあります。DOI が 10.1101 で始まる medRxiv・bioRxiv などは、プレプリントの置き場所です。
例: 睡眠の研究は、雑誌に載る前に medRxiv にプレプリントが出ていました。このサイトでは、雑誌に載った版を読んでいます。
資金と利益相反
論文の末尾には、資金の出し手(Funding)と、著者と企業・団体の関係(利益相反、Competing interests)が書かれます。関係があることは不正という意味ではありませんが、読むときの手がかりになります。
例: 著者の一人が、栄養食品の会社から研究資金を受けた学術の共同体に加わっていると申告している論文があります。
撤回・訂正・論評
論文は、出た後に訂正されたり、誤りや不正で撤回されたりすることがあります。撤回の記録は Crossref(Retraction Watch のデータ)と PubMed で調べられます。訂正には、結果の数字の訂正もあれば、公開の扱いの変更のような事務的なものもあります。
例: 訂正の記録が1件あり、その中身は「CC BY のライセンスでオープンアクセスに変更した」という告知だった論文があります(結果の数字の訂正ではありません)。同じ雑誌には、この論文の読み方を批判する投書と著者の返信も載っています。
DOI か PMID から、撤回・訂正の記録と査読前かどうかをDOIで調べるページで確かめられます。
SNS の言い方を確かめる手順
- 元の論文を探す(大学のプレスリリースや記事の末尾に、論文の題名・雑誌・DOI がある)。
- DOI で撤回・訂正と査読前かを確かめる。
- 研究の種類・人数(何を1つと数えたか)・国と年齢を見る。
- 「関連」なのに「〜すると〜になる」と言っていないかを見る。
- 差の大きさと、元の割合(絶対の値)を見る。