Running Extra Analyses
追加分析の実施
To address concerns about robustness, the team runs sensitivity analyses and checks whether the main findings hold under alternative specifications. The results help them strengthen the manuscript and support a measured response.
頑健性への懸念に応えるため、チームは感度分析を行い、別のモデル設定でも主な結果が保たれるかを確認します。その結果をもとに原稿を強化し、慎重でバランスの取れた回答を準備します。
会話11

The reviewer’s main concern is that our findings may depend on how we defined the comparison group. We can test that directly with a couple of alternative specifications.
査読者が主に懸念しているのは、比較群の定義の仕方によって結果が変わるかもしれない点だね。別のモデル設定をいくつか試せば、そこを直接検証できるよ。
I’ve rerun the model using the broader comparison group we discussed. The effect is slightly smaller, but it’s still statistically significant and points in the same direction.
話し合った、より広い比較群を使ってモデルを再分析したよ。効果は少し小さくなったけど、統計的に有意なままだし、方向も同じだよ。
That’s reassuring. What happens if we exclude the observations with the most extreme values? The reviewer seemed especially concerned that a few cases might be driving the result.
それなら安心だね。最も極端な値の観測データを除いたらどうなる? いくつかのケースが結果を左右しているかもしれないと、査読者は特に心配していたみたい。
I tried that too. The estimate barely changes. I also checked the model with robust standard errors, and the confidence interval remains comfortably away from zero.
それも試したよ。推定値はほとんど変わらなかった。ロバスト標準誤差を使ったモデルも確認したけど、信頼区間はゼロから十分離れたままだよ。
Good. Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.
いいね。ただ、正確に言おう。こうした確認から、結果はそれらの選択に対して頑健だとは言えそうだけど、研究デザインによってあらゆるバイアスの可能性を排除できたと証明できるわけじゃない。
Would it help to add a table with all three specifications? That way, readers can compare the estimates instead of having to take our word for it.
3つのモデル設定を全部載せた表を追加したらどうかな? そうすれば、読者は私たちの言葉を信じるだけじゃなくて、推定値を自分で比較できるよ。
Yes. I can put the alternative models in a supplementary table and summarize the pattern in the main text. We should report the estimates and intervals, not just say they’re similar.
そうしよう。別のモデルは補足資料の表にまとめて、全体の傾向を本文で説明するよ。似ているとだけ書くんじゃなくて、推定値と区間を報告しよう。
Agreed. We should also explain why these alternatives address the reviewer’s concern, especially how changing the comparison group tests the sensitivity of our conclusions.
賛成。こうした代替案が査読者の懸念にどう応えるのかも説明したほうがいいね。特に、比較群を変えることで結論の感度をどう検証できるのかを。
I’ll draft that paragraph. I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.
その段落は私が下書きするね。より広い比較群では推定値がやや小さくなることを認めたうえで、実質的な結論は変わらないと明確にするよ。
One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy. We should keep those issues separate.
一点だけ注意ね。極端な値を除く確認は役に立つけど、サンプリング方法の限界について議論する代わりにはならないよ。この2つの問題は分けて扱おう。
Exactly. We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.
そのとおり。特定のモデル設定が結果を左右しているわけではないことを示す証拠として分析結果を提示しつつ、分析では解決できない点についても率直に説明しよう。
語彙8
- alternative specifications代替的なモデル設定
Different ways of setting up or defining a model. Here, the team uses them to see whether its findings depend on particular analytical choices.
モデルの組み立て方や定義の仕方を変えたものです。ここでは、特定の分析上の選択に結果が左右されるかどうかを確かめるために使っています。
- statistically significant統計的に有意な
A result is statistically significant when the analysis suggests it is unlikely to be due to random variation alone. The phrase describes evidence in the data, not proof that a conclusion is true.
分析結果が、偶然のばらつきだけで生じたとは考えにくい場合、その結果は「統計的に有意」だと言います。この表現が示すのはデータに基づく証拠であり、結論が正しいという証明ではありません。
- extreme values極端な値
Observations that are unusually high or low compared with most of the data. Researchers may check whether these cases have an outsized influence on results.
データの大部分と比べて、特に高い、または低い観測値のことです。こうした値が結果に過度な影響を与えていないか、研究者が確認することがあります。
- robust standard errorsロバスト標準誤差
A method for calculating uncertainty that can work better when data do not meet certain model assumptions. Here, the team checks whether its confidence interval remains similar under this method.
モデルの前提が満たされていない場合にも、より適切に不確実性を計算できることがある方法です。ここでは、この方法でも信頼区間が大きく変わらないかをチームが確認しています。
- sensitivity of our conclusions結論の感度
How much a conclusion might change when the researchers alter their assumptions or analytical choices. Testing sensitivity helps show whether findings depend on a particular specification.
研究者が前提や分析上の選択を変えたとき、結論がどの程度変わる可能性があるかということです。感度を検証すると、結果が特定のモデル設定に依存しているかどうかを示せます。
- attenuated estimate小さくなった推定値
An estimate that is smaller or weaker than another estimate. It can describe a reduced effect without implying that the direction or overall conclusion has changed.
別の推定値と比べて小さい、または弱い推定値のことです。効果が小さくなったことを表しますが、その方向や全体的な結論まで変わったことを意味するわけではありません。
- sampling strategyサンプリング方法
The method used to select observations or participants for a study. Its limitations may affect how broadly the results apply.
研究対象となる観測データや参加者を選ぶ方法です。その限界によって、結果をどこまで広く当てはめられるかが左右されることがあります。
- candid about what they cannot resolve分析で解決できない点を率直に説明する
Open and clear about which questions the analyses do not answer. This phrase helps researchers describe evidence carefully without overstating what it proves.
分析では答えられない疑問を、隠さず明確に伝えるということです。この表現を使うと、証拠が示すことを慎重に説明し、証明できる範囲を誇張せずに済みます。
重要な文8
- 1
We can test that directly with a couple of alternative specifications.
別のモデル設定をいくつか試せば、そこを直接検証できるよ。
This sentence proposes a concrete way to address a concern. Reuse the structure “We can test that directly with…” to suggest a targeted check.
懸念に対処するための具体的な方法を提案する文です。「We can test that directly with…」(…を使って、そこを直接検証できます)という形を使うと、的を絞った確認方法を提案できます。
- 2
The effect is slightly smaller, but it’s still statistically significant and points in the same direction.
効果は少し小さくなったけど、統計的に有意なままだし、方向も同じだよ。
This gives a balanced summary: the result has changed somewhat, but its direction and statistical significance remain. Use this structure to report nuanced findings without overstating them.
結果が多少変わった一方で、方向と統計的有意性は保たれていることを、バランスよく伝える表現です。この形を使えば、結果を誇張せずに細かな違いを報告できます。
- 3
The estimate barely changes.
推定値はほとんど変わらなかった。
This is a concise way to say that a result is stable after an analysis is adjusted. You can replace “estimate” with another quantity that remains nearly the same.
分析方法を調整した後も結果が安定していることを、簡潔に伝える表現です。「estimate」を、ほぼ変わらない別の数値に置き換えて使うこともできます。
- 4
Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.
ただ、正確に言おう。こうした確認から、結果はそれらの選択に対して頑健だとは言えそうだけど、研究デザインによってあらゆるバイアスの可能性を排除できたと証明できるわけじゃない。
This sentence distinguishes supportive evidence from proof and clearly states a limitation. Use “suggest …; they don’t establish …” to make a careful, measured claim.
この文は、裏付けとなる証拠と証明を区別し、限界も明確にしています。「suggest …; they don’t establish …」という形を使うと、慎重でバランスの取れた主張ができます。
- 5
We should report the estimates and intervals, not just say they’re similar.
似ているとだけ書くんじゃなくて、推定値と区間を報告しよう。
This emphasizes transparent reporting by asking for specific results rather than a vague summary. The pattern “We should report X, not just say Y” is useful when requesting evidence.
曖昧な要約ではなく、具体的な結果を示すよう求めることで、透明性のある報告を促しています。「We should report X, not just say Y」という形は、根拠を示すよう求めるときに便利です。
- 6
I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.
より広い比較群では推定値がやや小さくなることを認めたうえで、実質的な結論は変わらないと明確にするよ。
This explains how to present a smaller estimate while noting that the main interpretation remains the same. Reuse “acknowledge that…, then clarify that…” to organize a balanced response.
推定値が小さくなったことを示しながら、主な解釈は変わらないと伝える方法を説明しています。「acknowledge that…, then clarify that…」という形を使うと、バランスの取れた回答を組み立てられます。
- 7
One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy.
一点だけ注意ね。極端な値を除く確認は役に立つけど、サンプリング方法の限界について議論する代わりにはならないよ。
This separates what one analysis can show from a different issue that still needs attention. “One caveat” is a useful way to introduce a qualification in professional discussion.
1つの分析で分かることと、別途取り上げる必要のある問題を切り分ける文です。「One caveat」は、専門的な議論の中で補足や留保を加えるときに便利な表現です。
- 8
We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.
特定のモデル設定が結果を左右しているわけではないことを示す証拠として分析結果を提示しつつ、分析では解決できない点についても率直に説明しよう。
This sentence presents the analyses’ contribution and their limits in the same measured statement. Reuse “as evidence that…, while being candid about…” to communicate support without claiming too much.
分析が示すことと、その限界を同じ文の中でバランスよく伝えています。「as evidence that…, while being candid about…」という形を使えば、過度な主張を避けながら、分析が裏付ける内容を説明できます。