A Harsh Comment on the Methods
方法に対する厳しい指摘
The team examines a reviewer’s claim that their sampling strategy is fundamentally flawed. They discuss whether the criticism reflects a genuine limitation or a misunderstanding of the study design.
査読者が、研究チームのサンプリング戦略には根本的な欠陥があると指摘しています。チームは、その批判が実際の限界を示しているのか、それとも研究デザインへの誤解なのかを検討します。
会話12

The reviewer says our sampling strategy is fundamentally flawed because we recruited participants through community organizations. I’m not convinced that conclusion follows from the design.
査読者は、地域団体を通じて参加者を募集したため、私たちのサンプリング戦略には根本的な欠陥があると言ってる。けど、その結論が研究デザインから導かれるとは思えないんだよね。
They seem to be treating our sample as if we intended it to represent the entire population. We were studying how the intervention worked in specific community settings, not estimating a national prevalence rate.
査読者は、私たちのサンプルがあたかも全人口を代表することを意図していたかのように扱っているみたいだね。私たちが調べていたのは、特定の地域の現場で介入がどう機能したかであって、全国の有病率を推定することじゃなかった。
That distinction matters, but let’s not dismiss the concern too quickly. Recruitment through organizations could still have excluded people who are less connected or less willing to participate.
その違いは大事だけど、懸念をすぐに退けるのはやめよう。団体を通じた募集では、地域とのつながりが薄い人や参加に消極的な人が除外された可能性もある。
Agreed. We should check whether the reviewer is identifying a real coverage limitation or simply applying a standard of representativeness that our study never claimed to meet.
そうだね。査読者が実際の対象範囲の限界を指摘しているのか、それとも私たちの研究が満たすと主張したことのない代表性の基準を当てはめているだけなのか、確認したほうがいいね。
Our methods section does say we used purposive sampling, but perhaps we didn’t explain why those sites were selected or how recruitment proceeded within each one.
方法のセクションには目的抽出法を使ったと書いてあるけど、なぜその調査地を選んだのか、それぞれの場所でどう募集したのかは、説明が足りなかったのかもしれない。
Let’s examine the records before we revise anything. Do we have figures for people approached, those who declined, and the characteristics we could compare across participants?
何か修正する前に、記録を確認しよう。声をかけた人数、断った人の数、それに参加者間で比較できる属性のデータはある?
We have the recruitment logs, but not a complete profile of people who declined. That means we can describe the process more transparently, while acknowledging that nonresponse bias can’t be ruled out.
募集記録はあるけど、参加を断った人たちの詳しい情報はそろってない。だから、募集の過程はより透明に説明できるけど、無回答バイアスを否定できないことも認める必要があるね。
We can also clarify that the findings are analytically transferable to similar settings, not statistically generalizable to every community. The reviewer may be reacting to language that sounds broader than we intended.
調査結果は、似たような現場に分析的に応用できる一方で、すべての地域に統計的に一般化できるわけではない、と明確にすることもできるね。査読者は、私たちの意図より広い主張に聞こえる表現に反応しているのかもしれない。
That’s plausible. Let’s locate every claim about generalizability and see whether the wording overreaches. If it does, we should narrow it rather than defend language we can’t support.
その可能性はあるね。一般化についての主張を全部確認して、表現が言い過ぎになっていないか見てみよう。もしそうなら、裏付けられない表現を擁護するより、範囲を狭めたほうがいい。
And if the reviewer has misunderstood our objective, we can explain the distinction respectfully, then concede the limits of organizational recruitment. We don’t need to frame those points as mutually exclusive.
それに、査読者が私たちの目的を誤解しているなら、その違いを丁寧に説明したうえで、団体を通じた募集の限界も認めればいいよ。両方を同時に言えないこととして扱う必要はない。
Right. We should avoid saying the sample was representative unless the evidence supports that. A more precise account of whom we reached—and whom we may have missed—would strengthen the response.
そうだね。証拠がない限り、サンプルが代表的だったとは言わないほうがいい。誰に接触できて、誰を取りこぼした可能性があるのかをより正確に説明すれば、回答の説得力も増すよ。
Then let’s revise the methods and limitations sections first, and draft our response only after we’ve checked the recruitment records. A measured explanation will serve us better than a defensive rebuttal.
じゃあ、まず方法と限界のセクションを修正して、募集記録を確認してから回答を作ろう。防御的に反論するより、冷静でバランスの取れた説明のほうが効果的だよ。
語彙8
- fundamentally flawed根本的な欠陥がある
Having a basic problem that seriously undermines the approach. Here, the reviewer claims the recruitment strategy makes the study unreliable.
基本的な問題があり、その手法の信頼性を大きく損なうことです。ここでは、募集方法のせいで研究の信頼性が失われていると、査読者が主張しています。
- purposive sampling目的抽出法
A method of selecting participants because they have characteristics relevant to the study. It does not aim to represent the whole population statistically.
研究に関係する特徴を持つ人を選んで参加者とする方法です。統計的に全人口を代表することを目指すものではありません。
- coverage limitation対象範囲の限界
A weakness arising because some parts of the population may not have been reached. Here, people less connected to community organizations may have been left out.
人口の一部に接触できなかった可能性から生じる弱点です。ここでは、地域団体とのつながりが薄い人が対象から漏れた可能性があります。
- nonresponse bias無回答バイアス
A possible distortion in results when people who decline to participate differ in important ways from those who take part.
参加を断った人たちが参加者と重要な点で異なる場合に、結果が偏る可能性のことです。
- analytically transferable分析的に応用できる
Applicable as a useful insight to similar settings through careful comparison, rather than proven to apply statistically to everyone.
統計的にすべての人に当てはまると証明されたわけではありませんが、慎重に比較することで、似たような現場で役立つ知見として応用できるという意味です。
- statistically generalizable統計的に一般化できる
Supported by a study design that allows findings to be extended to a larger population using statistical reasoning.
研究デザインと統計的な推論によって、調査結果をより大きな集団にも当てはめられるという意味です。
- overreaches言い過ぎている
Goes beyond what the available evidence can support. Here, a claim about how widely the findings apply may be too broad.
得られた証拠で裏付けられる範囲を超えているという意味です。ここでは、調査結果がどこまで当てはまるかについての主張が、広すぎる可能性があります。
- mutually exclusive両立しない
Unable to both be true or apply at the same time. The speakers say they can explain a misunderstanding while also acknowledging a real limitation.
二つのことが同時に正しかったり、当てはまったりすることはできないという意味です。話し手たちは、誤解を説明することと、実際の限界を認めることは両立すると考えています。
重要な文8
- 1
I’m not convinced that conclusion follows from the design.
その結論が研究デザインから導かれるとは思えないんだよね。
Use this to respectfully question whether someone’s conclusion is justified by the evidence or approach. Replace “that conclusion” and “the design” with the specific claim and basis you are discussing.
相手の結論が、証拠や手法によって正当化されるのかを丁寧に問い直す表現です。「that conclusion」と「the design」を、話題にしている具体的な主張や根拠に置き換えて使えます。
- 2
That distinction matters, but let’s not dismiss the concern too quickly.
その違いは大事だけど、懸念をすぐに退けるのはやめよう。
This balances a relevant clarification with openness to criticism. It is useful when you want to defend a position without sounding dismissive.
大切な説明をしつつ、批判にも耳を傾ける姿勢を示す表現です。自分の立場を守りながら、相手の意見を軽視しているように聞こえないようにしたいときに役立ちます。
- 3
We should check whether the reviewer is identifying a real coverage limitation or simply applying a standard of representativeness that our study never claimed to meet.
査読者が実際の対象範囲の限界を指摘しているのか、それとも私たちの研究が満たすと主張したことのない代表性の基準を当てはめているだけなのか、確認したほうがいいね。
This frames two possible interpretations of a criticism and proposes checking which one fits. You can reuse the structure to distinguish a genuine problem from a mismatched expectation.
批判について考えられる二つの解釈を示し、どちらが当てはまるか確認しようとする表現です。実際の問題と、期待されている基準との食い違いを区別したいときに、この形を応用できます。
- 4
That means we can describe the process more transparently, while acknowledging that nonresponse bias can’t be ruled out.
つまり、無回答バイアスを否定できないことを認めつつ、募集の過程をより透明に説明できるね。
Use this to explain what the available evidence does and does not allow you to claim. The phrase “can’t be ruled out” acknowledges uncertainty without asserting that a problem definitely occurred.
手元の証拠から何を主張できて、何を主張できないのかを説明するときに使えます。「can’t be ruled out」は、問題が確実に起きたと言い切らずに、不確実性を認める表現です。
- 5
We can also clarify that the findings are analytically transferable to similar settings, not statistically generalizable to every community.
調査結果は、似たような現場には分析的に応用できる一方で、すべての地域に統計的に一般化できるわけではない、と明確にすることもできるね。
This sentence distinguishes insights that may apply through comparison from findings that can be statistically extended to a whole population. It is useful for stating the scope of research findings precisely.
比較を通じて応用できる知見と、統計的に全人口へ広げられる結果との違いを示す文です。研究結果がどこまで当てはまるのか、正確に述べたいときに役立ちます。
- 6
If it does, we should narrow it rather than defend language we can’t support.
もし言い過ぎになっているなら、裏付けられない表現を擁護するより、主張の範囲を狭めたほうがいい。
Use this to recommend revising an overbroad claim instead of trying to justify it. “If it does” refers to whether the wording overreaches.
広すぎる主張を正当化しようとするのではなく、修正することを提案する表現です。「If it does」は、表現が言い過ぎになっているかどうかを指しています。
- 7
We don’t need to frame those points as mutually exclusive.
その二つの点を、両立しないものとして扱う必要はないよ。
This is a concise way to say that two explanations or positions can both be valid. It helps keep a discussion nuanced rather than forcing a false choice.
二つの説明や立場がどちらも成り立つ可能性があると、簡潔に伝える表現です。無理にどちらか一方を選ぶのではなく、議論に含みを持たせたいときに役立ちます。
- 8
A measured explanation will serve us better than a defensive rebuttal.
防御的に反論するより、冷静でバランスの取れた説明のほうが効果的だよ。
Use this to advocate for a calm, proportionate response to criticism. “Will serve us better” means it is likely to be more effective.
批判に対して、落ち着いて釣り合いの取れた返答をするよう提案する表現です。「will serve us better」は、そのほうがより効果的だろうという意味です。