Running Extra Analyses

추가 분석 실행하기

To address concerns about robustness, the team runs sensitivity analyses and checks whether the main findings hold under alternative specifications. The results help them strengthen the manuscript and support a measured response.

강건성에 대한 우려를 해소하기 위해 팀은 민감도 분석을 실시하고, 다른 모형 설정에서도 주요 연구 결과가 유지되는지 확인해요. 그 결과를 바탕으로 원고를 보완하고 신중한 답변을 준비해요.

대화11

Running Extra Analyses
Mia
Mia

The reviewer’s main concern is that our findings may depend on how we defined the comparison group. We can test that directly with a couple of alternative specifications.

심사자의 가장 큰 우려는 비교 집단을 어떻게 정의했는지에 따라 우리 연구 결과가 달라질 수 있다는 거야. 몇 가지 다른 모형 설정으로 직접 확인해 볼 수 있어.

Jack
Jack

I’ve rerun the model using the broader comparison group we discussed. The effect is slightly smaller, but it’s still statistically significant and points in the same direction.

얘기했던 더 넓은 비교 집단을 사용해서 모형을 다시 돌려 봤어. 효과는 조금 작아졌지만, 여전히 통계적으로 유의하고 방향도 같아.

Emma
Emma

That’s reassuring. What happens if we exclude the observations with the most extreme values? The reviewer seemed especially concerned that a few cases might be driving the result.

그럼 안심이 되네. 가장 극단적인 값을 보이는 관측치를 제외하면 어떻게 돼? 심사자는 몇몇 사례가 결과를 좌우하는 건 아닌지 특히 우려하는 것 같았어.

Jack
Jack

I tried that too. The estimate barely changes. I also checked the model with robust standard errors, and the confidence interval remains comfortably away from zero.

그것도 해 봤어. 추정치는 거의 달라지지 않아. 강건 표준오차를 사용한 모형도 확인했는데, 신뢰구간은 여전히 0에서 꽤 떨어져 있어.

Mia
Mia

Good. Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.

좋아. 그래도 정확하게 표현하자. 이런 점검 결과는 해당 선택을 달리해도 결과가 강건하다는 걸 시사하지만, 우리 연구 설계가 모든 잠재적 편향의 원인을 배제한다는 뜻은 아니야.

Emma
Emma

Would it help to add a table with all three specifications? That way, readers can compare the estimates instead of having to take our word for it.

세 가지 모형 설정을 모두 담은 표를 추가하면 좋을까? 그러면 독자들이 우리 말만 믿어야 하는 게 아니라 추정치를 직접 비교할 수 있을 거야.

Jack
Jack

Yes. I can put the alternative models in a supplementary table and summarize the pattern in the main text. We should report the estimates and intervals, not just say they’re similar.

좋아. 대안 모형들을 보충 표에 넣고, 주요 본문에서는 전반적인 양상을 요약할게. 추정치와 구간을 보고해야 해. 서로 비슷하다고만 해서는 안 돼.

Mia
Mia

Agreed. We should also explain why these alternatives address the reviewer’s concern, especially how changing the comparison group tests the sensitivity of our conclusions.

동의해. 이런 대안 분석이 왜 심사자의 우려를 해소하는지도 설명해야 해. 특히 비교 집단을 바꾸는 게 우리 결론의 민감도를 어떻게 확인하는지 말이야.

Emma
Emma

I’ll draft that paragraph. I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.

그 문단은 내가 초안을 쓸게. 더 넓은 집단을 사용하면 추정치가 다소 작아진다는 점을 인정하고, 실질적인 결론은 달라지지 않는다고 분명히 할게.

Jack
Jack

One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy. We should keep those issues separate.

한 가지 유의할 점이 있어. 극단값 점검은 유용하지만, 표본 추출 전략의 한계를 논의하는 걸 대신할 수는 없어. 두 문제는 구분해서 다뤄야 해.

Mia
Mia

Exactly. We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.

맞아. 분석 결과를 보면 특정 모형 선택 때문에 연구 결과가 나온 건 아니라는 점을 뒷받침할 수 있어. 동시에 분석으로 해결할 수 없는 부분도 솔직하게 밝혀야 해.

어휘8

  • alternative specifications대안 모형 설정

    Different ways of setting up or defining a model. Here, the team uses them to see whether its findings depend on particular analytical choices.

    모형을 구성하거나 정의하는 여러 가지 방법을 말해요. 여기서는 특정한 분석 선택에 따라 연구 결과가 달라지는지 확인하기 위해 여러 모형 설정을 사용해요.

  • statistically significant통계적으로 유의한

    A result is statistically significant when the analysis suggests it is unlikely to be due to random variation alone. The phrase describes evidence in the data, not proof that a conclusion is true.

    분석 결과가 우연한 변동만으로 나타났을 가능성이 낮을 때 통계적으로 유의하다고 해요. 이 표현은 데이터가 뒷받침하는 정도를 설명하는 것이지, 결론이 참이라는 증거를 확정하는 건 아니에요.

  • extreme values극단값

    Observations that are unusually high or low compared with most of the data. Researchers may check whether these cases have an outsized influence on results.

    대부분의 데이터와 비교했을 때 유난히 높거나 낮은 관측값이에요. 연구자들은 이런 사례가 결과에 지나치게 큰 영향을 미치는지 확인할 수 있어요.

  • robust standard errors강건 표준오차

    A method for calculating uncertainty that can work better when data do not meet certain model assumptions. Here, the team checks whether its confidence interval remains similar under this method.

    데이터가 특정 모형 가정을 충족하지 않을 때 불확실성을 더 잘 계산할 수 있는 방법이에요. 여기서 팀은 이 방법을 적용해도 신뢰구간이 비슷하게 유지되는지 확인해요.

  • sensitivity of our conclusions우리 결론의 민감도

    How much a conclusion might change when the researchers alter their assumptions or analytical choices. Testing sensitivity helps show whether findings depend on a particular specification.

    연구자들이 가정이나 분석 선택을 바꿨을 때 결론이 얼마나 달라질 수 있는지를 말해요. 민감도를 확인하면 연구 결과가 특정한 모형 설정에 좌우되는지 보여 줄 수 있어요.

  • attenuated estimate감소한 추정치

    An estimate that is smaller or weaker than another estimate. It can describe a reduced effect without implying that the direction or overall conclusion has changed.

    다른 추정치보다 작거나 약한 추정치를 말해요. 효과가 줄었다는 뜻으로 쓸 수 있지만, 효과의 방향이나 전반적인 결론이 달라졌다는 의미는 아니에요.

  • sampling strategy표본 추출 전략

    The method used to select observations or participants for a study. Its limitations may affect how broadly the results apply.

    연구에 포함할 관측치나 참여자를 선정하는 방법이에요. 이 방법에 한계가 있으면 연구 결과를 얼마나 넓게 적용할 수 있는지에 영향을 줄 수 있어요.

  • candid about what they cannot resolve분석으로 해결할 수 없는 점을 솔직하게 밝히다

    Open and clear about which questions the analyses do not answer. This phrase helps researchers describe evidence carefully without overstating what it proves.

    분석으로 답할 수 없는 질문이 무엇인지 숨김없이 분명하게 설명하는 거예요. 이 표현을 사용하면 연구자들이 증거가 입증하는 범위를 과장하지 않고 신중하게 설명할 수 있어요.

핵심 문장8

  1. 1

    We can test that directly with a couple of alternative specifications.

    몇 가지 대안 모형 설정으로 직접 확인해 볼 수 있어.

    This sentence proposes a concrete way to address a concern. Reuse the structure “We can test that directly with…” to suggest a targeted check.

    이 문장은 우려에 대응할 구체적인 방법을 제안해요. 특정한 점검 방법을 제안할 때 “We can test that directly with…”라는 문장 구조를 활용해 보세요.

  2. 2

    The effect is slightly smaller, but it’s still statistically significant and points in the same direction.

    효과는 조금 작아졌지만, 여전히 통계적으로 유의하고 방향도 같아.

    This gives a balanced summary: the result has changed somewhat, but its direction and statistical significance remain. Use this structure to report nuanced findings without overstating them.

    이 문장은 결과가 다소 달라졌지만 방향과 통계적 유의성은 유지된다는 점을 균형 있게 요약해요. 미묘한 차이가 있는 결과를 과장하지 않고 보고할 때 이 구조를 활용해 보세요.

  3. 3

    The estimate barely changes.

    추정치는 거의 달라지지 않아.

    This is a concise way to say that a result is stable after an analysis is adjusted. You can replace “estimate” with another quantity that remains nearly the same.

    분석을 조정한 뒤에도 결과가 안정적으로 유지된다는 점을 간결하게 말하는 표현이에요. 거의 달라지지 않은 다른 수치가 있다면 “estimate” 대신 그 수치를 넣어도 돼요.

  4. 4

    Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.

    그래도 정확하게 표현하자. 이런 점검 결과는 해당 선택을 달리해도 결과가 강건하다는 걸 시사하지만, 우리 연구 설계가 모든 잠재적 편향의 원인을 배제한다는 뜻은 아니야.

    This sentence distinguishes supportive evidence from proof and clearly states a limitation. Use “suggest …; they don’t establish …” to make a careful, measured claim.

    이 문장은 뒷받침하는 증거와 확정적인 증명을 구분하고, 한계도 분명히 밝혀요. 신중하고 절제된 주장을 할 때 “suggest …; they don’t establish …” 구조를 활용해 보세요.

  5. 5

    We should report the estimates and intervals, not just say they’re similar.

    추정치와 구간을 보고해야 해. 서로 비슷하다고만 해서는 안 돼.

    This emphasizes transparent reporting by asking for specific results rather than a vague summary. The pattern “We should report X, not just say Y” is useful when requesting evidence.

    이 문장은 모호하게 요약하는 대신 구체적인 결과를 제시하자고 하면서 투명한 보고를 강조해요. 근거를 요청할 때 “We should report X, not just say Y” 구조를 활용하면 좋아요.

  6. 6

    I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.

    더 넓은 집단을 사용하면 추정치가 다소 작아진다는 점을 인정하고, 실질적인 결론은 달라지지 않는다고 분명히 할게.

    This explains how to present a smaller estimate while noting that the main interpretation remains the same. Reuse “acknowledge that…, then clarify that…” to organize a balanced response.

    이 문장은 추정치가 작아졌다는 점을 밝히면서도 주요 해석은 여전히 같다고 설명하는 방법을 보여 줘요. 균형 잡힌 답변을 구성할 때 “acknowledge that…, then clarify that…” 구조를 활용해 보세요.

  7. 7

    One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy.

    한 가지 유의할 점이 있어. 극단값 점검은 유용하지만, 표본 추출 전략의 한계를 논의하는 걸 대신할 수는 없어.

    This separates what one analysis can show from a different issue that still needs attention. “One caveat” is a useful way to introduce a qualification in professional discussion.

    이 문장은 한 분석으로 확인할 수 있는 내용과 여전히 다뤄야 할 별개의 문제를 구분해요. 전문적인 논의에서 단서를 덧붙일 때 “One caveat”라고 말하면 유용해요.

  8. 8

    We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.

    분석 결과를 보면 특정 모형 선택 때문에 연구 결과가 나온 건 아니라는 점을 뒷받침할 수 있어. 동시에 분석으로 해결할 수 없는 부분도 솔직하게 밝혀야 해.

    This sentence presents the analyses’ contribution and their limits in the same measured statement. Reuse “as evidence that…, while being candid about…” to communicate support without claiming too much.

    이 문장은 분석이 기여하는 점과 그 한계를 절제된 표현으로 함께 제시해요. 뒷받침하는 근거를 전달하면서도 과장된 주장을 피하려면 “as evidence that…, while being candid about…” 구조를 활용해 보세요.

English Dialogue를 즐기고 계신가요?

Microsoft Store에서 간단히 평가해 주시면 다른 학습자들이 이 앱을 찾는 데 도움이 됩니다.