Running Extra Analyses
اجرای تحلیلهای تکمیلی
To address concerns about robustness, the team runs sensitivity analyses and checks whether the main findings hold under alternative specifications. The results help them strengthen the manuscript and support a measured response.
برای پاسخگویی به نگرانیها دربارهٔ استحکام نتایج، گروه تحلیلهای حساسیت انجام میدهد و بررسی میکند که آیا یافتههای اصلی با مشخصات جایگزین هم پابرجا میمانند یا نه. نتایج به آنها کمک میکند دستنوشته را تقویت کنند و پاسخی سنجیده ارائه دهند.
گفتوگو11

The reviewer’s main concern is that our findings may depend on how we defined the comparison group. We can test that directly with a couple of alternative specifications.
نگرانی اصلی داور این است که یافتههای ما به نحوهٔ تعریف گروه مقایسه بستگی داشته باشند. میتوانیم این موضوع را مستقیماً با چند مشخصات جایگزین بررسی کنیم.
I’ve rerun the model using the broader comparison group we discussed. The effect is slightly smaller, but it’s still statistically significant and points in the same direction.
مدل را با استفاده از گروه مقایسهٔ گستردهتری که دربارهاش صحبت کردیم دوباره اجرا کردم. اندازهٔ اثر کمی کوچکتر است، اما هنوز از نظر آماری معنادار است و در همان جهت قرار دارد.
That’s reassuring. What happens if we exclude the observations with the most extreme values? The reviewer seemed especially concerned that a few cases might be driving the result.
این اطمینانبخش است. اگر مشاهدات دارای مقادیر بسیار افراطی را حذف کنیم، چه اتفاقی میافتد؟ به نظر میرسید داور بهویژه نگران این باشد که چند مورد خاص نتیجه را تعیین کرده باشند.
I tried that too. The estimate barely changes. I also checked the model with robust standard errors, and the confidence interval remains comfortably away from zero.
آن را هم بررسی کردم. برآورد تقریباً تغییری نمیکند. مدل را با خطاهای استاندارد مقاوم هم بررسی کردم و فاصلهٔ اطمینان همچنان با فاصلهای مطمئن از صفر قرار دارد.
Good. Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.
خوب است. بااینحال، بیایید دقیق باشیم: این بررسیها نشان میدهند که نتیجه در برابر این انتخابها مقاوم است؛ اما ثابت نمیکنند که طرح پژوهش ما همهٔ منابع احتمالی سوگیری را رد میکند.
Would it help to add a table with all three specifications? That way, readers can compare the estimates instead of having to take our word for it.
به نظرت خوب است جدولی با هر سه مشخصات اضافه کنیم؟ اینطوری خوانندگان میتوانند برآوردها را با هم مقایسه کنند و لازم نیست صرفاً حرف ما را قبول کنند.
Yes. I can put the alternative models in a supplementary table and summarize the pattern in the main text. We should report the estimates and intervals, not just say they’re similar.
بله. میتوانم مدلهای جایگزین را در یک جدول پیوست بیاورم و الگوی کلی را در متن اصلی خلاصه کنم. باید برآوردها و بازهها را گزارش کنیم، نه اینکه فقط بگوییم شبیه هم هستند.
Agreed. We should also explain why these alternatives address the reviewer’s concern, especially how changing the comparison group tests the sensitivity of our conclusions.
موافقم. همچنین باید توضیح بدهیم چرا این گزینههای جایگزین به نگرانی داور پاسخ میدهند؛ بهخصوص اینکه تغییر گروه مقایسه چطور حساسیت نتیجهگیریهای ما را میسنجد.
I’ll draft that paragraph. I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.
من آن بند را مینویسم. اشاره میکنم که گروه گستردهتر برآوردی تاحدی تضعیفشده به دست میدهد، و بعد روشن میکنم که نتیجهگیری ماهوی تغییری نکرده است.
One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy. We should keep those issues separate.
یک نکته را هم باید در نظر داشت: بررسی مقادیر افراطی مفید است، اما جای بحث دربارهٔ محدودیتهای راهبرد نمونهگیری ما را نمیگیرد. باید این دو مسئله را جداگانه مطرح کنیم.
Exactly. We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.
دقیقاً. تحلیلها را بهعنوان شواهدی ارائه میکنیم که نشان میدهند یافته تحت تأثیر آن انتخابهای مشخص مدلسازی نیست، و درعینحال صادقانه میگوییم چه چیزهایی را نمیتوانند حلوفصل کنند.
واژگان8
- alternative specificationsمشخصات جایگزین
Different ways of setting up or defining a model. Here, the team uses them to see whether its findings depend on particular analytical choices.
روشهای متفاوت برای تنظیم یا تعریف یک مدل. در اینجا، گروه از این روشها استفاده میکند تا ببیند آیا یافتهها به انتخابهای تحلیلی خاصی وابستهاند یا نه.
- statistically significantاز نظر آماری معنادار
A result is statistically significant when the analysis suggests it is unlikely to be due to random variation alone. The phrase describes evidence in the data, not proof that a conclusion is true.
وقتی تحلیل نشان میدهد که بعید است نتیجه صرفاً ناشی از تغییرات تصادفی باشد، میگوییم از نظر آماری معنادار است. این عبارت دربارهٔ شواهد موجود در دادههاست، نه اثبات درستی یک نتیجهگیری.
- extreme valuesمقادیر افراطی
Observations that are unusually high or low compared with most of the data. Researchers may check whether these cases have an outsized influence on results.
مشاهداتی که در مقایسه با بیشتر دادهها بهشکلی غیرمعمول بالا یا پاییناند. پژوهشگران ممکن است بررسی کنند که آیا این موارد تأثیری نامتناسب بر نتایج دارند یا نه.
- robust standard errorsخطاهای استاندارد مقاوم
A method for calculating uncertainty that can work better when data do not meet certain model assumptions. Here, the team checks whether its confidence interval remains similar under this method.
روشی برای محاسبهٔ عدمقطعیت که وقتی دادهها با برخی از فرضهای مدل سازگار نیستند، میتواند عملکرد بهتری داشته باشد. در اینجا، گروه بررسی میکند که آیا فاصلهٔ اطمینان با این روش هم مشابه میماند یا نه.
- sensitivity of our conclusionsحساسیت نتیجهگیریهای ما
How much a conclusion might change when the researchers alter their assumptions or analytical choices. Testing sensitivity helps show whether findings depend on a particular specification.
اینکه نتیجهگیری تا چه اندازه ممکن است با تغییر فرضها یا انتخابهای تحلیلی پژوهشگران عوض شود. آزمودن حساسیت کمک میکند نشان دهیم یافتهها به یک مشخصات خاص وابسته هستند یا نه.
- attenuated estimateبرآورد تضعیفشده
An estimate that is smaller or weaker than another estimate. It can describe a reduced effect without implying that the direction or overall conclusion has changed.
برآوردی که از برآورد دیگری کوچکتر یا ضعیفتر است. این عبارت میتواند به کاهش اندازهٔ اثر اشاره کند، بیآنکه لزوماً جهت اثر یا نتیجهگیری کلی تغییر کرده باشد.
- sampling strategyراهبرد نمونهگیری
The method used to select observations or participants for a study. Its limitations may affect how broadly the results apply.
روشی که برای انتخاب مشاهدات یا شرکتکنندگان در یک پژوهش به کار میرود. محدودیتهای آن ممکن است بر گسترهٔ تعمیمپذیری نتایج اثر بگذارد.
- candid about what they cannot resolveصادقانه گفتن دربارهٔ چیزهایی که نمیتوانند حلوفصل کنند
Open and clear about which questions the analyses do not answer. This phrase helps researchers describe evidence carefully without overstating what it proves.
روشن و صریح گفتن دربارهٔ پرسشهایی که تحلیلها به آنها پاسخ نمیدهند. این عبارت به پژوهشگران کمک میکند شواهد را با دقت توصیف کنند و در بیان آنچه ثابت میکند اغراق نکنند.
جملات کلیدی8
- 1
We can test that directly with a couple of alternative specifications.
میتوانیم این موضوع را مستقیماً با چند مشخصات جایگزین بررسی کنیم.
This sentence proposes a concrete way to address a concern. Reuse the structure “We can test that directly with…” to suggest a targeted check.
این جمله راهی مشخص برای رسیدگی به یک نگرانی پیشنهاد میکند. از ساختار “We can test that directly with…” برای پیشنهاد یک بررسی هدفمند استفاده کن.
- 2
The effect is slightly smaller, but it’s still statistically significant and points in the same direction.
اندازهٔ اثر کمی کوچکتر است، اما هنوز از نظر آماری معنادار است و در همان جهت قرار دارد.
This gives a balanced summary: the result has changed somewhat, but its direction and statistical significance remain. Use this structure to report nuanced findings without overstating them.
این جمله خلاصهای متعادل ارائه میدهد: نتیجه تا حدی تغییر کرده، اما جهت و معناداری آماری آن همچنان حفظ شده است. از این ساختار برای گزارش یافتههای ظریف و چندوجهی، بدون اغراق، استفاده کن.
- 3
The estimate barely changes.
برآورد تقریباً تغییری نمیکند.
This is a concise way to say that a result is stable after an analysis is adjusted. You can replace “estimate” with another quantity that remains nearly the same.
این راهی موجز برای گفتن این است که نتیجه پس از تعدیل تحلیل پایدار مانده است. میتوانی “estimate” را با کمیت دیگری جایگزین کنی که تقریباً ثابت میماند.
- 4
Let’s be precise, though: these checks suggest the result is robust to those choices; they don’t establish that our design rules out every possible source of bias.
بااینحال، بیایید دقیق باشیم: این بررسیها نشان میدهند که نتیجه در برابر این انتخابها مقاوم است؛ اما ثابت نمیکنند که طرح پژوهش ما همهٔ منابع احتمالی سوگیری را رد میکند.
This sentence distinguishes supportive evidence from proof and clearly states a limitation. Use “suggest …; they don’t establish …” to make a careful, measured claim.
این جمله شواهد پشتیبان را از اثبات جدا میکند و محدودیتی را بهروشنی بیان میکند. برای طرح ادعایی محتاطانه و سنجیده از الگوی “suggest …; they don’t establish …” استفاده کن.
- 5
We should report the estimates and intervals, not just say they’re similar.
باید برآوردها و بازهها را گزارش کنیم، نه اینکه فقط بگوییم شبیه هم هستند.
This emphasizes transparent reporting by asking for specific results rather than a vague summary. The pattern “We should report X, not just say Y” is useful when requesting evidence.
این جمله بر گزارشدهی شفاف تأکید میکند و بهجای خلاصهای مبهم، نتایج مشخص را میخواهد. وقتی شواهدی را درخواست میکنی، الگوی “We should report X, not just say Y” به کار میآید.
- 6
I’ll acknowledge that the broader group produces a somewhat attenuated estimate, then clarify that the substantive conclusion is unchanged.
اشاره میکنم که گروه گستردهتر برآوردی تاحدی تضعیفشده به دست میدهد، و بعد روشن میکنم که نتیجهگیری ماهوی تغییری نکرده است.
This explains how to present a smaller estimate while noting that the main interpretation remains the same. Reuse “acknowledge that…, then clarify that…” to organize a balanced response.
این جمله توضیح میدهد چطور میتوان برآوردی کوچکتر را مطرح کرد و درعینحال گفت که تفسیر اصلی همچنان همان است. از ساختار “acknowledge that…, then clarify that…” برای مرتبکردن پاسخی متعادل استفاده کن.
- 7
One caveat: the extreme-value check is useful, but it isn’t a substitute for discussing the limitations of our sampling strategy.
یک نکته را هم باید در نظر داشت: بررسی مقادیر افراطی مفید است، اما جای بحث دربارهٔ محدودیتهای راهبرد نمونهگیری ما را نمیگیرد.
This separates what one analysis can show from a different issue that still needs attention. “One caveat” is a useful way to introduce a qualification in professional discussion.
این جمله مشخص میکند یک تحلیل چه چیزی را نشان میدهد و چه مسئلهٔ دیگری هنوز نیاز به توجه دارد. عبارت “One caveat” راه خوبی برای مطرحکردن یک ملاحظه در بحثهای حرفهای است.
- 8
We’ll present the analyses as evidence that the finding isn’t driven by those specific modeling choices, while being candid about what they cannot resolve.
تحلیلها را بهعنوان شواهدی ارائه میکنیم که نشان میدهند یافته تحت تأثیر آن انتخابهای مشخص مدلسازی نیست، و درعینحال صادقانه میگوییم چه چیزهایی را نمیتوانند حلوفصل کنند.
This sentence presents the analyses’ contribution and their limits in the same measured statement. Reuse “as evidence that…, while being candid about…” to communicate support without claiming too much.
این جمله دستاورد تحلیلها و محدودیتهایشان را در یک بیان سنجیده کنار هم میآورد. از ساختار “as evidence that…, while being candid about…” برای بیان حمایت شواهد، بدون ادعای بیش از حد، استفاده کن.