<div dir="ltr">Hi all,<div>Thanks a lot for your responses.<div>Actually, I did not specify it before but I am using the <a href="http://rma.mv">rma.mv</a> function since I can have several estimates from several studies of the same lab  (random=~1|lab/study/estid). Following your recommendations, I checked whether the type of design had a significant effect on effect sizes and actually it didn't except for one specific type of intervention in which I do not have that much data:  3 papers for each design containing 7 and 4 effect sizes respectively.  In this case, meta-analysis of overall estimates is non-significant while when computing them separately, one is significant (control vs. treatment groups) while the other is not (pre- vs. post treatment).</div><div>I do think that would make sense to present the overall meta-analysis as well as the two designs separately ? In any case, we would need more data to conclude for sure.</div><div>Best,</div><div>Gladys</div>





<br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Le lun. 3 mai 2021 à 20:18, Viechtbauer, Wolfgang (SP) <<a href="mailto:wolfgang.viechtbauer@maastrichtuniversity.nl" target="_blank">wolfgang.viechtbauer@maastrichtuniversity.nl</a>> a écrit :<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Agree, but I also want to point to this:<br>
<br>
<a href="https://www.metafor-project.org/doku.php/tips:computing_adjusted_effects" rel="noreferrer" target="_blank">https://www.metafor-project.org/doku.php/tips:computing_adjusted_effects</a><br>
<br>
It discusses the concept of computing adjusted effects, which may be what you are looking for, Gladys. However, as noted at the end, some may question the usefulness and interpretability of such an estimate.<br>
<br>
Best,<br>
Wolfgang<br>
<br>
>-----Original Message-----<br>
>From: R-sig-meta-analysis [mailto:<a href="mailto:r-sig-meta-analysis-bounces@r-project.org" target="_blank">r-sig-meta-analysis-bounces@r-project.org</a>] On<br>
>Behalf Of Dr. Gerta Rücker<br>
>Sent: Monday, 03 May, 2021 20:09<br>
>To: Gladys Barragan-Jason<br>
>Cc: R meta<br>
>Subject: Re: [R-meta] Compiling different design in the same met-analysis<br>
><br>
>Hi Gladys,<br>
><br>
>You may pool all effects in a meta-analysis, using "design" as a<br>
>moderator. In meta-analysis, this is called a subgroup analysis (for<br>
>example by Cochrane). You then get both within-subgroup effects and a<br>
>pooled effect, and also a test of treatment--design interaction, that<br>
>says whether the treatment effect is different between designs. Thus you<br>
>have all what you are interested in. However, in your interpretation you<br>
>have to account for the different character of the studies: In a<br>
>two-group parallel design, if it is randomized (you did not mention<br>
>whether it is), you can expect an unbiased estimate of the treatment<br>
>effect. In a pre-post design, you must expect all kinds of biases (to<br>
>mention only regression to the mean) and also, as Michael said,<br>
>different variation. Therefore you have to interpret results with caution.<br>
><br>
>Best, Gerta<br>
><br>
>Am 03.05.2021 um 19:42 schrieb Gladys Barragan-Jason:<br>
>> Hi Gerta and Michael,<br>
>> I am not sure to understand. I am not saying the the effect size are<br>
>> different. They are comparable but of course differ in term of ci<br>
>> since the number of studies, participants are different. I would like<br>
>> to know whether we can make obtain an overall effect size while<br>
>> controlling for design. So maybe the answer is no.<br>
>> Thanks<br>
>> Gladys<br>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><p class="MsoNormal"><span style="font-size:12pt;font-family:Cambria,serif;color:black">------------------------------------------</span></p><p class="MsoNormal"><span style="font-size:12pt;font-family:Cambria,serif;color:black">Gladys Barragan-Jason, PhD. <u></u><u></u></span><a href="https://sites.google.com/view/gladysbarraganjason/home" style="font-family:Tahoma,sans-serif" target="_blank"> Website</a></p>
<p class="MsoNormal"><span style="font-size:12pt;font-family:Cambria,serif;color:black">Station d'Ecologie Théorique et Expérimentale (SETE)<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:12pt;font-family:Cambria,serif;color:black">CNRS de Moulis<u></u><u></u></span></p>
<div>
<p class="MsoNormal"><span style="color:black"><img border="0" width="133" height="81" style="width:1.3854in;height:0.8437in" src="cid:image003.png@01D62ED8.BF1FBC30" alt="image.png"><img border="0" width="60" height="60" style="width:0.625in;height:0.625in" src="cid:image004.png@01D62ED8.BF1FBC30" alt="image.png"><u></u><u></u></span></p>
</div>
<br>
<br>
<p class="MsoNormal"><span lang="EN-GB" style="font-family:Tahoma,sans-serif"> </span></p></div></div></div></div></div></div>