<div dir="ltr">Dear Lookit Researchers, <div><br></div><div>For any of you who haven&#39;t heard from me before, my name is Melissa Kline Struhl, the new director at Lookit. I&#39;m very happy to have met many of you on Slack so far, and looking forward to learning more about your research and experiences on Lookit!</div><div><br></div><div>I&#39;m writing with an announcement about study timing on Lookit, especially regarding studies with video stimuli. In particular, researchers should be aware that there may be an offset of 150-450 ms (0.15 to 0.45 seconds) between when the Lookit frame data <i>reports stimuli to start,</i> and when they <i>actually appear on the participant&#39;s browser</i>.  This was reported by a group of researchers who tested and reported the issue - my sincerest thanks to Michaela DeBolt, Lisa Oakes, Aaron Beckner, Christian Harms and Yi Lin. </div><div><br></div><div>Any online study platform will have some degree of both noise and lag that is dependent on factors outside of Lookit control, but this is a longer lag than we had been expecting. There is now documentation about this issue in the Lookit Documentation, and we will add to this page (<a href="https://lookit.readthedocs.io/en/develop/researchers-lag-issues.html" target="_blank">https://lookit.readthedocs.io/en/develop/researchers-lag-issues.html</a>) over time with any new information.<br></div><div><br></div><div>I know that many of you may have questions about whether this affects current studies or data you&#39;ve already collected on Lookit - how serious of an issue this may be depends on a number of factors, including your experiment design and how you code looking time data.</div><div><br></div><div>For questions about specific studies, I&#39;ll ask that you post in the #tech_support channel on Slack, and include a link to your study so that the rest of the Lookit community can learn from the answers.  If you&#39;re not on Slack or prefer to ask privately, you can also email me directly at <a href="mailto:mekline@mit.edu">mekline@mit.edu</a>.</div><div><br></div><div>This issue is most likely to affect studies that:</div><div><br>- Use very short video stimuli</div><div><br>- Primarily measure the total duration (or absolute timecourse) of looking time in some context, rather than differences in looking time between conditions.</div><div><br>- Rely on looking times measured during a short specific window of stimulus presentation, such as anticipatory looking studies</div><div><br>At this time, there has not been any additional testing on non-video experiment frames. However, if your study design depends on close timing, best practice (both now and if we are able to reduce these lag times) would be to make sure that the critical stimulus onset can be directly measured from your participant videos, e.g. by including a big change in luminance that can be seen on a child&#39;s face/in the room.<br></div><div><br></div><div>We will be watching this issue closely, so any information you can share about timing of stimuli on Lookit will be very gratefully received! We are unfortunately understaffed at the moment, but are planning to hire an engineer who will be focusing primarily on the experiment runner; this person will take a close look at the origin of this problem and any steps we may be able to take to address it.<br><br></div><div>Finally, I&#39;d like to extend my thanks again to the researchers who both discovered and extensively tested this lag across a variety of browsers and internet settings!<br></div><div><br></div><div>Thanks to all of you for your support of Lookit, and I look forward to hearing from you, </div><div><br></div><div>Best, </div><div><br></div><div>Melissa</div><div><br></div><div><div><br></div>-- <br><div dir="ltr" data-smartmail="gmail_signature"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr">Melissa Kline Struhl</div><div>Lookit Executive Director</div><div>Research Scientist, MIT Brain &amp; Cognitive Sciences</div><div><a href="mailto:mekline@mit.edu" target="_blank">mekline@mit.edu</a></div><div><a href="http://lookit.mit.edu" target="_blank">https://lookit.mit.edu/</a></div><div dir="ltr"><div><a href="http://www.melissakline.net" target="_blank">http://www.melissaklinestruhl.com/</a><br></div><div><br></div><div><br></div><div><br><br><div style="display:inline"></div></div></div></div></div></div></div></div></div></div>