Bir gencin 56 saniyelik TikTok videosu nedeniyle binlerce bilimsel araştırma haftalarca veriyi çöpe atmak zorunda kaldı.
23 Temmuz videosu kısa ve basit. Film, Florida lisesinden yeni mezun olan ve kendini “genç yazar” olarak tanımlayan Sarah Frank’in yatak odasında oturup kameraya gülümsemesiyle başlıyor.
“Birinci bölüm denemenizi tavsiye ederim. videoda, kullanıcıları Prolific.co web sitesine yönlendiriyor. “Temel olarak, farklı miktarlarda para ve farklı miktarlarda zaman için bir grup anket.”
@sarahndom
Bu video, yayınlandıktan sonraki bir ayda 4,1 milyon kez izlendi ve on binlerce yeni kullanıcıyı akınına uğrattı Prolific platformuna. Davranışsal araştırmalar yürüten bilim adamları için bir araç olan Prolific, her çalışmaya temsili nüfus örnekleri sağladığından emin olmak için hiçbir tarama aracına sahip değildi. Birdenbire, üretken çalışmaları için çok çeşitli denekler elde etmeye alışan bilim insanları, anketlerinin Frank’in yaşlarındaki genç kadınlardan gelen yanıtlarla dolup taştığını gördü.
ABD nüfusunu temsil eden örneklemlere dayanan araştırmacılar için, bu demografik değişim belirgin bir nedeni olmayan ve hemen çözülecek net bir yolu olmayan büyük bir sorundu.
İnternette bilim yapmak
Özellikle iyi bilinmemekle birlikte, Prolific küçük bir çevrimiçi koleksiyonun parçasıdır. şirketlerin ve bilim adamlarının insanların düşünme ve hareket etme biçimlerini inceleme biçimini değiştiren araçlar.
Yayınlandıktan kısa bir süre sonra, davranış bilimciler araştırmaları için potansiyel değerini fark ettiler ve birçok araştırma alanında hızla devrim yarattı.
“Mekanik Türk var olmadan önce, tüm sosyal bilim araştırmalarının laboratuvarda yapılması gerekiyordu. Stanford School of Business’taki Davranış Laboratuvarı müdürü Nicholas Hall, “Üniversite ikinci sınıf öğrencilerini getirmeniz ve onları anketler ve anketlerle doldurmanız gerekir” dedi.
“Çevrimiçi araştırma bunu çok daha kolay hale getiriyor. Bir anket programlıyorsunuz… bunu çevrimiçi hale getiriyorsunuz ve bir gün içinde 1.000 yanıt alıyorsunuz.”
“Bu, zaman ve emek gerektiren muazzam bir çaba. Çevrimiçi araştırma, bunu çok daha kolay hale getirir. Bir anket programlıyorsunuz… bunu çevrimiçi hale getiriyorsunuz ve bir gün içinde 1000 yanıtınız var, ”dedi Hall The Verge’e. Hall, “Bu, sosyal bilimin çehresini değiştirdi.”
Stanford’daki Davranış Laboratuvarı, bugünlerde çevrimiçi çalışmalar için çoğunlukla daha yeni, daha küçük Prolific platformunu kullanıyor, dedi. Çoğu Mechanical Turk müşterisi kurumsal araştırma yapan büyük işletmeler olsa da, Prolific ürünlerini bilim insanlarına sunuyor.
Daha küçük platform daha fazla şeffaflık sunuyor, anket katılımcılarına daha etik davranmayı vaat ediyor ve alternatiflerden daha yüksek kaliteli araştırma konuları vaat ediyor. Mechanical Turk gibi platformlar.
Platformun demografisindeki ani değişiklik, bu itibarı alt üst etmekle tehdit etti.
TikTok’un ardından
Frank’in videosunu yayınlamasından sonraki günler ve haftalar içinde araştırmacılar, kullanıcılarına ne olduğunu anlamaya çalıştılar. çalışmalar.
N=300 Verimli çalışma analiz ediliyor. Çok genel bir başlık ve açıklama. Anket soruları çoğunlukla sosyal karşılaştırmalar ve parayla ilgili
Katılımcıların %91’i kadın, %7’si erkek. Hiçbir şeyi yanlış kodladığımı düşünmeyin ve olağandışı anket kısıtlamaları olmasın.
Bu nasıl olur?
— Sebastian Deri (@SebastianDeri) 6 Ağustos 2021
Stanford Davranış Laboratuvarı’nın bir üyesi, Üretken bir forumda şunları yazdı: “ABD Havuzu’ndaki platformdaki katılımcı sayısında 40 binden 80 bine kadar büyük bir sıçrama olduğunu fark ettik. Ancak bu harika, ancak şimdi birçok çalışmamızda katılımcıların %85’inin kadın olduğu bir cinsiyet çarpıklığı var. Ayrıca yaş ortalaması 21 civarında.”
Wayne State psikoloğu Hannah Schechter, vakayı çözen ilk kişi gibi görünüyor.
“Bu çok zor olabilir,” Frank’in videosuna bağlantı vererek tweet attı, “ancak videonun zamanlaması, viralliği ve kullanıcının takipçi demografisi göz önüne alındığında…”
Uzun süredir üretken anket katılımcıları, Frank’in Reddit’te yaptığından şikayet etti. taşma platformuna katılmak için ücretli anketler bulmak zor.
Daha önce haftada 30 ABD doları kazandıklarını söyleyen bir kullanıcı, “Artık saatler harcayıp para kazanmak için başka bir saçmalık sitesi” diye yazdı. platform.
“Artık saatler harcayıp para kazanmak için başka bir saçmalık sitesi.”
Videodan önce Prolific’te anketlere katılarak toplam 80 ABD doları kazandığını “tahmin eden” Frank, The Verge’e platformda da bir fark gördüğünü söyledi.
“Daha az çalışma var benim ve diğer herkes için, ”dedi The Verge.
“Ayrıca, videomu izledikten sonra kaydolan birçok kişinin bunu unutacağını ve bu artışın duracağını tahmin ediyorum,” dedi.
Üretken kurucu ortak. ve CTO Phelim Bradley The Verge’e yeni kullanıcıların çoğunun bırakıyor gibi göründüğünü söyledi.
“Tiktok’tan önce, platformumuzdaki yanıtların yaklaşık %50’si kadınlardan geliyordu” diye yazdı. e-posta. “Bu artış birkaç gün içinde bunu %75’e kadar çıkardı, ancak o zamandan beri bu sayı düşüş eğilimi gösteriyor ve şu anda yanıtların yaklaşık %60’ını kadınlardan alıyoruz.”
Zaman içinde kadın kullanıcılardaki artışı gösteren bir grafik. Prolific’in İzniyle
Bradley’e göre, Frank’in TikTok’u tarafından yaklaşık 4.600 çalışma kesintiye uğradı, bu artış sırasında platformda aktif olan toplamın yaklaşık üçte biri. Bunların büyük çoğunluğunun kurtarılabilir olması gerektiğini söyledi.
Prolific, araştırmaları kadın ankete katılanların sayısındaki artıştan önemli ölçüde etkilenen araştırmacılara geri ödeme yaptı ve yeni bir demografik tarama araçları paketi tanıttı.
Şirket şimdi yeniden organize oldu ve gelecekte bu tür bir sorunu daha hızlı tanımak ve yanıtlamak için demografik dengelemeden sorumlu bir ekip görevlendirdi.
“Dürüst olmak gerekirse, biraz şaşırdık, ve etkinin ne kadar büyük olacağını tahmin etmemiştik,” dedi Bradley.
“TikTok’u seven genç kadınlar da insan.”
Bu artış o kadar da kötü değil. Dalgalanma vurduğunda Prolific üzerine birkaç pilot çalışma yürüten Yale lisansüstü psikoloji öğrencisi Vlad Chituk, ankete katılanların havuzunu yenilemenin muhtemelen uzun vadeli faydaları olduğunu söylüyor. Denekler çok sayıda psikolojik anket yaptığında, bilim adamlarının veri toplamak için kullandıkları hileleri öğrenirler ve bu, gelecekteki anket sorularına yanıt verme biçimlerini etkileyebilir. Yeni denekler daha yüksek kaliteli veriler sağlıyor.
“TikTok’tan hoşlanan genç kadınlar da insan” dedi.
Frank’a gelince, onun yan koşuşturma videosunun artık en iyi video olduğunu söylüyor. şimdiye kadar yayınladığı en popüler TikTok.
“Videonun patlayacağı kesinlikle aklıma gelmemişti. Sadece arkadaşlarım ve takipçilerim için yayınladım, ulaştığı erişim için değil” dedi. “Bence site gerçekten çok havalı olduğu için havaya uçtu ve insanlar para kazanmanın verimli yollarını seviyor.”
Frank şimdilik kendi yan işlerinin çoğunu kendi işine alışırken duraklattı. Brown’da birinci yıl.
.