Growth/Analytics updates/Welcome survey initial report/tr

Büyüme ekibinin "Kişiselleştirilmiş ilk gün" projesi kapsamında 19 Kasım 2018'de Çekçe ve Korece Vikipedi'lere Karşılama Anketi'ni 19:00 UTC saatinde konuşlandırdık. Anketin amacı, vikideki ilk günlerini kişiselleştirebilmemiz ve hedeflerine ulaşmalarına yardımcı olabilmemiz için yeni kullanıcılar hakkında bazı ilk bilgileri toplamaktır. Konuşlandırmadan önce neyi ve neden ölçeceğimizi ayrıntılarıyla açıklayan bir deneme planı yayınladık. Bu sayfa ekibimizin anket sonuçları hakkındaki ilk raporudur ve deney planından çeşitli soruları ele alan daha ayrıntılı analizlerle takip edilecektir.

Bu raporda, 17 Aralık 2018'de dağıtım ile gün sonu (UTC) arasında kaydedilen hesaplara dayalı olarak anket ve yanıtlarına hızlı bir genel bakış sunuyoruz. Bu sonuçların ne güven aralığını ne de istatistiksel önemini hesapladık ve önemli farklılıklar olduğu konusunda iddiada bulunmuyoruz (örneğin, iki Vikipedi arasında veya kullanıcı grupları arasında). Ayrıca henüz anket sorularını birbirimize karşı çapraz tablolamadık veya EditorJourney verileri ile analiz etmedik. Bunun yerine, bunları ön bulgular olarak sunuyoruz ve bu bulguların önerebileceği bazı potansiyel adımları tartışıyoruz ve önümüzdeki çeyrekte daha kapsamlı bir analiz yapacağız.

Konu başlıkları

 * Çoğu kullanıcı ankete yanıt vererek, Çekçe ve Korece Vikipedi'lerinde sırasıyla %67 ve %62 gibi yüksek yanıt oranları vermektedir.
 * Şu anda anketin yeni kullanıcıların siteyi terk etmesine neden olmasından endişe duymuyoruz.
 * Korece Vikipedi'de bir hesap oluşturmanın en yaygın nedeni maddeleri okumaktır, düzenleme için değil (%29). Bu, %18'in bu yanıtı verdiği Çekçe'den farklıdır. Buradaki yüksek rakamlar, bu kullanıcıları Vikipedi'yi düzenlemenin mümkün ve kolay olduğu konusunda eğitmek için bir fırsatı temsil edebilir.
 * Her iki dilde yanıt verenlerin çoğu Vikipedi'yi daha önce düzenlememiştir (Çekçe'de %51 ve Korece'de %63). Ancak bu yüzdeler aynı zamanda çok sayıda insanın daha önce (anonim olarak veya farklı bir hesapla) düzenlediğini ve bu nedenle nasıl düzenleneceği konusunda biraz bilgi sahibi olabileceği anlamına gelir.
 * Korean respondents were much more likely than Czech respondents to type in their own custom topics, as opposed to selecting only the pre-populated options. 28% of Korean respondents added their own topic, compared to 9% of Czech respondents.
 * Surprisingly large numbers of respondents said they are interested in being contacted to get help with editing: 36% in Czech and 53% in Korean. This is a strong affirmation that the potential and desire for human-to-human help exists. The respondents are an actionable list of users for outreach.
 * Few additional people add an email address who did not add one during account creation. The numbers are large enough that the option is productive (6% in Korean and 7% in Czech), but small enough that we could consider better appeals to encourage adding an email address.

Arka plan
Bu anketin asıl amacı, deneyimlerini kişiselleştirmek için kullanabileceğimiz kullanıcılar hakkında bilgi toplamaktı. bu projenin bir sonraki aşamasında bu veriler üzerinde nasıl harekete geçileceğimize dair düşüncelerimiz hakkında burayı okuyun.

Dağıtımdan sonraki dört hafta boyunca, anket, hedef vikilere yeni bir hesap kaydedenlerin rastgele seçilmiş% 50'sine gösterildi (yani, farklı bir vikide zaten bir hesabı olan kullanıcılara gösterilmiyor. "otomatik oluşturulan kullanıcılar"). Anket grubu ve kontrol arasındaki bu A/B testi, anketin kayıttan sonraki 24 saat içinde ilk düzenlemelerini yapan kullanıcıların daha düşük bir oranına yol açıp açmadığını belirleyebilmemiz için seçildi ("editör aktivasyonu" olarak adlandırıyoruz). Bu deneyin sonuçlarının bir analizi yakında sunulacaktır.

Anketin nasıl göründüğüne ve içerdiği sorulara hızlı bir kaynak burada bulunabilir. Anket Çekçe dili ve Korece dilinde ilgili vikilerde görüntülenir.

Yanıt oranı
Çekçe Vikipedi'de anketi 669 kullanıcıya, Korece Vikipedi'de 836 kullanıcıya gösterdik. Kullanıcı anketi gördüğünde doldurmaları gereken bir dizi soruları vardır ve bunların tümü isteğe bağlıdır. Daha sonra "Bitir"'i tıklayarak anketi gönderebilirler (herhangi bir soruya yanıt vermemiş olsalar bile), "Bu anketi atla"'yı tıklayarak yanıtlarını silebilir veya sayfayı veya siteyi terk eden başka bir işlem yapabilirler. sol gezinme bölmesinde bir bağlantı veya sekmelerini kapatma. Bu ikinci eyleme "vazgeçme" diyoruz. İki viki için bu eylemler arasındaki dağılım aşağıdaki gibidir:

Tablo 1, kullanıcıların çoğunun anketi gönderdiğini göstermektedir. Aşağıda göreceğimiz gibi, kullanıcılar sorularımızı da cevaplıyor (cevapsız bir anket göndermek yerine). The abandonment rate appears to be fairly high, and at first we were concerned this meant that the survey was causing users to leave the website entirely, which would be a counter-productive outcome. To look into this, we dug into the data captured via our team's "Understanding first day" project, which gathers data on what new users view during their first 24 hours. We found that in Czech, only 47 users (7.0%) left the site, while in Korean it was only 99 users (11.8%). Both of these proportions are below the thresholds we had set for whether to change the survey or turning it off. This question will be answered more conclusively when we analyze the control group's rate of abandoning the site after account creation.

Yanıt oranlarını, hesabın masaüstü veya mobil sitede oluşturulmuş olmasına göre ayırmak da mümkündür, ancak oranların genellikle benzer olduğunu görüyoruz.

Bugün hesabınızı neden oluşturdunuz?
Neden bugün hesabınızı oluşturdunuz?


 * Vikipedi maddesindeki yazım hatasını veya hatayı düzeltmek için
 * Vikipedi maddesi bilgi eklemek için
 * Yeni bir Vikipedi maddesi oluşturmak için
 * Vikipedi okumak için
 * Diğer (lütfen açıklayınız)

İlk sorun, kullanıcının neden bir hesap oluşturduğunu sorar ve çeşitli seçenekler ile kullanıcıya daha ayrıntılı bir açıklama için metin alanı verildiği "Diğer" seçeneğini sunar. İki hedef Vikipedi'miz için yanıtlar, her bir dilde yanıt verenlerin sayısına dayalı olarak aşağıdaki şekilde ortaya çıkar:

Dikkat edilmesi gereken ilk şey, belki de en sık kullanılan seçeneğin iki dil arasında farklı olmasıdır. In Czech it is creating a new article that is selected by 32.6% of respondents, while in Korean it is reading (28.8%). In both languages, the other option is third on the list, reading was chosen by 17.5% of Czech respondents, and creating a new article by 19.7% in Korean. It's interesting to learn that reading Wikipedia motivates a lot of account creation, since having an account does not materially change the reading experience. That may point to a misperception around account creation, but may also be an opportunity to engage users both as readers and potential editors.

Bir maddeye bilgi eklemek her iki dilde de ikinci seçenektir ve karşılaştırılabilir bir oranı %25 civarındadır. Aynı şey, yanıtların yaklaşık %17'si ile listede dördüncü olan bir yazım hatasını veya hatayı düzeltmek için de geçerlidir.

Vikipedi'yi hiç düzenlediniz mi?
Vikipedi'yi hiç düzenlediniz mi?


 * Evet çoğu zaman
 * Evet, bir veya iki kez
 * Hayır, Vikipedi'yi düzenleyebileceğimi bilmiyordum
 * Hayır, başka nedenler
 * Hatırlamıyorum

İkinci soru, kullanıcının Vikipedi'yi daha önce düzenleyip düzenlemediğini soruyor ve beş olası yanıtı listeliyor. Bazı kullanıcılar da bu soruya cevap vermeden anketi gönderir. Aşağıdaki Tablo 3 cevaplara genel bir bakış sunmaktadır ve yine oranlar toplam anket yanıtı sayısına dayanmaktadır. Her iki dilde de "Hayır, Vikipedi'yi düzenleyebileceğimi bilmiyordum" en sık kullanılan seçenektir ve katılımcıların çoğunluğu daha önce Vikipedi'yi düzenlemediklerini söylüyor (her iki "hayır" seçeneğini birleştirerek: Çekçe: %50.5; Korece: %63.2). Regarding the "No, I didn't know I could edit Wikipedia" response, it makes sense that many people would give this answer given how many say they are creating their account for the purpose of reading. But we were also surprised that the number was quite so high. One hypothesis is that the question might be interpreted to mean different things by different respondents. One possible interpretation is "No, I didn't know I could edit Wikipedia until this survey question pointed it out", and another is "No, I didn't know I could edit Wikipedia until recently, but once I discovered that I could, I decided to create this account." We will learn some more about this question once we make cross-tabulations against the other questions, and we can consider clearer phrasings of these responses in the future.

Yanıtların sırasının her iki dilde de aynı olduğunu ve seçeneklerin kullanıcıya gösterilen sıradan farklı olduğunu da belirtmek gerekir. Bu, katılımcıların yanıt verirken listedeki ilk cevabı seçmedikleri, bunun yerine daha önce Vikipedi'yi düzenlemediklerini bize aktif olarak bildirdikleri anlamına gelir.

Düzenlemek isteyebileceğiniz bazı konuları seçin
''İnsanlar, önem verdikleri konularda Wikipedia makalelerini düzenleyebilir. Aşağıda, düzenleme için popüler olan birkaç konu listeledik. Düzenlemek isteyebileceğiniz bazı konuları seçin:''

Açıkça onay kutuları olarak listelenmiştir: Sanat, Bilim, Coğrafya, Tarih, Müzik, Spor, Edebiyat, Din, Popüler kültür.

Bir daktilo açılır menüsünde mevcuttur: Eğlence, Yiyecek ve içecek, Biyografi, Askeri, Ekonomi, Teknoloji, Film, Felsefe, İşletme, Politika, Hükumet, Mühendislik, El Sanatları ve hobiler, Oyunlar, Sağlık, Sosyal bilim, Ulaşım, Eğitim.

Anketin üçüncü kısmı katılımcılardan düzenlemek istedikleri bazı konuları seçmelerini istemektedir. Dokuz konu onay kutusu olarak gösterilir ve kullanıcı alanı tıkladığında veya yazdığında on sekiz konu daha görünür. Alan serbest biçimli olup, katılımcıların ek konu eklemesine izin verir. Katılımcılar istedikleri kadar konu seçip ekleyebilirler.

Bu analiz sadece önerilen konuları kapsar. Gelecekteki analizler, analiz edilmeden önce çeviri gerektiren kullanıcı tarafından sağlanan konuları ele alacaktır. Her dil için aşağıda bir tablo gösteriyoruz. Tablo, kullanıcının bir konuyu "onay kutusu" olarak seçme biçimini tanımlar; bu, dokuz onay kutusundan biridir; "önceden doldurulmuş", yani serbest form alanında bulunan on sekiz önceden doldurulmuş konudan biridir; veya "diğer", yani katılımcı tarafından eklenen bir konudur.

We can see that the dominating topics are all the ones listed in the checkboxes. The least frequent checkbox is selected by 20.8% of respondents, while the most frequent topic in the free-form field is only chosen by 3.5% of respondents. It is noteworthy that respondents are selecting multiple topics, as opposed to just one.

Korece'de ve Çekçe dilinde olduğu gibi benzer bir eğilim görüyoruz: konu seçimi söz konusu olduğunda onay kutuları hakimdir, ancak en az popüler onay kutusu ile önceden doldurulmuş en popüler konu arasındaki fark Korece'de (%11,0) Çekçe'den (%17.3) daha küçüktür.

Düzenleme konusunda yardım almak için sizinle iletişim kurulmasını istiyor musunuz?
''Daha deneyimli editörler için yeni kullanıcılara düzenleme konusunda yardımcı olacak bir program başlatmayı düşünüyoruz. Düzenleme konusunda yardım almak için sizinle iletişim kurulmasını istiyor musunuz?''

Her iki dilde de şaşırtıcı derecede çok sayıda kullanıcının iletişim kurmakla ilgilendiğini görüyoruz. Çekçe 164 kullanıcı (ankete katılanların %36,4'ü) ve Korece 273 kullanıcısı (%52,7) bu soruya "evet" yanıtı verdi. Bu, Vikipedi'yi düzenlemeye yardımcı olmak için yeni kullanıcılar arasında açıkça ilgi duyulduğu ve bu durumun topluluk erişimi için potansiyel bir mekan olduğu anlamına gelir. Anket yanıtlarını daha ayrıntılı incelediğimizde, bu soruya verilen yanıtları, kullanıcının Vikipedi'yi zaten düzenleyip düzenlemediğinin yanı sıra neden bir hesap oluşturmak için kaydolduklarının sorusuyla da karşılaşacağız.

Bir e-posta adresi ekleme
İlk hesap oluşturma sırasında e-posta adresi eklemeyen kullanıcılara, ankete e-posta adreslerini eklemeleri için ikinci bir fırsat verilir. Çok az kullanıcının bunu yaptığını görüyoruz, Çekçe Vikipedi'de sadece 13 ve Korece üzerinde 20 tane var. Bu, zaten bir e-posta adresi olmayan Çekli kullanıcılarının %6,5'ine Anket gösterildiğinde ve Koreli kullanıcıların % 5.7'si karşılık gelir.

Anket yanıtlarını tekrarlayın
Bunu yapmak için açık bir iş akışı olmasa da, kullanıcılar anket URL'sini yeniden ziyaret ederek anketi birden çok kez alabilir. Sadece en son cevaplarını saklıyoruz, yani en son cevaplarını ilgi alanlarını ve fikirlerini doğru bir şekilde yansıtmak için kabul ediyoruz. Aynı zamanda, kaç kez yanıt verdiklerini/atlandıklarını da belirliyoruz. Aşağıdaki Tablo 8, anket sayısının anketi kaydeden veya atlayan tüm kullanıcıların dışında olduğu yanıt sayısının nasıl dağıtıldığını göstermektedir. Kullanıcıların anketi birden çok kez almasının nispeten nadir olduğunu görebiliriz ve biri yaparsa, genellikle sadece bir kez daha olur. Bu, anketi birden çok kez alan ve yanıtlarını potansiyel olarak değiştiren kullanıcılara dayalı yanıtları atmak için çok az neden gördüğümüz anlamına gelir.

Sağlık kontrolleri
İşlerin düzgün bir şekilde çalıştığından emin olmak için verilerimiz üzerinde çeşitli sağlık kontrolleri yaptık. Örneğin, ideal olarak 50/50 olması gereken anket ve kontrol gruplarına atanan kullanıcıların dağılımını hesapladık. Bu durum aynı şekilde ortaya çıkıyor, genel olarak Çekçe Vikipedi'de oranlar %49.7/%50.3 anket/kontrol ve Korece Vikipedi'de ise tam tersi. Hesaplar masaüstünden ve mobil cihazlardan kayıtlara ayrıldığında bazı farklılıklar görüyoruz (örneğin, bazı durumlarda 47/53 olduğu), ancak rastgeleleştirme dengesiz veya önyargılı gruplara yol açtığı endişesini garanti etmek için yeterli değil.

Bu rapor üzerinde çalışırken, yanıtların doğru olup olmadığını belirlemek için henüz verilere dikkatlice bakmadık.Örneğin, bir kullanıcı Vikipedi'yi düzenleyebileceğini bilmediğini ancak Vikipedi'yi birçok kez düzenlediğini söylediğinde, büyük olasılıkla anketin her ikisine de en azından bu soruların her ikisine de cevaplarını atmamız gerekir. Bu not edilir ve yakın gelecekte bir noktada anket sonuçlarının daha kapsamlı bir incelemesinin bir parçası olarak yapılacaktır.

Dipnotlar


Ek A: Kayıtta e-posta eklendi
Bu oranı hesaplayabilmek için kaç kullanıcının kayıt sırasında bir e-posta adresi sağlamadığını nasıl belirledik? MediaWiki veritabanı, bir kullanıcının e-posta adresini eklediğinde zaman damgasını saklamadığı veya bu tür bilgileri günlüğe kaydetmek için kullanılan bir EventLogging şeması bulunmadığı için bu önemsiz değildir. Veritabanında ilişkili görünen tek bilgi parçası, e-posta adreslerini girerken kullanıcıya e-posta ile gönderilen doğrulama anahtarını sona erme zaman damgasıdır.

Her iki Vikipedi'de 1 Ocak ve 1 Temmuz 2018 tarihleri arasında kaydedilen hesaplar için hesap kaydı ve doğrulama anahtarın sona erme tarihi arasındaki farkı inceledik ve genellikle yedi günden biraz daha fazla olarak ayarlandığını tespit ettik. "Biraz daha" ne kadar fazla? On saniyeden az olan vakaların büyük çoğunluğunda, hesabı oluşturan sistem ile daha sonra doğrulama jetonunun e-posta ile gönderilmesi arasındaki gecikme olduğunu düşünüyoruz (bu noktada sona erme zaman damgası "şimdiden yedi gün" olarak ayarlanmıştır). Bu nedenle, kullanıcının kayıt sırasında bir e-posta sağlayıp sağlamadığını belirlemek için basit bir buluşsal yöntem kabul ettik: iki zaman damgası arasındaki farkın "bir hafta + on saniye" den küçük olması durumunda oldu.

Dikkate almamız gereken başka bir şey, bir kullanıcının kayıt sırasında bir e-posta adresi sağlayıp sağlamadığını, ancak silmeye karar verip getirmediği hakkında bilgi sahibi olmamamız. Bu, istatistikimizde "kayıt sırasında e-posta sağlamadı" şeklinde görünecekleri anlamına gelir. Bunun 19 Aralık itibariyle Çekçe kayıtlarının %64'ünün ve 1 Ocak ile 1 Temmuz arasında Korece kayıtlarının %75'inin doğrulanmış bir e-posta adresine sahip olmadığı gerçeğine dayanarak nadiren yapıldığına karar verdik. Bu, kullanıcıların büyük olasılıkla kontrol etmedikleri bir e-posta adresi sağladıklarını veya e-posta doğrulamasını gerçekten umursamadıklarını, bunun da e-posta adreslerini silmelerinin pek mümkün olmadığı anlamına geldiğini belirtti.

Son olarak, yukarıdaki "eklenen e-posta" bölümünde listelenen oran, bir kullanıcının kayıttan sonra e-posta adresini ne kadar hızlı ekleyebileceğine ilişkin bir üst limite dayanmıyordu. Bu, anketi dağıtıldıktan kısa bir süre sonra alan kullanıcıların bize bir adres sunmak için daha fazla zamanları olduğu anlamına gelir. Gelecekteki hesaplamalarda bir sınıra (örneğin bir hafta) sahip olacağız, ancak bu arada, bize bir adres vermediyse, bunu yapmaya geri dönme olasılıklarının düşük olduğunu iddia edeceğiz (diğer bir deyişle, nispeten olası olmadığını bir kullanıcı kayıttan sonra bir e-posta adresi ekler).