5.3.1 Netflix сыйлыгы

Netflix сыйлыгынын адамдары турган кино алдын ала ачык чакыруу үчүн колдонот.

абдан жакшы белгилүү ачык чакыруу долбоор Netflix сыйлыгы болуп саналат. Netflix онлайн кино ижара компания болуп саналат, ал эми 2000-жылы ал кардарлардын тасмалар сунуш Cinematch бир кызматын ишке киргизди. Мисалы, Cinematch сен Артка жана анда Jedi кайра карап чыгууну сунуш кылабыз Star Wars империясы кайгыга жакты байкабай мүмкүн. Алгач, Cinematch начар иштеген. Бирок, көп жылдар бою, Cinematch кардарлар менен кандай кино алдын ала анын жөндөмүн жакшыртуу үчүн берген. 2006-нын Бирок, Cinematch боюнча прогресс plateaued. Алар жөнүндө ойлоно албай абдан көп нерсени Netflix сотто болчу, бирок, ошол эле убакта, алар өздөрүнүн системасын жакшыртууга жардам берүү үчүн башка пикирлер бар деп шектелген изилдөөчүлөр. Демек, алар учурда эмне менен келип, радикалдуу чечим: ачык чакыруу.

Netflix сыйлыгынын биротоло ийгилиги үчүн ачык чакыруу иштелип чыккан кандай болгон, ал эми бул долбоор коомдук изилдөөлөр кандай ачык чалуулар үчүн колдонулушу мүмкүн үчүн маанилүү сабак бар. Netflix эле, алар биринчи жолу ачык чакырууну карап көптөр элестете кандай идеялар үчүн бонитети өтүнүчүн алып койгон эмес. Тескерисинче, Netflix жөнөкөй баалоо критерийлери менен так кыйынчылык туудурган эмес, алар 3 миллион кармалып чыккан рейтинги алдын ала 100 миллион кино рейтинги комплексин пайдаланууга адамдарды талашка (колдонуучулар жасаган рейтинг бирок Netflix коё берген жок). Cinematch 1 миллион доллар утуп караганда жакшыраак 3 млн кармалып чыккан рейтинги 10% алдын ала турган алгоритмин түзүү мүмкүн кимдир бирөө. кармалып чыккан үчүн алдын ала баалоо баалоонун критерийлеринин-салыштырып колдонуу үчүн бул түшүнүктүү жана жеңил чечимдер пайда караганда текшерүүгө жардам берет Netflix сыйлыгынын ушундай жол менен түзүлгөн деп рейтинги-билдирет; ал ачык чалуу үчүн жарактуу көйгөйүнө айланып Cinematch жакшыртуу маселесине бурулду.

2006-жылдын октябрында, Netflix жөнүндө 500,000 кардарлар 100 млн кино баалоо камтыган танышуусуна (6-бөлүмдөн бул маалыматтарды чыгарууну жекелик кесепеттерин каралат) чыгарды. Netflix маалыматтар 20000 тасмалар менен болжол менен 500,000 кардарлар бир ири булагына катары conceptualized болот. Бул булагына ичинде, 1 5 жылдыз (5.2-сүрөт) чейинки шкала боюнча 100 млн рейтингдери бар болчу. чакырык 3 млн кармалып чыккан рейтинги алдын ала мат- байкалган маалыматты колдонууга болгон.

Стол 5.2: Netflix сыйлыгынын маалыматты БУУнун. Netflix 20000 кино 500,000 кардарлар тарабынан берилген 100 млн баалоо (1 жылдыз 5 жылдыз чейин) чыгарды. «?» Деп көрсөтүлгөн 3 миллион кино, анын Netflix сыйлыгынын максаты рейтинги өттү чыккан рейтинги алдын пайдаланууга болгон. Алдын ала Netflix сыйлыгынын катышуучулары тарабынан берилген баа болуп чыккан рейтинги салыштырмалуу алынган. Мен 6-бөлүмдө бул маалыматтар бошотуу курчап турган этикалык маселелерди талкуулашат.
Movie 1 кино 2 кино 3 . . . Movie 20000
кардар 1 2 5 . ?
кардар 2 2 ? . 3
кардар 3 ? 2 .
. . . . . . . .
кардар 500,000 ? 2 . 1

Дүйнө жүзү боюнча изилдөөчүлөр жана кибер маселе тартылып алынган, ал эми 2008-жылдын жыйынтыктары 30000 ашуун адам аны иштеген (Thompson 2008) . Сынактын жүрүшү менен, Netflix дагы 5000ден ашуун чейин 40000 сунуш кылынуучу чечимдерге караганда командаларынын кабыл алынган (Netflix 2009) . Албетте, Netflix окуп, ушунун баарын сунуш кылынуучу чечимдерге түшүнө алган эмес. чечимдер текшерүү үчүн кыйын болгондуктан, бүт нерсе, бирок, ийкемдүү, чуркап кетти. Netflix эле алдын-ала белгиленген ченемдер (өзгөчө метрикага алар орточо-Жылмаланган ката тамыр болуп колдонулат) тарабынан компьютер кармалып чыккан рейтингдери алдын ала баалоо салыштыруу мүмкүн. Ал тез Netflix жакшы идеялары кээ бир калыштуу жерлерден келип, анткени маанилүү болуп чыкты, ар, чечим кабыл алууга мүмкүнчүлүк чечимдерди баалоо бул жөндөмдүүлүк болгон. Чынында, алган чечим жок чейин тажрыйбасы курулуш кино сунуш системаларын болгон үч изилдөөчүлөр Найти командасы менен берилген (Bell, Koren, and Volinsky 2010) .

Netflix сыйлыгынын бир кооз аспектиси, алардын чечим адилеттүү баа берүү үчүн дүйнөдөгү ар бир мүмкүнчүлүк болуп саналат. адамдар, алардын алдын ала баалоо жүктөп жатканда, алар академиялык грамоталарын, жаш курагы, расасы, жынысы, сексуалдык багыт, же өзү жөнүндө эч нерсе жүктөп керек эмес. Ошентип, Каткырык бир атактуу адис-жылдын алдын ала баалоо анын так уктоочу өспүрүм ошол эле мамиле болгон. Тилекке каршы, бул коомдук изилдөө туура эмес. Бул көпчүлүк коомдук изилдөө, баа берүү керектеген жана жарым-жартылай субъекттик абдан мезгили болуп саналат. Ошондуктан, көпчүлүк изилдөө пикирлери олуттуу баа качан жана пикирлер бааланганда, ал идеяларды жаратуучусу болгон баа жулуп кыйын. чечимдер текшерүү үчүн жеңил, анткени, ачык чалуулар изилдөөчүлөр, алар бир гана белгилүү окутуучулары чечим болуп эсептелет, анда жаракалар аркылуу түшүп турган бардык мүмкүн болгон сонун чечимдерди кирүүгө уруксат берет.

Мисалы, экран аты менен Netflix сыйлыгынын бирөө учурунда бир учурда Шымон Funk өзүнүн блогунда бир сунуш кылынган чечимдин бир жекелик наркы бузулууга негизинде жайгаштырылган, башка катышуучулар менен колдонулган жок, сызыктуу алгебранын бир ыкма. Funk блогуна билдирүү бир эле мезгилде техникалык жана weirdly расмий эмес болчу. Бул блог жакшы чечим баяндаган билдирүү же ал убакытты текке болгон? ачык чакыруу боюнча долбоордун тышкары, чечим эч качан олуттуу баа алган болушу мүмкүн. бардык Симон Funk Cal Тех же MIT бир окутуучу эмес, кийин; Ал убакта, New Зеландия айланасында Backpacking, бир программа иштеп чыгуучусу болгон (Piatetsky 2007) . Ал Netflix инженер менен бул ойду жүзөгө алмашкан болсо, ал сөзсүз олуттуу кабыл алган эмес.

Бактыга жараша, баалоо критерийлери так жана колдонууга жеңил болгон үчүн, анын алдын ала баалоо баа, ошондой эле анын мамиле абдан күчтүү экенин ошол замат айкын болгон: ал конкурстун төртүнчү орунга чыгып зымды жулуп, башка командалар зор натыйжасы экенин эске алганда буга чейин болуп келген маселе боюнча ай иштеген. Аягында, Симон Funk менен жолукканы жөнүндөгү бөлүгү дээрлик бардык олуттуу атаандаштар тарабынан колдонулган (Bell, Koren, and Volinsky 2010) .

Симон Funk, тескерисинче, аны жашыруун сактоого аракет караганда, анын ыкмасын түшүндүрүп өзүнүн блогунда жазып тандап экенин, ошондой эле Netflix сыйлыгына көптөгөн катышуучулары гана миллион доллар сыйлык түрткү болгон эмес деп турат. Тескерисинче, көптөгөн катышуучулар, ошондой эле интеллектуалдык кыйынчылык жана маселенин айланасында иштелип коомчулуктун колдоосун пайдалануу көрүнгөн (Thompson 2008) Мен көп изилдөөчүлөр түшүнүүгө болот, сезим.

Netflix сыйлыгы ачык чалуу классикалык үлгүсү болуп саналат. Netflix белгилүү бир максат менен бир суроо берген (кино баалоо божомолдоо) жана көптөгөн адамдардын чечимдерди сурашкан. Алар түзүү үчүн эмес, текшерүү үчүн кыйын болгондуктан, Netflix, бул чечимдерди баа алган жана акырында Netflix мыкты чечим алды. Кийинки, бул ошол эле ыкма биология жана мыйзам менен кантип колдонсо болорун көрсөтүшөт.