Beruflich Dokumente
Kultur Dokumente
Resumo:
Crowdsourcing um tema emergente, potencializado pela revoluo tecnolgica e de
comunicaes. Este trabalho buscou identificar fatores que influenciam a participao em
crowdsourcing e verificar se a relevncia destes fatores muda conforme a modalidade do
projeto. A partir de uma extensa reviso da literatura sobre o tema, foram selecionados 36
trabalhos que identificaram algum fator relevante. A categorizao e anlise dos resultados
destes trabalhos levaram identificao de 13 fatores, sendo Prazer, Recompensa,
Autodesenvolvimento e Reputao/Carreira os mais importantes. Tambm foram
encontradas evidncias de que a importncia relativa de motivaes intrnsecas ou extrnsecas
varia conforme a modalidade de crowdsourcing.
1 Introduo
Antes da revoluo digital das ltimas dcadas, o processo de agregao de
informaes dispersas em grandes grupos, quando vivel, era penoso e custoso. Trabalhos em
colaborao demandavam interaes presenciais ou por meio de sistemas de comunicao
pouco eficientes. Todavia, as novas tecnologias que surgiram no final do sculo XX mudaram
essa situao. A partir do momento em que a Internet tornou-se acessvel a um nmero maior
de pessoas, naturalmente surgiram inmeras iniciativas que tiram proveito do poder dos
grandes grupos.
possvel citar inmeros exemplos dessas iniciativas. Criada em 2001, a Wikipdia
uma enciclopdia online gratuita, com contedo redigido e constantemente atualizado por
uma legio de voluntrios do mundo inteiro que, coletivamente, conseguiram construir o que
hoje a maior e mais popular obra de referncia geral na Internet. Com aproximadamente 30
milhes de artigos em 287 lnguas (WIKIPEDIA, 2014), o contedo da Wikipdia possui
qualidade comparvel da Enciclopdia Britnica (GILES, 2005).
Quando se fala em colaborao online, impossvel deixar de citar tambm o
desenvolvimento de software livre (LERNER; TIROLE, 2002). Os mais diversos tipos de
software so criados em um processo aberto e totalmente colaborativo envolvendo a
participao de desenvolvedores de diferentes localidades, que contribuem escrevendo parte
do cdigo fonte ou aperfeioando cdigos escritos por outros voluntrios. O sistema
operacional Linux, amplamente utilizado por pessoas fsicas e empresas, um dos projetos de
sistema de cdigo aberto mais conhecido.
O mecanismo de buscas do Google outro exemplo de Inteligncia Coletiva. O
algoritmo desenvolvido pela empresa utiliza informaes de bilhes de pginas da WEB para
determinar a relevncia dos resultados de suas buscas (BRIN; PAGE, 1998). Em uma
analogia simples, trata-se de uma espcie de votao, onde a importncia de uma determinada
pgina calculada a partir da quantidade de outras pginas que possuem links (votos)
direcionando para a pgina em questo. Desse modo, a prpria rede fornece a relevncia de
seu contedo.
Esses so apenas alguns exemplos, mas h muitos outros casos que poderiam ser
citados. A velocidade com que ideias novas surgem, so implementadas, replicadas e
aperfeioadas to rpida que difcil entender e explicar tudo o que est acontecendo.
Inteligncia Coletiva, Sabedoria das Multides, WEB 2.0, Crowdsourcing, Crowdfunding,
CrowdStorm, etc., so todos termos novos para explicar ou classificar essas iniciativas que
visam a explorar o poder da coletividade, potencializado pelas novas tecnologias.
O termo Crowdsourcing, que apareceu pela primeira vez no ano de 2006 em um artigo
da revista Wired (HOWE, 2006), diz respeito a um modelo de produo ou resoluo de
problemas que ocorre de forma online e distribuda. As organizaes perceberam que, da
mesma forma que conquistam vantagens competitivas terceirizando produtos e servios para
outras empresas, podem obter vantagens terceirizando tarefas para a coletividade.
No site Mechanical Turk da Amazoni, trabalhadores do mundo inteiro oferecem sua
mo de obra para a realizao de tarefas simples, como, por exemplo, a categorizao de
imagens ou transcrio de udio, em troca de pequenas remuneraes (KAUFMANN et al,
2011). J no site InnoCentiveii, lanado em 2001 com financiamento da gigante farmacutica
Eli Lilly (HOWE, 2006), grandes empresas oferecem recompensas generosas em troca de
solues para problemas complexos de pesquisa e desenvolvimento. Apesar de qualquer
pessoa interessada poder propor solues, independentemente de sua qualificao
profissional, muitas ideias inovadoras e de qualidade so recebidas pelas empresas.
Esta definio estabelece oito caractersticas que servem como critrio para identificar
se determinada atividade pode ou no ser classificada como uma iniciativa de crowdsourcing.
De acordo com Arolas e Guevara (2012), essas caractersticas so:
(a) h uma multido claramente definida;
(b) h uma tarefa com objetivos claros;
(c) a recompensa recebida pela multido clara;
(d) o patrocinador (crowdsourcer) facilmente identificado;
(e) a compensao a ser recebida pelo crowdsourcer est claramente definida;
(f) um processo atribudo online e do tipo participativo;
(g) utilizado um convite aberto de extenso varivel;
(h) utilizada a internet.
Uma atividade que possua todas as caractersticas supracitadas pode, sem dvida, ser
considerada uma ao de crowdsourcing. Este o caso, por exemplo, da Threadlessiv, uma
empresa online que comercializa camisetas cujo design criado e selecionado pelos prprios
consumidores. Quanto menos dessas caractersticas a atividade possuir, menos adequada a
utilizao do termo. O Youtube, por exemplo, apesar de ser uma plataforma de vdeo na
internet onde o contedo criado pelos prprios usurios, no pode ser considerado
crowdsourcing, pois no atende a maior parte das caractersticas elencadas.
No Quadro 1, extrado de Arolas e Guevara (2012), analisado se outras iniciativas,
alm do Threadless e Youtube, se encaixam ou no na definio proposta. As iniciativas
analisadas so: Wikipdia (uma enciclopdia colaborativa online), InnoCentive (uma
plataforma online onde so oferecidos prmios em dinheiro para a resoluo de problemas),
Amazon Mechanical Turk (uma plataforma onde os crowdsourcers podem propor a realizao
de tarefas em troca de pequenas remuneraes), ModCloth (uma loja de roupas na internet
que permite que seus usurios opinem e votem em designs de roupas antes de sua venda),
Lnzanos (um website espanhol onde as pessoas investem em projetos e so recompensadas
por seu apoio), Delicious (um sistema de bookmarking social), Fiat Mio (uma iniciativa da
empresa Fiat na qual um carro foi desenvolvido a partir de sugestes dos consumidores),
iStockphoto (uma plataforma de venda de imagens na internet) e o Flickr (uma plataforma
online que permite o envio e a classificao de fotografias).
Quadro 1 - Verificao da Definio de Crowdsourcing
a
Wikipdia
InnoCentive
Threadless
ModCloth
YouTube
Lnzanos
Delicious
Fiat Mio
iStockphoto
Flickr
Descrio
Plataformas
de micro
tarefas
(PMT)
Concursos,
com ou sem
votao dos
pares
(CON)
Equipe de
trabalho
colaborativa
(ETC)
Mercados
Preditivos
(MP)
Exemplos
www.mturk.com
www.crowdflower.com
www.innocentive.com
www.threadless.com
www.zooniverse.org
stardustathome.ssl.berkeley.edu
www.hsx.com
home.inklingmarkets.com
H1: Existe diferena entre os fatores mais relevantes para a participao das pessoas
em modalidades distintas de crowdsourcing.
3 Metodologia
Os dados analisados nesta pesquisa foram obtidos em outros estudos acadmicos. Por
meio de uma extensa reviso da bibliografia existente sobre motivaes para participao em
projetos de crowdsourcing, foi possvel atingir os objetivos propostos e testar a hiptese de
pesquisa.
Para mapear a literatura sobre o tema, foram realizadas buscas em quatro dos
principais repositrios de bases de dados de artigos acadmicos: Web of Science (todas as
bases de dados disponveis), EBSCO (Business Source Complete), Proquest (ABI/INFORM
Complete) e Google Acadmico. As buscas foram feitas nos principais campos e envolveram
termos como crowdsourcing, prediction markets e idea markets, associados a termos
relacionados participao como, por exemplo, participation, motivation, motive,
intention, etc. Foram utilizados termos em ingls e portugus.
Em alguns casos, as buscas retornaram muitos resultados e foi necessrio um filtro
inicial. Por exemplo, uma das buscas no Proquest retornou mais de 1600 registros e neste caso
o filtro inicial consistiu em manter apenas artigos com texto completo, em ingls ou portugus
e cujo campo assunto indicava termos relacionados ao interesse da pesquisa. Aps esse
procedimento, restaram 170 dos 1600 registros originais desta busca em particular. O prximo
passo foi realizar uma anlise dos ttulos e resumos dos artigos restantes. Considerando todas
as bases de dados consultadas, no total foram analisados os ttulos e/ou resumos de mais de
500 trabalhos. Nessa fase, alm de textos que evidentemente no estavam relacionados ao
tema de interesse e dos trabalhos duplicados, foram descartadas tambm pesquisas
relacionadas participao em projetos de Open Source e crowdfunding, conforme explicado
anteriormente.
Os trabalhos selecionados ao final deste processo foram analisados em profundidade
para verificar se o estudo investigava ao menos um fator que poderia influenciar a
participao em projetos de crowdsourcing. Nas referncias bibliogrficas desses trabalhos
foram identificados outros estudos relevantes que tambm foram analisados. No total, esta
etapa envolveu a anlise detalhada de 84 trabalhos dos quais apenas 36 permaneceram.
Nem todos os 36 trabalhos selecionados possuem como objetivo principal de pesquisa
o estudo da participao. Todavia, todos eles acabaram por identificar algum fator relevante a
partir da anlise de dados obtidos em um ou mais projetos de crowdsourcing. As
caractersticas dos estudos so bastante diversas: analisam diferentes modalidades, possuem
diferentes nveis de rigor metodolgico e, enquanto alguns utilizam abordagens quantitativas,
outros focam na anlise de dados qualitativos obtidos, por exemplo, por meio de entrevistas
com usurios. Pesquisas exclusivamente bibliogrficas foram descartadas nas etapas
anteriores.
6
Intrnseca
Qtde de Trabalhos em
que o fator aparece
23
% dos
trabalhos
64%
Recompensa
Extrnseca
22
61%
Autodesenvolvimento
Ambas
18
50%
Reputao e Carreira
Extrnseca
18
50%
Social
Ambas
15
42%
Altrusmo
Intrnseca
10
28%
Simplicidade
Ambas
10
28%
Significado da tarefa
Intrnseca
25%
Fator
Classificao
Prazer
Autonomia
Intrnseca
19%
Possui habilidade
Intrnseca
19%
Confiabilidade
Ambas
19%
Feedback
Extrnseca
19%
Interesse
Intrnseca
17%
ETC
ETC
ETC
ETC
ETC
ETC
PM
PM
Geral
Geral
-
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
Outros
X
X
X
Recompensa
Reputao e Carreira
Feedback
Confiabilidade
Simplicidade
X
X
X
X
X
X
X
Social
Possui habilidade
X
X
PMT
PMT
PMT
PMT
PMT
PMT
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
CON
ETC
ETC
+ Extrnseca
Autodesenvolvimento
Autonomia
Interesse
Prazer
Significado da tarefa
Modalidade de
crowdsourcing
Autores
Altrusmo
Motivaes
+ Intrnseca
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
desempenho da tarefa. Uma das razes para esta constatao que, ao buscar realizar uma
tarefa em que se sente capaz, o indivduo est satisfazendo uma necessidade de
autoafirmao, mostrando a si mesmo o quanto ele capaz. Este conceito est relacionado ao
termo autoeficcia.
Confiabilidade, por sua vez, representa diversas dimenses relacionadas confiana.
Por exemplo, a confiana no patrocinador do projeto, no sistema tcnico utilizado ou ainda a
confiana de que os resultados do projeto sero realmente utilizados. O fator inclui ainda a
percepo dos participantes de que o crowdsourcer confia neles.
O fator feedback significa que o participante espera que o patrocinador, bem como
outros participantes, se interessem por suas contribuies. Desse modo, ele espera receber
comentrios e avaliaes de suas contribuies e, ao satisfazer essa expectativa, ele se sente
mais motivado a participar. De certo modo, este fator est relacionado ao
autodesenvolvimento, uma vez que o feedback recebido proporciona aprendizado.
Por fim, o ltimo fator, denominado interesse, diz respeito ao quanto o indivduo se
interessa pelo assunto tratado no projeto de crowdsourcing. O simples interesse em
astronomia j pode ser uma forte razo para o indivduo participar de um projeto de
crowdscience cujo objetivo seja a identificao de novas galxias, por exemplo. Este item
diferente do fator significado da tarefa: uma pessoa pode achar importante o
desenvolvimento cientfico, ou seja, a ampliao do conhecimento sobre o universo pode ter
um significado para ela, mas possvel que esta pessoa no tenha um interesse particular na
tarefa de identificar galxias.
Com base nos dados do Quadro 3, tentou-se investigar se existe diferena na
relevncia dos fatores para cada modalidade. Considerando apenas as trs modalidades com
maior nmero de trabalhos (plataforma de micro tarefa - PMT, concursos - CON e equipe de
trabalho colaborativa - ETC) e apenas os fatores intrnsecos e extrnsecos mais presentes, ou
seja, prazer / altrusmo e recompensa / reputao e carreira, respectivamente,
verifica-se na Tabela 2 que os fatores extrnsecos so muito mais fortes nas modalidades PMT
e CON. O fator recompensa, por exemplo, aparece em 83% dos trabalhos que estudam a
modalidade PMT e em 65% dos trabalhos da modalidade CON, valores muito superiores aos
25% dos trabalhos da modalidade ETC. O oposto acontece com as motivaes intrnsecas: o
fator altrusmo est presente em apenas 17% e 12% das modalidades PMT e CON,
respectivamente, mas aparece em 63% dos trabalhos da modalidade ETC. Estas diferenas
so facilmente explicadas: em geral, na modalidade ETC as iniciativas envolvem atividades
de grande significado, com apelo colaborativo, como projetos que visam a ajudar pesquisas
cientficas, por exemplo, e que normalmente no oferecem nenhuma recompensa em dinheiro.
J nas outras duas modalidades, a recompensa financeira muito mais comum.
Tabela 2 - Relevncia dos Fatores por Modalidade de Crowdsourcing
Modalidade de crowdsourcing
PMT
Intrnseca
Extrnseca
CON
ETC
Total
Qtde de trabalhos
17
31
Prazer
67%
59%
88%
68%
Altrusmo
17%
12%
63%
26%
Recompensa
83%
65%
25%
58%
Reputao e Carreira
67%
41%
38%
45%
10
Intrnseca
Motivao
Extrnseca
Total
PMT
CON
ETC***
Total*
Qtde
12a, b
19b
23a
54
52,2%
47,5%
79,3%
58,7%
Qtde
11a, b
21b
6a
38
47,8%
52,5%
20,7%
41,3%
Qtde
%
23
100,0%
40
100,0%
29
100,0%
92
100,0%
Letras subscritas indicam que a proporo daquele tipo de motivao na modalidade no difere
significativamente da proporo equivalente em outra modalidade com mesma letra, ao nvel de 0,05.
Para cada modalidade foi analisado tambm se a proporo entre motivaes intrnsecas e extrnsecas
difere significativamente de um modelo terico de propores iguais (50% intrnsecas - 50%
extrnsecas). Testes significantes so indicados por: * p < 0,1 e *** p < 0,01.
FONTE: Elaborado pelos autores.
11
5 Consideraes Finais
O crowdsourcing pode trazer muitas vantagens, tanto para as empresas (reduo de
custos, obteno de solues inovadoras, etc.) quanto para aqueles que colaboram com essas
iniciativas (reconhecimento, aprendizado, etc.). Se bem planejados, os ganhos com projetos
de crowdsourcing so muito maiores do que potenciais problemas que podem ocorrer. Para
ampliar as chances de sucesso, entretanto, sempre ser necessrio atingir um nmero
adequado de participantes. Portanto, preciso uma compreenso adequada dos fatores que
atraem os usurios.
O primeiro objetivo deste trabalho foi identificar os fatores que influenciam a
participao das pessoas em iniciativas de crowdsourcing. A pesquisa levou identificao de
treze fatores relevantes, aqui listados em ordem decrescente de importncia: prazer,
recompensa, autodesenvolvimento, reputao e carreira, social, altrusmo,
simplicidade, significado da tarefa, autonomia, possui habilidade, confiabilidade,
feedback e interesse.
O segundo objetivo, por sua vez, foi verificar se a relevncia dos fatores identificados
varia em funo de diferentes projetos. Para este objetivo, havia sido definida a hiptese (H1)
de que existe diferena entre os fatores mais relevantes para a participao das pessoas em
modalidades distintas de crowdsourcing. Esta hiptese de pesquisa foi suportada, uma vez
que foi identificada diferena significante entre a proporo de motivaes intrnsecas e
extrnsecas nas modalidades CON (concursos) e ETC (equipe de trabalho colaborativa).
Esses resultados ampliam o conhecimento existente na literatura sobre crowdsourcing
e significam um degrau adicional em direo consolidao de um modelo que explique
adequadamente as relaes e foras dos fatores que influenciam a participao. Por outro
lado, os resultados sugerem que, devido diversidade de iniciativas existentes, provavelmente
ser necessrio o desenvolvimento de modelos especficos para projetos de crowdsourcing
que compartilhem caractersticas comuns.
Os resultados tambm so relevantes para as organizaes interessadas em explorar o
poder das multides. Muitas vezes, preocupados em atrair um grande nmero de participantes,
os patrocinadores desses projetos oferecem prmios generosos em troca das melhores
contribuies. Todavia, este estudo mostrou que em alguns casos essa no a melhor
estratgica, uma vez que outros fatores podem ser ainda mais relevantes do que uma
recompensa para alavancar a participao. Satisfazer fatores como prazer ou
autodesenvolvimento pode ser mais barato e trazer melhores retornos. Outra implicao
importante para as organizaes que a definio da estratgia para atrair participantes deve
considerar as caractersticas especficas de cada projeto.
Uma limitao do presente estudo o fato de que foi baseado em dados secundrios
obtidos em um nmero limitado de trabalhos acadmicos. Esses trabalhos possuem
caractersticas diversas e variam bastante em termos de rigor e procedimentos metodolgicos.
Resultados mais robustos talvez possam ser obtidos a partir de pesquisas que levantem os
mesmos dados primrios e sigam a mesma metodologia de anlise para diversas modalidades
de crowdsourcing. Esta exatamente uma das sugestes para estudos futuros sobre o tema.
Outra sugesto seria a proposio e teste de um modelo que possa prever o nvel de
participao em um projeto de determinada modalidade, com base na mensurao dos fatores
identificados neste estudo.
12
Referncias Bibliogrficas
ALAM, Sultana Lubna; CAMPBELL, John. Crowdsourcing motivations in a not-for-profit
GLAM context: the Australian newspapers digitisation program. In: XXIII
AUSTRALASIAN CONFERENCE ON INFORMATION SYSTEMS, 03-05/12/2012,
Geelong, Victoria. Proceedings Geelong: ACIS, 2012.
ANTIKAINEN, Maria et al. Motivating and supporting collaboration in open innovation.
European Journal of Innovation Management. v. 13, n. 1, p. 100-119, 2010.
ARNESEN, Sveinung. Leaping into the unknown: comparing, testing, and applying
methods of predicting elections. Bergen, 2011. Dissertation (Philosophiae Doctor) Department of Comparative Politics, University of Bergen.
AROLAS, Enrique Estells; GUEVARA, Fernando G. Ladrn de. Towards an integrated
crowdsourcing definition. Journal of Information Science. v. 38, n. 2, p. 189-200, abr. 2012.
BRABHAM, Daren C. Crowdsourcing as a model for problem solving: an introduction and
cases. Convergence: The International Journal of Research into New Media
Technologies. v.14, n. 1, p. 75-90, fev. 2008a.
BRABHAM, Daren C. Moving the crowd at iStockphoto: the composition of the crowd and
motivations for participation in a crowdsourcing application. First Monday. v. 13, n. 6, jun.
2008b.
BRABHAM, Daren C. Moving the crowd at Threadless. Information, Communication &
Society. v. 13, n. 8, p. 1122-1145, dez. 2010.
BRABHAM, Daren C. Motivations for participation in a crowdsourcing application to
improve public engagement in transit planning. Journal of Applied Communication
Research. v. 40, n. 3, p. 307-328, 2012.
BRIN, Sergey; PAGE, Lawrence. The anatomy of a large-scale hypertextual Web search
engine. Computer Networks and ISDN Systems. Elsevier Science, v. 30, n. 1-7, p. 107-117,
abr. 1998.
BUDHATHOKI, Nama R.; HAYTHORNTHWAITE, Caroline. Motivation for open
collaboration: crowd and community models and the case of OpenStreetMap. American
Behavioral Scientist. v.57, n. 5, p. 548-575, mai. 2013.
CHANDLER, Dana; KAPELNER, Adam. Breaking monotony with meaning: motivation in
crowdsourcing markets. Journal of Economic Behavior & Organization. v. 90, p. 123-133,
jun. 2013.
CHEN, Li et al. Theory and analysis of company-sponsored value co-creation. Journal of
Management Information Systems. v. 29, n. 2, p. 141-172, 2012.
DECI, Edward L.; RYAN, Richard M. Intrinsic Motivation and Self-Determination in
Human Behavior. Nova York: Plenum Press, 1985.
13
FULLER, Johann. Why consumers engage in virtual new product developments initiated by
producers. Advances in Consumer Research. v. 33, n. 1, p. 639-646, 2006.
GATARA, Maradona. Predicting intention to participate in mobile crowdsourcing
initiatives: a study of local Kenyan communities. Johannesburg, 2012. Dissertao (Master
of Commerce) - Faculty of Commerce, Law and Management, School of Economic and
Business Sciences, University of the Witwatersrand.
GILES, Jim. Internet encyclopaedias go head to head. Nature. v. 438, n. 7070, p. 900-901,
15/12/2005.
HOWE, Jeff. The rise of crowdsourcing. Wired Magazine. v. 14, n. 06, jun. 2006.
KAUFMANN, Nicolas et al. More than fun and Money. Worker motivation in
crowdsourcing: a study on Mechanical Turk. In: SEVENTEENTH AMERICAS
CONFERENCE ON INFORMATION SYSTEMS, 04-07/08/2011, Detroit, Michigan, USA.
Proceedings Detroit: AIS, 2011.
KAZAI, Gabriella et al. An analysis of human factors and label accuracy in crowdsourcing
relevance judgments. Information Retrieval. v. 16, n. 2, p. 138-178, abr. 2013.
KIM, Linkruus et al. Crowdsourcing - take on goliath - motivating people to participate in
crowdsourcing. Kalmar, 2012. Dissertao (Mestrado em Marketing) - School of Business
and Economics, Linnaeus University.
KOSONEN, Miia et al. Users motivations and knowledge sharing in an online innovation
community. In: The XXIII ISPIM CONFERENCE, 17-20/06/2012, Barcelona, Spain.
Proceedings Barcelona: ISPIM, 2012.
KOSONEN, Miia et al. My idea is our idea! Supporting user-driven innovation activities in
crowdsourcing communities. International Journal of Innovation Management. v. 17, n. 3,
jun. 2013.
LEIMEISTER, Jan Marco et al. Leveraging crowdsourcing: activation-supporting
components for IT-based ideas competition. Journal of Management Information Systems.
v. 26, n. 1, p. 197-224, 2009.
LERNER, Josh; TIROLE, Jean. Some simple economics of open source. The Journal of
Industrial Economics. Oxford: Blackwell Publishers Ltd., v. L, n. 2, p. 197-234, jun. 2002.
LING, Peng; MIAN, Zhang. An empirical study of social capital in participation in online
crowdsourcing. In: INTERNATIONAL CONFERENCE ON E-PRODUCT E-SERVICE
AND E-ENTERTAINMENT (ICEEE), 07-09/11/2010, Henan. Proceedings Henan: IEEE,
2010.
MONTGOMERY, Thomas A. et al. Experience from hosting a corporate prediction market:
benefits beyond the forecasts. In: 19th ACM SIGKDD INTERNATIONAL CONFERENCE
ON KNOWLEDGE DISCOVERY AND DATA MINING - KDD 2013, 11-14/08/2013,
Chicago, Illinois, USA. Proceedings New York: ACM, 2013.
14
VAATAJA, Heli. Readers motivations to participate in hyperlocal news content creation. In:
17TH ACM INTERNATIONAL CONFERENCE ON SUPPORTING GROUP WORK, 2731/10/2012, Sanibel Island, Florida, USA. Proceedings New York: ACM, 2012.
VARSHNEY, Lav R. Participation in crowd systems. In: FIFTIETH ANNUAL ALLERTON
CONFERENCE ON COMMUNICATION, CONTROL AND COMPUTING, 01-05/10/2012,
Monticello, Illinois, USA. Proceedings Monticello: IEEE, 2012.
VILLARROEL, J. Andrei; TUCCI, Christopher L. Motivating firm-sponsored e-collective
work. MIT Sloan Research Paper No. 4767-10, jan. 2010. Disponvel em:
<http://ssrn.com/abstract=1536209>. Acesso em: 13/03/2014.
WIKIPEDIA. Disponvel em: <http://en.wikipedia.org/wiki/Wikipedia>. Acesso em:
16/01/2014.
ZHENG, Haichao et al. Task design, motivation, and participation in crowdsourcing contests.
International Journal of Electronic Commerce. v. 15, n. 4, p. 57-88, 2011.
https://www.mturk.com
ii
http://www.innocentive.com
iii
https://www.threadless.com
16