Beruflich Dokumente
Kultur Dokumente
23
hundred and sixty-three students, and after completed the stages for validation of the research tool,
the questionnaire designed to evaluate the dimensions proposed in this study (communication,
strategy, education and research) is established. Finally, the main findings, limitations and theoretical
and practical contributions of the study are underlined.
Keyword: Higher Education Institutions, sustainability and validation of scales.
1 INTRODUO
Os desafios da prtica da sustentabilidade que a sociedade humana enfrenta so cada vez mais
urgentes. Dada essa urgncia, as oportunidades para entendimento destes desafios esto surgindo de
diferentes atores sociais, como as Instituies de Ensino Superior IESs (GARCIA, 2006). Estas
instituies tm um potencial particularmente interessante na sociedade para facilitar as respostas
sociais aos mltiplos desafios sustentabilidade, enfrentados pelas comunidades ao redor do mundo
(STEPHENS et al., 2008). Assim sendo, as IESs tm claramente um papel fundamental a
desempenhar: a Educao para o Desenvolvimento Sustentvel (do ingls, Education for sustainable
development - ESD). Esta uma questo importante no Ensino Superior e que pode ser
frequentemente observada nos currculos e na cultura dessas instituies (DYER et al., 2006).
A ESD facilita o desenvolvimento de conhecimentos, habilidades e atitudes necessrias para
o enfrentamento dos desafios globais, sociais e ambientais. O estabelecimento de um sistema de
educao que incentive essas competncias e habilidades ajuda os alunos a desenvolverem um senso
crtico com relao ao contexto em que vivem (TORMEY et al., 2008). Nesse sentido, estudar as
atitudes dos estudantes em relao ao nvel de informaes sobre as estratgias de sustentabilidade
das IESs fundamental para analisar o quanto essas estratgias repercutem na formao dos futuros
profissionais (OWENS; HALFACRE-HITCHCOCK, 2006). E recentemente, est crescendo o
nmero de trabalhos cientficos que avaliam estas atitudes, principalmente aqueles que utilizam uma
abordagem de anlise de dados quantitativa.
Paralelamente a este fenmeno, muitos estudos so realizados trazendo tona uma
preocupao sobre o rigor cientfico da produo acadmica (CHURCHILL, 1979; EISENHARDT,
1989; KOUFTEROS, 1999). Trabalhos como os desenvolvidos por Churchill (1979) e Koufteros
(1999) oferecem estruturas para validao de escalas, que devem levar em considerao aspectos e
procedimento de extrema relevncia e que, infelizmente, so muitas vezes negligenciados nos estudos
da rea da administrao, assim como no contexto da sustentabilidade.
24
25
26
A educao formal indispensvel para modificar a atitude das pessoas, para que elas tenham
a capacidade de avaliar e abordar as suas preocupaes de desenvolvimento sustentvel. O
planejamento de aes sustentveis em IES envolve todo o campus. Alm disso, deve existir uma
misso educativa da IES, que respeite a identidade e cultura da comunidade acadmica (SARA et al.,
2009). Uma estratgia visa eliminar as barreiras mudana de comportamento e ao mesmo tempo
oferecer incentivos para o comportamento desejado (McKENZIE-MOHR; SMITH, 2006). Para uma
estratgia coerente associada sustentabilidade, a Instituio de Ensino Superior deve incorporar na
misso, viso, objetivos e cultura organizacional a filosofia da sustentabilidade. A estratgia com
foco sustentvel deve envolver reitores, pr-reitores, chefes de departamento e coordenadores de
cursos das Instituies de Ensino Superior (DJORDJEVIC; COTTON, 2011).
2.3 Prticas de educao e aprendizagem sustentveis
As universidades so instituies centrais para a aprendizagem individual e o avano do
conhecimento. Existe um baixo nmero de universidades que se esforaram para transformar-se, no
sentido de contribuir para um desenvolvimento sustentvel da sociedade. Estas, no entanto, devem e
podem responder de forma inequvoca a demandas externas. Nesse contexto, as universidades
necessitam atravessar as fronteiras de "organizaes polticas" para tornarem-se, em parte,
"organizaes de ao" (ALBRECH et al., 2007). Temas emergentes demonstram os benefcios de
reorientar a formao de professores, visando a influenciar positivamente sua futura prtica em
relao ao desenvolvimento sustentvel. Os educadores das universidades tm um papel nico,
ligando a pesquisa e a prtica, procurando as fronteiras do conhecimento com o objetivo de analisar
os desafios globais e as preocupaes humanas. Neste contexto, as IES podem proporcionar
oportunidades de reorientao para a sustentabilidade (TORMEY et al., 2008).
2.4 Prticas de criao de conhecimento sustentvel
A pesquisa um processo participativo e democrtico, preocupado com a prtica, tendo como
foco a busca de valiosos propsitos humanos. Ela procura reunir ao e teoria, reflexo e prtica, na
busca de solues prticas para as questes de preocupao premente para as pessoas (TORMEY et
al., 2008). O papel das IESs ainda no est explicitamente claro com relao s suas atividades de
ensino, pesquisa e envolvimento da sociedade, no que tange ao tema sustentabilidade. No entanto,
dada a importncia do ensino superior na sociedade e no potencial de aprendizagem (SCHOLZ et al.,
27
2000) este tem um potencial nico para catalisar e/ou acelerar uma transio social rumo
sustentabilidade (STEPHENS et al., 2008).
3 ASPECTOS METODOLGICOS
Como o objetivo declarado neste artigo o de propor a validao de uma escala, tomou-se
como base os princpios desenvolvidos por Koufteros (1999), que estimula a realizao desses
estudos sustentados pelos seguintes passos: (1) desenvolvimento do instrumento de pesquisa (base
terica; validade de contedo; pr-teste; reviso); (2) coleta de dados; (3) anlise fatorial entre blocos
(validade discriminante); (4) anlise fatorial no bloco (teste de uni dimensionalidade); (5)
fidedignidade. Os procedimentos realizados nos passos 1 e 2 estaro descritos na metodologia
deste trabalho (itens 3.2 e 3.4, respectivamente), enquanto que os demais passos seguiro descritos
na anlise dos dados.
3.1 Desenvolvimento e validao do instrumento de pesquisa para aplicao
Churchill (1999) afirma que a primeira etapa para a elaborao do instrumento de pesquisa
rever os componentes do problema, as hipteses e as caractersticas do grupo entrevistado, pois so
caractersticas que tm grande influncia na elaborao do questionrio. Nesse sentido, foi realizado
um levantamento e anlise de todos os 327 artigos publicados no International Journal of
Sustentability in Higher Education. Uma vez realizada a catalogao dos referidos trabalhos, foram
propostas possveis variveis a serem mensuradas por meio do instrumento de pesquisa, distribudas
em quatro dimenses (comunicao, estratgia, ensino e pesquisa). Ultrapassada esta etapa, foi
realizada a validao de contedo, como forma de verificar a representatividade do contedo em
questo e a medida utilizada.
3.2 Definio da amostra
O processo de delimitao da amostra inicia-se com a definio da populao, visto que a
amostra faz parte dos elementos da populao que compartilham algum conjunto comum de
caractersticas. Dessa forma, a populao representa o total de alunos de graduao matriculados em
cinco IES localizadas no Estado do Rio Grande do Sul. Nesse sentido, foi delimitado um grupo de
alunos para fazer parte da amostra. O nmero da amostra foi obtido atravs da tcnica de amostragem
no probabilstica por convenincia a qual, por sua vez, foi baseada no julgamento pessoal do
Caderno Profissional de Administrao UNIMEP, v.5, n.1, 2015
28
pesquisador, que no se utiliza de seleo aleatria. A amostra analisada nesta pesquisa continha,
inicialmente, setecentos e sessenta e trs estudantes distribudos nas cinco IES.
Dentre as IES que participaram do estudo, duas esto localizadas na capital do estado, sendo
que uma delas de grande porte, tendo aproximadamente 30.000 alunos, dentre os quais, 6.000 esto
matriculados no curso de Administrao. A referida IES reconhecida nacionalmente e
internacionalmente, em funo dos trabalhos que realiza no campo de ensino e pesquisa, alm de
exercer atividades ligadas gesto sustentvel. Dentro dessa linha, a instituio pblica anualmente
relatrio com as atividades realizadas na rea ambiental. A outra IES localizada em Porto Alegre/RS
possui unidades em Passo Fundo e Pelotas/RS e considerada de pequeno a mdio porte, tendo
aproximadamente 5.000 discentes, sendo que, destes, 400 alunos cursam administrao de empresas.
A IES publica um relatrio anual, que distribudo comunidade acadmica e um jornal de
periodicidade mensal, disponvel na internet. A Instituio busca promover uma poltica ambiental,
sensibilizando e comprometendo as partes interessadas, por meio de prticas voltadas para
conservao do meio ambiente e incluso social.
A terceira IES participante deste estudo pode ser considerada como de grande porte, estando
localizada no municpio de So Leopoldo/RS. Possui unidades tambm em Porto Alegre/RS e conta
com aproximadamente 30.000 alunos. No curso de administrao, consta, um nmero aproximado de
4.000 estudantes. Esta IES possui um sistema prprio de Gesto Ambiental (SGA Sistema de Gesto
Ambiental). Anualmente, divulgado balano social da instituio, sendo evidenciado o
relacionamento dos alunos com a responsabilidade social, por meio de atividades educativas para
fomentar a acelerao do aprendizado e conhecimento.
A quarta IES est localizada no municpio de Lajeado/RS, e tambm de pequeno a mdio
porte, possuindo 6.315 alunos matriculados em 39 diferentes cursos de graduao, com
aproximadamente 500 discentes no curso de administrao. A referida instituio possui diversos
programas associados responsabilidade socioambiental. Dentre esses, destacam-se as aes
relacionadas preservao do Vale do Taquari, utilizao consciente de automveis, convnios com
cooperativas recicladoras e projeto para utilizao de energia renovvel.
Por fim, a quinta IES participante desta pesquisa pode ser considerada de pequeno a mdio
porte e est localizada na serra gacha, mais precisamente no municpio de Caxias do Sul, tendo,
matriculados, aproximadamente 7.000 alunos, dos quais 840 esto cursando administrao de
empresas. A IES, h mais de seis anos, desenvolve atividades e prticas sustentveis no ensino e
pesquisa, possuindo um jornal de circulao interna que aborda as prticas organizadas pela
instituio e sua comunidade acadmica.
29
30
31
Aps realizada a purificao da base de dados e antes de partir para a terceira etapa proposta
por Koufteros (1999) para validao de um instrumento de pesquisa quantitativo, realizaram-se os
testes de Kaiser-Meyer-Olkin (KMO) e de esfericidade de Bartlett, pois ambos demonstram que a
realizao da anlise fatorial apropriada. O teste de KMO quantifica o grau de intercorrelaes entre
as variveis (STEWART, 1981; HAIR et al., 2002). De acordo com Malhotra (2002), devem ser
aceitos valores acima de 0,5. J o teste de esfericidade de Bartlett apresenta a probabilidade estatstica
de a matriz ter correlaes significantes (p<0,001) entre pelo menos algumas das variveis (HAIR et
al., 2002). Ambos os testes realizados demonstraram valores apropriados para a realizao da anlise
fatorial, j que os ndices obtidos foram bastante adequados (KMO = 0,924; esfericidade de Barlett =
0,000).
Antes, ainda, de partir para anlise fatorial, refletiu-se sobre o nmero de respondentes
constantes na amostra (663) em relao ao nmero total de variveis utilizadas no estudo (16), a fim
de evitar que os fatores extrados pela anlise fatorial sejam especficos da amostra, sem possibilidade
de generalizaes (HAIR et al., 2002). Hair et al. (2002) sugerem que, para cada varivel, deve haver,
no mnimo, cinco observaes, ou seja, numa situao limite, deveria haver no mnimo 80
respondentes. Como, nesta pesquisa, foram aplicados 663 questionrios, obteve-se uma mdia de 42
observaes por varivel, o que fica muito acima do limite proposto.
Efetivadas as etapas preliminares descritas anteriormente, partiu-se, ento, para o passo 3 do
processo de validao do instrumento de pesquisa, que a realizao da anlise fatorial entre blocos
(KOUFTEROS, 1999). Como informado anteriormente, o passo trs caracterizado pela realizao
da anlise fatorial exploratria entre blocos, ao invs de realizar a mesma anlise nos
blocos/dimenses (intra-bloco). Esta anlise permite identificar se as variveis de cada
bloco/dimenso convergem entre si e no com as variveis dos outros blocos/dimenses
(CHURCHILL, 1999). Confirmada esta situao, pode-se constatar a validade discriminante dos
fatores (FORNELL; LARCKER, 1981), que o objetivo proposto na terceira etapa de validao da
escala de Koufteros (1999).
Para a realizao da anlise fatorial entre os blocos, partiu-se dos conceitos desenvolvidos e
modelos referenciais que tiveram como base a catalogao dos trezentos e vinte e nove estudos
publicados no International Journal of Sustentability in Higher Education. Diante disso, definiu-se
como forma de extrao o nmero de fatores igual a 4, mesmo nmero de categorias dos recursos
propostos nesta pesquisa, quais sejam: comunicao, estratgia, educao e conhecimento. Alm
disso, aplicou-se como mtodo de anlise fatorial, a Anlise de Componentes Principais (ACP) e a
rotao ortogonal Varimax, a partir dos dezesseis itens do questionrio aplicado. A ACP leva em
considerao a varincia total nos dados, enquanto o mtodo Varimax minimiza o nmero de
Caderno Profissional de Administrao UNIMEP, v.5, n.1, 2015
32
variveis com altas cargas em um fator, o que acaba facilitando a interpretao das dimenses. A
formao dos fatores obedeceu a dois critrios: o grau de associao entre as variveis, encontrado
atravs das cargas fatoriais, e o grau de subjetividade.
Realizada a anlise com todas as 16 variveis do estudo, observou-se que a pergunta nmero
4 do fator Prticas de educao e aprendizagem sustentveis (na biblioteca da minha faculdade
devem existir livros sobre sustentabilidade), estava com baixa comunalidade (menor que 0,5). Dessa
forma, a mesma foi eliminada das anlises posteriores, conforme sugesto de Lewis e Byrd (2003).
A comunalidade representa a poro de varincia explicada pelos fatores comuns.
A tabela 1 apresenta uma sntese da anlise fatorial realizada entre os blocos (cargas fatoriais
das variveis e comunalidades), j excluda a varivel 4 do fator Prticas de educao e
aprendizagem sustentveis, que o passo 3 do processo de validao da escala (KOUFTEROS, 1999),
a qual permite identificar e discriminar os fatores. Os resultados apresentados confirmam a proposta
terica da diviso de todas as variveis em quatro dimenses/fatores (comunicao, estratgia, ensino
e pesquisa).
Tabela 1: Estrutura Fatorial
FATOR - Comunicao sustentvel da IES
1. A comunicao da minha faculdade/universidade deveria focar na
sustentabilidade.
2. Investir em comunicao que pregue a sustentabilidade algo
fundamental para uma faculdade.
3. Os alunos tero uma viso melhor no mercado se a faculdade investir
em uma comunicao associada ao meio ambiente.
4. Acho importante que a comunicao da minha faculdade trabalhe
com as questes do meio ambiente.
FATOR Estratgias e polticas sustentveis da IES
5. Acho certo uma universidade ter estratgias voltadas para o meio
ambiente.
6. A misso e a viso de uma empresa devem conter valores para o
meio ambiente.
7. O planejamento estratgico de uma faculdade deve se preocupar com
a sociedade.
8. A faculdade deve se preocupar com as sociedades que esto ao seu
redor.
FATOR Prticas de educao e aprendizagem sustentveis
9. O que ensinado no meu curso deve contemplar as questes
associadas ao meio ambiente.
10. Os professores devem usar exemplos associados ao meio ambiente.
11. Nos planos de ensino devem existir contedos que falem mais dos
problemas sociais.
FATOR Prticas de criao de conhecimento sustentvel
Cargas
fatoriais
Comunalidades
,746
,636
,771
,705
,768
,676
,752
,753
Cargas
fatoriais
Comunalidades
,544
,676
,564
,600
,847
,812
,851
,795
Cargas
fatoriais
Comunalidades
,762
,735
,800
,795
,727
,638
Cargas
fatoriais
Comunalidades
33
,531
,614
,740
,741
,782
,720
,766
,732
O conjunto de fatores extrados explica 70,83% da varincia total, o que muito bom em se
tratando de pesquisas sociais, onde a informao frequentemente menos precisa (HAIR et al., 2002).
4.3 Anlise Fatorial Intra-Blocos (Uni dimensionalidade)
Antes de realizar a anlise fatorial por blocos, importante ressaltar que, para cada fator,
dever haver no mnimo trs indicadores (variveis), a fim de que a AFE no bloco tenha graus de
liberdade disponveis para testar a hiptese de uni dimensionalidade. No caso das variveis utilizadas
neste estudo e validadas na etapa anterior, tem-se o seguinte nmero de variveis por fator:
Comunicao sustentvel da IES (4); Estratgias e polticas sustentveis da IES (4); Prticas de
educao e aprendizagem sustentveis (3), Prticas de criao de conhecimento sustentvel (4).
Diante disto, o pr-requisito de nmero mnimo de variveis por fator, est superado.
Partiu-se, ento, para a anlise fatorial por blocos, para verificao de suas uni
dimensionalidades (convergncias), a fim de verificar se as prticas constituintes dos fatores estavam
fortemente associadas entre si e se representavam um conceito nico (HAIR et al., 2002), evoluindo
na quarta etapa do processo de validao de Koufteros (1999). O resultado est disposto na tabela 2,
onde se apresentam as cargas fatoriais de cada varivel.
Tabela 2: Teste de Uni dimensionalidade
Variveis do questionrio
1. A comunicao da minha
faculdade/universidade deveria
focar na sustentabilidade.
2. Investir em comunicao que
pregue a sustentabilidade algo
fundamental para uma faculdade.
3. Os alunos tero uma viso
melhor no mercado se a faculdade
investir em uma comunicao
associada ao meio ambiente.
Comunicao
sustentvel da
IES
Fatores/Blocos
Estratgias
Prticas de
e polticas
educao e
sustentveis
aprendizagem
da IES
sustentveis
Prticas de
criao de
conhecimento
sustentvel
,791
,857
,813
34
,865
,804
,802
,866
,825
,861
,891
,778
,806
,849
,802
,845
Diante dos resultados apresentados, confirma-se a uni dimensionalidade para todos os fatores,
uma vez que todas as cargas fatoriais ficaram acima de 0,50 (MALHOTRA, 2006). Pode-se verificar
que a carga fatorial mais baixa foi a de 0,778 (v11), estando, portanto, bem acima do nvel desejvel.
Ressalta-se, ainda, que os ndices de KMO e esfericidade de Bartlett, pr-requisitos para realizao
da anlise fatorial, foram adequados (comunicao: KMO=0,818; p=0,000; estratgia: KMO=0,764;
p=0,000; ensino: KMO=0,671; p=0,000; pesquisa: KMO=0,796; p=0,000). Dessa forma, supera-se o
passo 4 do processo de validao proposto por Koufteros (1999), restando apenas a verificao de
fidedignidade (passo 5), que descrita no prximo item.
4.4 Confiabilidade e Consistncia Interna
35
Este procedimento foi utilizado para superar o passo 5, proposto no modelo para validao de
instrumentos de Koufteros (1999), o qual indica esta ltima etapa para constatar a fidedignidade dos
construtos (fatores/dimenses) utilizadas e o instrumento como um todo. Quanto mais prximo de 1
for o valor do alfa de Cronbach, maior ser a consistncia interna da medida (HAIR et al., 2002).
ndices de alfa menor que 0,6, indicam uma consistncia interna insatisfatria (MALHOTRA, 2006).
A tabela 3 apresenta os ndices encontrados nos constructos sugeridos nesta pesquisa.
Tabela 3 Validade Interna dos Constructos
Constructo
Comunicao sustentvel da IES
Estratgias e polticas sustentveis da IES
Prticas de educao e aprendizagem sustentveis
Prticas de criao de conhecimento sustentvel
Total
de Cronbach
0,851
0,839
0,798
0,842
0,921
Diante dos resultados apresentados, observam-se valores altamente satisfatrios, uma vez que
o menor ndice foi de 0,798, ao passo que o valor mnimo aceitvel 0,6 (MALHOTRA, 2006). Dessa
forma, conclui-se a ltima etapa para validao do instrumento de pesquisa que norteou este trabalho.
5 CONSIDERAES FINAIS
Como grande contribuio deste estudo, apresenta-se a construo de uma nova escala na rea
de estudos de sustentabilidade, que poder ser aplicada ao contexto de Instituies de Ensino
Superior. A elaborao preliminar do instrumento de pesquisa teve como base a catalogao de 327
estudos publicados no International Journal of Sustentability in Higher Education. Outro grande
resultado desse trabalho foi a adaptao e execuo do processo tradicional do paradigma de
construo e medio de instrumentos proposto por Koufteros (1999). No Brasil, poucos trabalhos
acadmicos na rea de administrao fizeram uso de tal procedimento metodolgico.
Partindo do paradigma de construo de instrumentos de pesquisa de Koufteros (1999), foram
transpostas as seguintes etapas: 1) desenvolvimento do instrumento de pesquisa (base terica;
validade de contedo; pr-teste; reviso); 2) coleta de dados; 3) anlise fatorial entre blocos (validade
discriminante); 4) anlise fatorial no bloco (teste de uni dimensionalidade); 5) fidedignidade
(construtos e instrumento).
O processo de refinamento do instrumento de pesquisa resultou em um questionrio formado
por quatro dimenses de sustentabilidade (comunicao, estratgias, educao e pesquisa) e quinze
itens (questes), adequado realidade brasileira no contexto de IES. O instrumento final acabou
Caderno Profissional de Administrao UNIMEP, v.5, n.1, 2015
36
sendo o grande objetivo dessa pesquisa, cumprindo um dos objetivos estabelecidos no incio da
investigao. A obteno desse instrumento de grande valia, uma vez que, a partir de sua posse,
podem-se realizar medies sistemticas com relao capacidade da IES para desenvolver
atividades ligadas sustentabilidade, assim como para buscar o desenvolvimento de pessoas cada vez
mais conscientes dos assuntos relacionados a este tema.
Com relao possibilidade de estudos futuros, os autores sugerem a realizao de pesquisas
utilizando a metodologia de Koufteros (1999), seguida neste trabalho, para a validao de outros
instrumentos, em outras reas de conhecimento da administrao. Sugere-se, tambm, a verificao
das influncias dos constructos propostos nesta escala, como fator de influncia na formao de
conscincia ecolgica de estudantes.
Algumas limitaes metodolgicas foram constatadas e devem ser detalhadas para efeito da
compreenso dos resultados. A primeira delas diz respeito composio da amostra no
probabilstica por convenincia, que pode causar algum vis nos resultados. Desse modo, os
resultados devem ser apreciados sob a perspectiva da amostra considerada, no devendo ser
generalizados. Sugere-se que novas coletas sejam efetuadas com amostragem probabilstica,
permitindo ou no a confirmao dos resultados encontrados nesta pesquisa.
REFERNCIAS
ALBRECH, P.; BURANDT, S.; SCHALTEGGER, S. Do sustainability projects stimulate
organizational learning in universities? International Journal of Sustainability in Higher
Education, Vol. 8, N. 4 p. 403-415, 2007.
BACON, C. M. et al, A. The creation of an integrated sustainability curriculum and student praxis
projects. International Journal of Sustainability in Higher Education, Vol. 12, N. 2, p. 193-208,
2011.
CHURCHILL, G.A., Jr. A Paradigm for Developing Better Measures of Marketing Constructs.
Journal of Marketing Research. Vol. XVI. Fevereiro, p. 64-73, 1979.
37
CHURCHILL, G.A.,Jr. Marketing Research: Methodological Foundations. Orlando: The Dryden Press,
1999.
FORRANT, R.; PYLE, J. L. Globalization, universities and sustainable human development. Society
for International Development, Vol. 45 N. 3, p. 102-126, 2002.
GARCIA, F. J. L.; KEVANY, K.; HUISINGH, D. Sustainability in higher education: what is
happening? Journal of Cleaner Production, Vol. 14 N. 9-11, p. 757-760, 2006.
38
MA, X.; BATESON, D. J. A multivariate analysis of the relationship between attitude toward science
and attitude toward the environment. Journal of Environmental Education, Vol. 31 N. 1, p. 27-34,
1999.
McKENZIE-MOHR, D.; SMITH, W. Fostering Sustainable Behavior: An Introduction to
Community-based Social Marketing. Gabriola Island: New Society Publishers, 2006.
MILLER, T. R.; ERICKSON, T. M.; REDMAN, C. L. Transforming knowledge for sustainability:
towards adaptive academic institutions. International Journal of Sustainability in Higher
Education, Vol. 12, N. 2, p. 177-192, 2011.
NUNNALY, J.C. Psychometric Theory. 2nd Ed. New York,: McGraw-Hill Books,1978.
OLLIS, D.; KRUPCZAK, J. Teaching technology literacy: an opportunity for design faculty?
International Journal of Engineering Education, Vol. 22, N. 3, p. 665-671, 2007.
Caderno Profissional de Administrao UNIMEP, v.5, n.1, 2015
39
OWENS, K.A.; HALFACRE-HITCHCOCK, A. .As green as we think? The case of the College of
Charleston green building initiative. International Journal of Sustainability in Higher Education,
Vol. 7, N. 2 p. 114 -128, 2006.
SARA M. et al. Climate action planning at the University of New Hampshire.International Journal
of Sustainability in Higher Education, Vol. 10, N. 3 p. 250 - 265, 2009.
SETHI, V.; KING, W. Construct Measurement in Information Systems Research. Information
Systems Research, V.22, N. 3, 1991.
SHARP, L. Green campuses: the road from little victories to systemic transformation. International
Journal of Sustainability in Higher Education, Vol. 3 N. 2, p. 128-145, 2002.
STEPHENS, J. C. et al. Higher education as a change agent for sustainability in different cultures
and contexts. International Journal of Sustainability in Higher Education, Vol. 9, N. 3 p. 317338, 2008.
STRAUB, D.W. Validating Instruments in MIS Research. MIS Quaterly, Vol. 13, N. 2.p. 147-169,
1989.
TORMEY, R. et al. Working in the action/research nexus for education for sustainable development:
Two case studies from Ireland. International Journal of Sustainability in Higher Education, Vol.
9, N.4, p. 428 - 440, 2008.
40