40

file caverna
file cave

41
 O FILE CAVE é uma parceria entre a Universidade Mackenzie e o Fes-
tival Internacional de Linguagem Eletrônica. O grupo de pesquisa em
Processamento Gráfico e Mídias Digitais apresentará o sistema CAVE
(caverna digital) pela primeira vez no FILE com obras de arte especial-
mente desenvolvidas para sistemas de alta imersão e interatividade.
Mackenzie-3D, Design Evolucionário e Sintonia: Exploração da In-
terface entre Arte e Tecnologia
O grupo de Processamento Gráfico e Mídias Digitais está vincula-
do à Faculdade de Computação e Informática da Universidade Ma-
ckenzie. O grupo, coordenado pelo Prof. Dr. Luciano Silva, é respon-
sável pela manutenção do Laboratório de Processamento Gráfico,
localizado dentro da mesma universidade, e desenvolve pesquisas
nas áreas de Computação Gráfica, Processamento Digital de Ima-
gens, Realidade Virtual e Aumentada, Visão Computacional e De-
senvolvimento de Jogos Digitais. O grupo colabora com diversas
universidades brasileiras como UFSCAR, UNESP, PUC-SP, COPPE-
RJ e USP, além de empresas como Noosfera Projetos Especiais,
Nornes Pesquisa e Desenvolvimento e Petrobras.
Dentro do binômio arte-tecnologia, o grupo estuda novos métodos
de acesso multimidiático a dados e fenômenos científicos, não se res-
tringindo somente ao signo visual. Emerge, destes novos métodos,
uma nova concepção de interação humano-computador denomina-
da sensorização científica, em substituição à tradicional visualização
científica. Dentro desse contexto, o grupo apresenta três projetos:
1. Mackenzie-3D: projeto que explora a coexistência de variáveis
temporais com informações geométricas geo-referenciadas. O con-
ceito de tempo internaliza o signo visual, oferecendo uma experiên-
cia única de percurso em ambientes arquitetônicos.
2. Design Evolucionário: signos evolutivos fundem-se com signos
visuais, para geração de novas formas geométricas, guiadas por res-
trições ambientais.
3. Sintonia: interface não-convencional, para geração de cená-
rios de realidade aumentada, produzidos a partir da fusão de dados
científicos com imagens de ambientes naturais.
Luciano Silva
42
FILE CAVE is a joint effort between Mackenzie University and the
Electronic Language International Festival. The Graphic Process-
ing and Digital Media research group will present CAVE (digital
cave) system for the first time in FILE with artworks specially pro-
duced for high immersion and interactivity systems.
Mackenzie-3D, Evolutionary Design and Syntony: Exploring the
Interface between Art and Technology.
The Graphic Processing and Digital Media group is linked to the
School of Computing and Informatics of Mackenzie University. Co-
ordinated by Prof. Luciano Silva, PhD, the group is responsible for
the Graphic Processing Laboratory, located at the same university,
and develops research in Computer Graphics, Image Digital Pro-
cessing, Virtual and Augmented Reality, Computer Vision and De-
velopment of Digital Games. The group collaborates with several
Brazilian universities, such as UFSCAR, UNESP, PUC-SP, COPPE-
RJ, and USP, and also with companies like Noosfera Special Proj-
ects, Nornes Research and Development and Petrobras.
Within the binomial art-technology, the group studies new meth-
ods of multimedia access to data and scientific phenomena, but is
not restricted to the visual sign alone. From these new methods a
new conception for the interaction between humans and comput-
ers emerges, now called scientific sensorization, replacing the tra-
ditional scientific visualization. In this context, the group presents
three projects:
1. Mackenzie-3D: a project exploring the coexistence of time vari-
ables with geometric geo-referenced information. The concept of
time internalizes the visual sign, providing a unique experience for
moving about in architectural environments.
2. Evolutionary Design: evolutive signs merge with visual signs to
create new geometric shapes, guided by environmental restrictions.
3. Syntony: a non-conventional interface to create sets of aug-
mented reality, produced from the fusion of scientific data with im-
ages of natural environments.
Luciano Silva
43
 ia,
sé Wagner Garc
Luciano Silva, Jo elia
m ar Fr ang o Si lveira, Maria Am Signos evolutivos fundem-se Evolutive signs merge with familiarizados com a realidade pected both for those familiar As palavras se descolam cada Words peel faster and faster,
Is
lva Lopes com signos visuais, para gera- visual signs to create new geo- virtual quanto para os que são with virtual reality and those vez mais depressa, as palavras struck words don't always re-
Eliseo e Fabio Si ção de novas formas geomé- metric shapes, guided by envi- novos à mídia. new to the medium. rebatidas nem sempre retor- turn to where they came from,
nário
Design Evolucio tricas, guiadas por restrições ronmental restrictions. É claro, a RV está longe de Of course, VR is far from be- nam para onde vieram, e as and words with nowhere to go
BRasil - brazil ambientais. ser a primeira ou única experi- ing the first, or only, virtual palavras sem lugar para ir se can break apart. Eventually,
ência virtual. Experimentamos experience. We experience the rompem. Com o tempo, quan- when too many are off the wall,
o virtual em memórias, sonhos virtual in memories, dreams do muitas saíram da parede, the rest peel loose, swirl around
– até ao imaginar o que poderí- – even in imagining what we as demais se soltam, giram ao the reader, and collapse. Play-
amos ter dito. O texto de Scre- might have said. Screen's text redor do leitor e caem. Jogar ing "better" and faster keeps
en explora momentos em que a explores moments when the "melhor" e mais rápido evita this at bay, but longer play ses-
experiência virtual da memória virtual experience of memory isso, mas sessões mais longas sions also work the memory text
se sobrepõe à vida cotidiana. A overlays itself on everyday life. de jogo também levam o texto into greater disorder through
interação de Screen dramatiza Screen's interaction drama- de memória a maior desordem misplacements and neologisms.
o que acontece quando a me- tizes what happens as memory através de colocações erradas While the discussion of the re-
mória se separa – e os esforços comes apart – and the efforts e neologismos. Enquanto a dis- lationship between games and
que fazemos para mantê-la no we make to keep it in place. cussão da relação entre jogos e literary forms is longstanding,
lugar. Ambas estão conectadas Both are connected to the body, formas literárias é antiga, Scre- Screen uses text as play mate-
ao corpo, e por isso exigem sua and for this reason require its en usa o texto como material de rial in a way that this discussion
abordagem incomum à RV. unusual approach to VR. jogo de uma maneira que esta has not previously explored.
Especificamente, Screen inicia Specifically, Screen begins as discussão não explorou antes. In addition to creating a new
como uma experiência de leitura a reading and listening experi- Além de criar uma nova forma form of bodily interaction with
e audição. Textos de memória ence. Memory texts appear on de interação corporal com o texto text through its play, Screen
aparecem nas paredes da Cave, the Cave's walls, surrounding através do jogo, Screen move o moves the player through three
rodeando o leitor. Então palavras the reader. Then words begin jogador por três experiências de reading experiences – beginning
"Screen" é um projeto de re- Screen is a virtual reality começam a se soltar. O leitor per- to come loose. The reader finds leitura – começando pelo texto with the familiar, stable, page-
roll, alidade virtual que subverte as project that upends VR con- cebe que pode rebatê-las com a she can knock them back with familiar, estável, como página like text on the walls, followed
ip -F r u in , Josh Car convenções da RV – as que cor- ventions – ones that cut across mão, e a experiência se torna her hand, and the experience nas paredes, seguido da leitura by the word-by-word reading
dr enlee,
Noah War r , S hawn Gre tam o campo desde o mundo da the field from the art world uma espécie de jogo – enquanto becomes a kind of play – as palavra a palavra de descolar e of peeling and hitting (where
Robert C
o o v e ” Shine
l a in e B e n “Sascha arte até os videogames comer- through commercial video mecânicas conhecidas de jogo well-known game mechanics rebater (onde a atenção se con- attention is focused), and with
cC
Andrew M ciais. Ela faz isso ao de desen- games. It does this by unfold- recebem nova forma através da are given new form through centra) e com mais consciência more peripheral awareness of
rolar mais sobre a passagem do ing more through the passage interação corporal com o texto. bodily interaction with text. At periférica dos arranjos de pala- the arrangements of flocking
SCREEN ited state
s tempo do que na navegação pelo of time than navigation through Ao mesmo tempo, a linguagem the same time, the language of vras esvoaçantes e o novo (mui- words and the new (often ne-
nidos - un
estados u espaço, enfatizando o espaço do space, by emphasizing the do texto, junto com a experiência the text, together with the un- tas vezes neologístico) texto sen- ologistic) text being assembled
outros)
Threw e ers) público sobre um mundo virtual space of the audience over an assombrosa de tocar as pala- canny experience of touching do montado nas paredes. Como on the walls. As an alternative,
n B oy d , Barry rew , and oth
S te p h e a r r y T h imaginário, e enfatizando o tex- imagined virtual world, and by vras, cria uma experiência que words, creates an experience alternativa, um jogo literário para literary game for virtual reality,
ões de Boyd, B
ntribuiç Stephen to e o som mais que gráficos e emphasizing text and sound não se instala facilmente nas that doesn't settle easily into realidade virtual, Screen oferece Screen offers an opportunity to
(com co u ti o ns from
ntr ib
(with co pixels. O resultado é algo ines- rather than pixelated graphics. maneiras habituais de pensar the usual ways of thinking about uma oportunidade de reconside- reconsider playing, reading, and
perado, tanto para os que estão The result is something unex- em jogo ou RV. gameplay or VR. rar o jogo, a leitura e o virtual. the virtual.

44 45

, Joachim
a r g o l is , J.P. Lewis
t, Todd M orio, Jurg
en P.
Ruth Wes ie l T e n e d
, Dan
Gossmann Singh
Rajvikram
Schulze,
ilico
ATLAS in s tates
nidos - united s ATLAS in silico é um ambien-
Estados u te virtual interativo e imersivo
que utiliza – e oferece um en-
contro estético com – dados
metagenômicos de microrga-
nismos marinhos da Expedição
de Amostragem Oceânica Global
(Global Ocean Sampling Expedi-
tion, GOS). Este trabalho é uma
colaboração de arte e ciência
em grande escala, abrangendo
disciplinas da realidade virtual,
exibição auditiva e sonorização,
visualização, música eletrônica,
artes de novas mídias, metage-
nômica, computação gráfica e
computação de alto desempe-
nho, tudo isso envolvido em um
processo de trabalho que com-
bina prática artística com inves-
tigação. Os participantes experi-
mentam um ambiente construído
como um padrão auditivo onírico,
luminoso, visual e auditivo que
é ao mesmo tempo dinâmico
e coerentemente estruturado,
mas revela suas características
quando os participantes per-
turbam o padrão através de sua
exploração. Por essa interação
com padrões visuais e auditivos
múltiplos conduzidos por dados
em diferentes níveis de detalhe,
os usuários exploram os dados
do GOS em combinação com me-
tadados contextuais em vários
níveis de escala e resolução.
Conduzido pelo J. Craig Venter
Institute, o it GOS estuda a gené-
tica de comunidades de micror-
ganismos de todos os oceanos
46
ATLAS in silico is an inter-
active and immersive virtual
environment that utilizes, and
provides an aesthetic encoun-
ter with, metagenomics data of
marine microorganisms from
the Global Ocean Sampling
Expedition (GOS). This work is
a large-scale art-science col-
laboration encompassing the
disciplines of virtual reality, au-
ditory display and sonification,
visualization, electronic music,
new media arts, metagenomics,
computer graphics, and high-
performance computing all of
which are engaged in a working
process combining artistic prac-
tice with inquiry. Participants
experience an environment
constructed as a dream-like,
luminous, visual and auditory
pattern that is at once dynamic
and coherently structured, yet
which reveals its characteristics
as the participant disturbs the
pattern through their explora-
tion. Through this interaction
with multiple data-driven visual
and auditory patterns at differ-
ent levels of detail users explore
GOS data in combination with
contextual metadata at various
levels of scale and resolution.
Conducted by the J. Craig
Venter Institute, the GOS
studies the genetics of com-
munities of microorganism
throughout the world’s oceans
resulting in a vast metagenom-
ics data set. The microorgan-
isms under study sequester
carbon from the atmosphere
with potentially significant im-
pacts on global climate, yet the
mechanisms by which they do
so are poorly understood. In-
spired by the HMS Challenger
and HMS Beagle expeditions,
while a product of 21st Century
concerns and technologies,
the GOS is resonant with the
representational challenges
these historical expeditions
posed in the 19th Century. To
highlight the historical and
ongoing interplay between sci-
entific discovery and culture,
the installation contextualizes
GOS sequence data within en-
vironmental and social meta-
data from geographic regions
nearest the ocean locations
at which the microorganisms
were sampled, and combines
these to construct the visual
and auditory elements of the
virtual environment. This his-
toric linkage is also reiterated
by combining the aesthetics of
fine-lined copper engraving, li-
thography and grid-like layouts
of 19th Century scientific rep-
resentation with contemporary
digital aesthetics including 3D
wireframes, particle systems,
and spatialized multichannel
audio to generate the data-
driven virtual world.
Metagenomics gives us
a new view of nature that is
sequence-centric rather than
do mundo, resultando em um
vasto conjunto de dados meta-
genômicos. Os microrganismos
em estudo sequestram carbono
da atmosfera com impactos po-
tencialmente significativos no
clima global, mas os mecanis-
mos pelos quais o fazem são mal
compreendidos. Inspirado nas
expedições do HMS Challenger
e do HMS Beagle, enquanto é
um produto das preocupações
e tecnologias do século 21, o
GOS ecoa os desafios de repre-
sentação que essas expedições
históricas representaram no
século 19. Para salientar a in-
teração histórica e atual entre
descoberta científica e cultura,
a instalação contextualiza dados
sequenciais do GOS com meta-
dados ambientais e sociais das
regiões geográficas mais próxi-
mas dos locais do oceano onde
os microrganismos foram colhi-
dos, e combina-os para construir
os elementos visuais e auditivos
do ambiente virtual. Essa ligação
histórica também é reiterada
pela combinação da estética da
gravação em cobre e linhas fi-
nas, litografia e layouts da repre-
sentação científica do século 19
com a estética contemporânea
digital, incluindo estruturas de
fios em 3D, sistemas de partícu-
las e áudio espacializado multi-
canal para gerar o mundo virtual
conduzido por dados.
A metagenômica nos dá uma
nova visão da natureza que é
organism-centric. In parallel to
challenges that Darwin's work
on natural selection posed to
19th Century representations
of nature based on concepts
of species fixity, the new view
of nature provided by vast and
abstract metagenomics data,
such as the GOS, poses a fun-
damental challenge for our
ability in the 21st Century to
represent and intuitively com-
prehend nature as well as our
evolving relationship to it in a
time of global environmental
concern. Reaping the benefits
of this data requires transcend-
ing representational challeng-
es. Within ATLAS in silico, this
challenge becomes a visceral,
sensate experience of the ab-
straction of nature and culture
in to vast databases — a prac-
tice that reaches back to the
history of expeditionary science
of the 19th Century and which
continues in 21st Century expe-
ditions such as the GOS.
The installation was exhib-
ited at SIGGRAPH 2007, the
Ingenuity Festival Cleveland
2008, the Los Angeles Munici-
pal Art Gallery 2008 - 2009 and
is resident at the UCSD Cen-
ter for Research in Computing
and the Arts (CRCA) and Calit2
(California Institute for Tele-
communications and Informa-
tion Technologies) where it con-
tinues in active development.
http://atlasinsilico.net
rticipante intera-
Imagem 1 : Um pa
tal açã o ATLAS in silico
ge com a ins
au toe ste reográfica de
na exibição Varrier™ na
de pix els
100 milhões
Calit2.
ipant interacting
Image1 : A partic
LA S in silico installation
with the AT
er™ 10 0-million pixel
on the Varri
ph ic display at Calit2.
autostereogra
a
Imagem 2: Objetos de form
stros
gramática para vários regi
do GOS (projeções em 2D).
objects
Image 2: Shape grammar
for several GOS records (2D
projections).
centrada em sequências, mais
que em organismos. Parale-
lamente às mudanças que o
trabalho de Darwin sobre a se-
leção natural representou para
a representação da natureza no
século 19 baseada em conceitos
de fixidez das espécies, a nova
visão da natureza fornecida
por vastos dados metagenô-
micos abstratos, como o GOS,
representa um desafio funda-
mental para nossa capacidade
no século 21 de representar e
intuitivamente compreender a
natureza, assim como nossa re-
lação evolutiva com ela em um
tempo de preocupação ambien-
tal global. Colher os benefícios
desses dados exige transcender
os desafios representacionais.
Em ATLAS in silico, esse desafio
se torna uma experiência visce-
ral e sensata de abstração da
natureza e da cultura em vastos
bancos de dados – prática que
remonta à história da ciência
expedicionária do século 19 e
que continua no século 21 em
expedições como a do GOS.
A instalação foi exibida em
SIGGRAPH 2007, Ingenuity Festi-
val Cleveland 2008, Los Angeles
Municipal Art Gallery 2008-2009
e é residente no UCSD Center for
Research in Computing and the
Arts (CRCA) e Calit2 (California
Institute for Telecommunications
and Information Technologies),
onde continua em ativo desenvol-
vimento.http://atlasinsilico.net
47
 Brown
Sheldon
City
Scalable states
nido s - united
Estados U A última versão do projeto The latest version of the Scal- za uma variedade de mídias ao utilizes a variety of media mo- do algoritmo, oferecendo novas dominated by the affordances of
e
tal Gam
d o E x perimen Scalable City é uma instalação able City project is an installa- explorar a visualidade dessas dalities as it explores the visu- metodologias poderosas para the algorithm, offering powerful
r
é direto
Brown erimenta
l como exposição estereográ- tion as a stereographic display questões. Esta última encar- ality of these issues.  This lat- ver, organizar e compreender. new methodologies for seeing,
Sheldon A , U C S D
o f the Exp
C R C c to r fica no ambiente CAVE. Este in the CAVE environment. This nação, no visualmente imersivo est incarnation, in the visually The Scalable City é ao mesmo organizing and understanding.
Lab em the dire
Brown is UCSD projeto é uma visão dos níveis project is a look at increas- ambiente CAVE, completa um immersive CAVE environment, tempo uma indulgência nessas The Scalable City is both an in-
Sheldon R C A,
ab at C
Game L crescentes de algoritmização ing levels of algorithmicization colapso entre o reino da media- completes a collapse between qualidades, assim como uma dulgence in these qualities, as
que caracterizam nossos atos e that characterize our actions ção e o da realidade suposta. No the realm of mediation and that extrapolação dessas tendên- well as an extrapolation of these
percepções do ser e do mundo. and perceptions of the self and entanto, do projeto de Scalable of a supposed reality. However, cias, para nos permitir conside- tendencies, to allow us to con-
The Scalable City - um globo the world. The Scalable City - City, compreendemos que não from the Scalable City project, rar seus resultados. sider its outcomes.
de cidades, iniciado com dados a globe of cities, initiated with é uma simples proposta para we understand that it isn't a Assistência de: Erik Hill, Da- Assistance of: Erik Hill, Daniel
do mundo real - se transforma data from the real world - is distinguir entre o mediado e o simple proposition to distinguish niel Tracy, Robert Twomey, Kris- Tracy, Robert Twomey, Kristen
cada vez mais em um mundo increasingly transformed into real. Nossa visão de mundo é between the mediated and the ten Kho, Chris Head, Prakhar Kho, Chris Head, Prakhar Jain,
mais padronizado, sob a cres- a more patterned world, under uma negociação entre como real. Our worldview is a continu- Jain, Todd Margolis, Alex Dragu- Todd Margolis, Alex Dragulescu,
cente influência cultural das the spreading cultural influence vemos, o que pensamos e como ous negotiation between how we lescu, Mike Caloud, Carl Burton. Mike Caloud, Carl Burton.
redes de estradas, ciclones de of networks of roads, cyclones representamos. Nossa atual see, what we think and how we Apoio de IBM, Intel, NSF, Vi- Support from IBM, Intel, NSF,
automóveis e arquitetura que se of automobiles and self-assem- condição é cada vez mais do- represent.  Our current condi- con, Intellectual Ventures, High Vicon, Intellectual Ventures,
autoconstrói. Este projeto utili- bling architecture. This project minada pelas disponibilidades tion is one that is increasingly Moon Studios. High Moon Studios.

48 49