System Art: Contextual Switch (Generatable Automatic Systems)

2/18/2025, 9:59:03 AM | Jeanyoon Choi

Original Notes (Pre-LLM)

System Art - Structurally it can be modelled in state-based graph-like structure. Multiple-state based structure.

Multi-Device Web Artwork: INPUT Modalities → SYSTEM (Interconnection, G(V, E) Structure) → OUTPUT

Input → System → Output

At a high level, systems act as the interconnection of how input modalities can be transformed into output multi-channels. This system's interconnections can be block-based modularised, meaning that the subsection of the system can be interchangeable - Just as how a graph can have a subsectional sub-graph which is interchangeable with another subgraph.

Theoretically, let's say there's a System with a Graph A. If there is a subsectional Sub-Graph A → This can be substituted into a Sub-Graph B, C, D, … with a similar structure. (Graphical Decomposition)

"SUB-GRAPH SWAPPING - CONTEXTUAL CHANGE"

Refer to: Rozenberg, G. (ed.). Handbook of Graph Grammars and Computing by Graph Transformation. World Scientific, 1997

Conceptually, let's say there's a System Art: Automated System functioning within multi-channels. If the user can give a new context (new sub graph), and combine with the pre-defined mechanisms (the other part of the graph), a new system (new graph) is generated. This is also the mechanism of how Generative-X, Generative-Simulacra (Junk Sites, Biennales) might work. But it can also be applied & generalised in a wider application: Most generally about switching contexts. How about switching modalities? Switching spatial-temporal dimension?

Contextual switch within system art is definitely crystal clear.

This rapid contextual switch enables us to massively generate different systems: All same mechanisms, but with different context: At a high speed.

Generative - Automated System: We are generating the automated system by switching context easily. This is akin to how Andy Warhol mass-produced paintings by switching context (The flavour of the Campbell's Soups).

All of these following examples share Input (Contextual input) → System → Output structure:

Andy Warhol's Campbell's soup cans: Flavour → Soup Can → Soup Can with a Flavour

Biennales: Context/Theme → Curatorial System → Mass-Generated Biennales

Self-Help Book: Context/Theme → Automatic Tone & manner of Self-Help Book → Mess-Generated Self-Help Book

SoTA: Different Model → Sub-Automatic Architecture Generation → New Architecture

Wall-E Advertising Scene (Culture on the Axiom): Advertising 'Try Blue' → Immediate Trend Application & Button-based Interaction→ All people wearing blue https://www.youtube.com/watch?v=_xToQ4cIHkk

Book Industry (Or Media Art, or Newspaper…): New Buzzword (AI! Quantum!) → Automatic Book Generation & Media Art Generation & Newspaper Generation & Media Generation → All contents talking about new buzzword in a surface level

1984 (George Orwell): New Political Narrative/Event/Enemy → Hidden Graph Structure (Nodes - Ministries (Truth, Love, Plenty, Peace), Media Outlets, Public Events & Edges - Flow of propaganda, memory hole processes, censorship protocols) → New "Reality", New Newspapers, new map, new slogans

Kosuth-like System Art (Simple & Conceptual): New Word Input → Massive Recreation of Images & Videos & Designs & Visual Elements & UIs & Texts → New system which is about the new word, but which is dramatically detached from this new word (Not one and three chairs, but one and hundred, if not thousands, of ______ (Input Word)) (Memes, Hashtags, Trends? But maybe too obvious – Maybe not just independent visual elements are generated, but a whole new solid system is generated upon the new word? - Can be related to the buzz word (i.e. have more systematical detail)

(More complex society? Societal phenomenas?)

Financial Market: New External Financial Shock → People in charge (Wall St.) are not asked for responsibility, and other people get the negative effect (Obama Administration) → (In long-term) Financial Stability? Or the rich becoming richer, the poor becoming poorer?

More specifically - Financial Bubble: New Context (Tulip, Real Estate, .com, AI) → People so obsessed with the bubble → Suddenly explodes unexpectedly out of control

Educational Model: New Education Trend/Buzz → Nodes (Teachers, Curriculum, Tests) & Edges (Policies, Fundings, Incentives, Evaluation Criteria) → Change in classroom materials

Design & Aesthetics: New Design Trend → Nodes (Agencies, Clients Taste) & Edges (Flow of Design Trends (Via Instagram/Media), Information, Designers Movement, Funding) → All New Design Outputs

(ChatGPT's old-school answers: Mainly focused on Visual states and visual outputs. My system art is not about visuals, but arguing that the system - society we're living in can be interpreted parallelly to these visual-based systems. But still can be partially referenced to create visual outputs)

Parametric Architecture: Parameter Sliders → Node/Graph Env → Output 3D Model

Algorithmic Art: Seed Values → Algorithm → Output

Semiotically: Contextual Signifier Changes → Meets with system signified (Differ from the contextual signified) which remains constant unchanged → New output

More surface-level signifiers! Copy without originals!

Higher detachment of Signifier - Signified (The original contextual signified), new relationship with the signifier - systematic/simulacrum signified.

Interaction-wise: User switches the context (detailed interaction might differ from the topic - Junk Site Context Switch might differ from the Junk Biennale Context Switch) and a new system is generated - The new system itself has an automatic feature. So the automatic system is already out there, and users can create new automatic systems by changing context.

Users first choose these new contexts carefully - putting and interconnecting their personal meanings. But over time, they change the context fastly, randomly, just for the sake of enjoying the interaction and the will-to-power they enjoy by creating new systems → Which successfully accuses the simulacrumness/generativeness/flaws of modern systems.

Also one suggestion: Shopping cart! Shopping is beautiful, it is the most significant indicator of how signifier and signified are detached in modern society. Maybe users can shop the context signifier! User shops! The Context! The buzzwords! Which are often considered very seriously within our context – users shop them! And as they shop, new system is automatically created - as light and as serious as how the contemporary system works! SHOPPING SHOPPING SHOPPING, SIGNIFIER → SHOP THE SIGNIFIER. SHOP-LIFT THE SIGNIFIER. Especially, as shopping is the symbol of lightness, it should be & must be combined with the most heavy & serious subject as possible.

English Version (LLM-Generated)

The concept of System Art can be modeled as a state-based, graph-like structure composed of multiple interconnected states. In this framework, multi-device web artwork can be described by the following process:

Input Modalities → System (Interconnection, represented as a Graph G(V, E)) → Output

At its core, the system functions by transforming various input modalities into outputs across multiple channels. These interconnections are modular and can be decomposed into block-based subsections; that is, a section of the system can be interchanged with another, analogous to replacing a subgraph within a larger graph structure. For example, consider a system represented by Graph A. If there exists a subsection of Graph A, it could theoretically be replaced by an alternative subgraph—say Graph B, C, or D—provided it maintains a similar structural configuration. This idea of “subgraph swapping” leads to contextual change and is supported by literature such as Rozenberg’s Handbook of Graph Grammars and Computing by Graph Transformation (World Scientific, 1997).

Conceptually speaking, imagine a system art that operates automatically across multiple channels. If a user provides a new context—equivalent to inputting a new subgraph—and combines it with pre-established system components, a new system is generated. This mechanism underlies processes observed in generative art and simulacra, as seen in phenomena like junk sites or art biennales. However, the underlying principles can be generalized beyond these examples. Essentially, the framework is about switching contexts—and potentially even modalities or spatial-temporal dimensions—to create new outputs rapidly.

This rapid contextual shift allows the mass generation of new systems that share the same underlying mechanisms, yet differ in context. In other words, by easily switching contexts, one can generate a variety of automated systems, much like how Andy Warhol mass-produced paintings through subtle contextual changes (e.g., variations of the Campbell’s Soup cans).

Several examples further illustrate this general structure—Input (Contextual Input) → System → Output—across different domains:

• Andy Warhol’s Campbell’s Soup Cans: An initial flavour (context) is input, transformed through a systematic process, resulting in a series of soup cans each imbued with a new “flavour.”

• Biennales: A given theme or contextual input is processed by a curatorial system, leading to the mass generation of art biennales.

• Self-Help Books: A contextual input or theme feeds into an automatic tone generation system, yielding a mass-produced body of self-help literature.

• State-of-the-Art (SoTA) Architectural Models: Different design models serve as input, processed by a sub-architectural generation system to produce novel architectural forms.

• Media Phenomena (e.g., the Wall-E Advertising Scene): An advertising prompt or trend (e.g., “Try Blue”) triggers an automatic interaction system that culminates in a widespread trend adoption.

• The Book or Media Industry: A newly coined buzzword “AI” or “Quantum” is rapidly adopted by media generation systems, which produce content that superficially references these concepts.

• George Orwell’s 1984-like Scenarios: A new political narrative or enemy is integrated into a hidden graph structure—consisting of nodes (e.g., Ministries of Truth, Love, Plenty, Peace), media outlets, public events, and the processes of propaganda, censorship, and memory erasure—thereby establishing a new “reality” complete with updated newspapers, maps, and slogans.

• Kosuth-like System Art: A single new word may serve as input to a system that leverages image, video, design, and textual elements to construct an entirely new system that both references and departs from the original word. This process can be analogized with the evolution of memes, hashtags, or trends, where the relationship between signifier and signified is reconfigured.

Beyond the visual realm, the notion of System Art can be analogously applied to complex societal phenomena, such as:

• Financial Markets: An external financial shock is integrated into systems where those in charge (e.g., Wall Street) avoid accountability, leading in the long term to financial stabilization challenges or increasing economic inequality.

• Financial Bubbles: A contextual input—whether related to tulip mania, real estate, the dot-com boom, or AI hype—can drive obsessive market behavior that ultimately culminates in a sudden and uncontrollable burst.

• Educational Models: A new educational trend or buzzword transforms systems comprising teachers, curricula, and standardized tests (nodes), all interconnected by policies, funding, incentives, and evaluation criteria (edges), resulting in a systemic shift in classroom materials.

• Design and Aesthetics: Emerging design trends among agencies and client preferences, mediated by flows of information through media and social platforms such as Instagram, yield entirely new design outputs.

From a semiotic perspective, the process can be understood as a transformation where a shift in the contextual signifier interacts with a persistent system signified. This interaction engenders a new output that departs from the original contextual signified, thus altering the relationship between signifier and signified. These changes may manifest in surface-level copy or in more profound systemic alterations.

In terms of user interaction, the system allows users to switch contexts—each with its own distinct interaction dynamics—thereby generating new automatic systems. Over time, users may carefully select these new contexts, imbuing them with personal meaning. Alternatively, they might change contexts rapidly and randomly, simply enjoying the interaction and the creative empowerment that comes from generating new systems. This process indirectly critiques the simulacra and generative flaws inherent in modern systems.

One fascinating suggestion is the analogy to a shopping cart, symbolizing how signifiers and signified detach in contemporary society. In this metaphor, users “shop” for context signifiers—buzzwords and themes—while simultaneously generating new systems in a process that mirrors modern consumer culture. The act of shopping, emblematic of lightness and transient pleasure, contrasts sharply with the heavy, serious subject matter often embedded in these systems.

In summary, whether through parametric architecture (with parameter sliders generating 3D models) or algorithmic art (where seed values feed into algorithms producing diverse outputs), the underlying principle remains the same: by altering the input context, the system produces new and distinctive outputs that reinterpret existing structures. This approach bridges visual, social, and semiotic domains, offering a comprehensive framework for understanding and generating art and phenomena in our contemporary society.

Korean Version (LLM-Generated)

다음은 원문을 전문적이고 체계적인 방식으로 재구성한 글입니다.

──────────────────────────────

1. 시스템 아트와 그래프 기반 구조

시스템 아트는 상태 기반의 그래프 구조로 모델링할 수 있으며, 이는 다중 상태 기반 구조로 확장된다. 다중 기기 웹 아트워크의 경우, 입력(input) 모달리티들이 상호 연결(interconnection)되는 시스템(G(V, E) 구조)을 거쳐 출력(output)으로 전개된다. 전체적인 관점에서 볼 때, 시스템은 입력 모달리티가 출력의 다채널로 변환되는 연결고리로 기능하며, 이러한 연결 구조는 블록 기반 모듈화가 가능하다. 즉, 시스템의 하위 섹션은 서로 교환 가능한 모듈로 구성될 수 있는데, 이는 그래프 내의 일부 서브그래프가 다른 서브그래프와 교체될 수 있는 개념과 유사하다.

이론적으로, 어떤 시스템이 그래프 A를 갖는다고 가정할 때, 그 하위 부분인 서브그래프 A가 동일한 구조를 가진 서브그래프 B, C, D 등으로 대체될 수 있다(그래픽 분해, Graphical Decomposition). 이를 ‘서브그래프 스와핑 – 맥락 전환’이라 부르며, 자세한 내용은 Rozenberg (편집, Handbook of Graph Grammars and Computing by Graph Transformation, World Scientific 1997)를 참조할 수 있다.

──────────────────────────────

2. 자동화된 다중 채널 시스템 아트

개념적으로, 다중 채널 내에서 자동화된 시스템 아트를 고려할 때, 사용자가 새로운 맥락(즉, 새로운 서브그래프)을 제공하고 기존의 사전 정의된 메커니즘(그래프의 다른 부분)과 결합하면 새로운 시스템(새로운 그래프)이 생성된다. 이러한 메커니즘은 Generative-X 혹은 Generative-Simulacra(예: Junk Sites, Biennales)와 같이 작동할 수 있으며, 더 나아가 맥락 전환, 모달리티 전환, 또는 공간·시간적 차원의 전환 등 광범위한 응용 분야로 확장될 수 있다.

맥락 전환(contextual switch)은 시스템 아트 내에서 명확하게 정의된다. 이러한 빠른 맥락 전환은 동일한 메커니즘을 바탕으로 하지만 서로 다른 맥락을 적용함으로써 다채로운 시스템들을 고속으로 생성할 수 있게 한다. 다시 말해, 자동화된 시스템 생성은 맥락의 전환을 통해 손쉽게 구현되며, 이는 앤디 워홀(Andy Warhol)이 캔벨 수프 캔의 맥락을 전환하여 다량의 작품을 생산한 방식과 유사하다.

──────────────────────────────

3. 다양한 사례를 통한 구조 분석

아래는 모두 입력(맥락적 입력) → 시스템 → 출력의 구조를 공유하는 사례들이다.

① 앤디 워홀의 캔벨 수프 캔 작품

- 입력: 특정 맛(Flavour)

- 시스템: 수프 캔 구조

- 출력: 맛이 반영된 수프 캔

② 비엔날레(Biennales)

- 입력: 특정 맥락 혹은 주제

- 시스템: 전시 큐레이션 시스템

- 출력: 대규모 전시 혹은 비엔날레

③ 자기계발 도서

- 입력: 특정 맥락 혹은 주제

- 시스템: 자동화된 자기계발 문체 및 태도 생성 메커니즘

- 출력: 자동 생성된 자기계발 도서

④ 최신 기술(SoTA)

- 입력: 다양한 모델

- 시스템: 하위 자동화 아키텍처 생성

- 출력: 새로운 아키텍처 형성

⑤ 영화 '월-E(Wall-E)' 광고 씬 (Axiom 문화)

- 입력: 'Try Blue'와 같은 광고 메시지

- 시스템: 즉각적인 트렌드 적용 및 버튼 기반 상호작용

- 출력: 모두가 파란색을 입는 사회적 현상

⑥ 출판업계 혹은 미디어 아트, 신문 등

- 입력: 새로운 유행어(예: AI, Quantum 등)

- 시스템: 자동 도서 생성, 미디어 아트 및 신문 구성 시스템

- 출력: 표면적으로 새로운 유행어가 반영된 콘텐츠

⑦ 조지 오웰의 『1984』

- 입력: 새로운 정치적 내러티브, 이벤트 혹은 적

- 시스템: 은밀한 그래프 구조(노드: 진실, 사랑, 풍요, 평화 등 각 부처/미디어, 공공 이벤트; 에지: 선전, 기억 삭제, 검열 프로토콜 등)

- 출력: 새로운 현실, 신문, 지도, 슬로건 등

⑧ 코수스(Kosuth) 스타일의 시스템 아트 (단순하고 개념적인 방식)

- 입력: 새로운 단어

- 시스템: 이미지, 비디오, 디자인, 시각 요소, UI, 텍스트의 대대적 재생산

- 출력: 입력된 단어와 관련 있으나 원래의 맥락과는 드라마틱하게 분리된 새로운 시스템

(예: “하나와 세 개의 의자”가 아니라 “하나에 백 개 혹은 수천 개의 [입력 단어]” 등)

또한, 보다 복잡한 사회적 현상에 대해 살펴본다면:

⑨ 금융 시장

- 입력: 새로운 외부 금융 충격

- 시스템: 책임 소재가 불분명한 주체(예: 월 스트리트)와 부정적 영향을 받는 주체(예: 오바마 행정부 간의 상호작용)

- 출력: 장기적으로는 금융 안정성 문제 혹은 빈부 격차 심화

⑩ 금융 버블

- 입력: 새로운 맥락(튤립, 부동산, 닷컴 버블, AI 등)

- 시스템: 버블 현상에 집착하는 행태

- 출력: 통제 불능 상태에서 갑작스러운 폭발

⑪ 교육 모델

- 입력: 새로운 교육 트렌드 혹은 버즈

- 시스템: 노드(교사, 교육과정, 시험)와 에지(정책, 예산, 인센티브, 평가 기준)의 상호작용

- 출력: 교육 자료와 교실 환경의 변화

⑫ 디자인과 미학

- 입력: 새로운 디자인 트렌드

- 시스템: 노드(에이전시, 소비자 취향)와 에지(인스타그램·미디어를 통한 디자인 트렌드 흐름, 정보 교류, 디자이너 움직임, 자금 지원)

- 출력: 전혀 새로운 디자인 결과물

──────────────────────────────

4. 추가적 비교 및 응용

과거 ChatGPT의 답변이 주로 시각적 상태나 시각적 출력에 초점을 두었다면, 본 시스템 아트는 우리가 살아가는 사회 자체를 이러한 시각 기반 시스템과 병행하여 해석할 수 있음을 주장한다. 예를 들어, 파라메트릭 건축은 파라미터 슬라이더 → 노드/그래프 환경 → 3D 모델 출력의 과정을 통해, 알고리즘 아트는 시드 값 → 알고리즘 → 결과물 출력 과정을 통해 구현된다.

반면, 기호학적 관점에서는 맥락적 기호(signifier)의 변화가 존재하지만, 그와 상응하는 기호(signified)는 상대적으로 일정하게 유지된다. 즉, 표면적 기호들이 원본을 복제하면서도 본래의 맥락적 기호와 더욱 높은 분리도를 보인다. 결과적으로 기호와 의미 간의 새로운 관계가 생성되고, 이는 시스템적 혹은 시뮬라크라(simulacrum)적 형태로 나타난다.

사용자와의 상호작용에서는 사용자가 맥락을 전환함으로써 새로운 시스템이 자동으로 생성된다. 즉, 이미 구축된 자동 시스템 내에서 사용자가 맥락을 변경함으로써 또 다른 자동 시스템이 생성되는 것이다. 초기에는 사용자가 자신만의 맥락적 의미를 신중하게 선택하고 연결하지만, 시간이 지남에 따라 단순히 상호작용의 즐거움이나 생성 의지(power)를 위해 무작위로 빠르게 맥락이 전환된다. 이러한 과정은 현대 시스템의 시뮬라크라, 생성 특성, 그리고 본질적 결함에 대한 비판적 성찰로 이어진다.

한 가지 제안으로, 쇼핑 카트 개념을 들 수 있다. 쇼핑은 현대 사회에서 기호와 기의 분리가 어떻게 진행되고 있는지를 가장 잘 보여주는 지표이다. 사용자는 맥락적 기호, 즉 유행어나 버즈워드를 쇼핑하는 양상을 보이며, 이를 통해 새로운 시스템이 자동으로 생성된다. 이는 현대 시스템이 작동하는 방식처럼 가볍고도 심각한 특성을 동시에 띤다. 즉, 쇼핑 행위 자체가 '기호의 쇼핑', '기호의 옮기기(Shop-lift the signifier)'라는 새로운 메타포로 작동할 수 있는 것이다.

──────────────────────────────

결론

본 글은 시스템 아트를 상태 기반의 그래프 구조로 모델링하는 개념과, 입력과 출력 사이의 다층적 시스템 구성 및 맥락 전환의 중요성을 논의하였다. 다양한 사례를 통해 자동화된 시스템이 맥락의 변화에 따라 어떻게 재생산되고, 궁극적으로 현대 사회의 여러 현상(예: 예술, 금융, 교육, 디자인 등)과 유사한 메커니즘으로 작동하는지를 설명하였다. 이러한 접근 방식은 단순히 시각적 산출물에 국한되지 않고, 사회 전체의 구조와 상호작용을 이해하는 새로운 패러다임을 제시한다.

Tags

Text written by Jeanyoon Choi

Ⓒ Jeanyoon Choi, 2024