← 목록으로

Cost-Effective AI: The Competitive Edge Lies in Knowing What to Use, and When | BuntGames

2026-07-03 원문 보기 ⇗

Cost-Effective AI: The Competitive Edge Lies in Knowing What to Use, and When

https://www.youtube.com/watch?v=3CFHnZY8mmw

When people talk about AI, they usually begin by comparing models. Is GPT smarter? Is Claude better at coding? Is Gemini faster? Is Qwen good enough because it's free? But the longer you work with AI, the more you begin to notice something interesting. The real competition is no longer about the models themselves. What matters is who should think, who should execute, and who should review the final result. Increasingly, an AI system's effectiveness depends not on a single model, but on how multiple models and tools are organized into a team.

Anthropic's recent pricing for Fable 5 illustrates this shift perfectly. With pricing set at $10 per million input tokens and $50 per million output tokens, it places a premium on the highest level of reasoning. Naturally, a new question emerged among developers: Do we really need to use the most capable model for every step of the job? That question led to a workflow many developers now describe as the "10-80-10" strategy. The first 10 percent is handled by the most capable model, which defines the architecture and overall strategy. The middle 80 percent is delegated to lower-cost models that carry out the implementation and repetitive work. The final 10 percent returns to the strongest model for validation and review. It is not an official methodology but rather a pattern that has emerged independently across developer communities. The fact that so many people have arrived at the same conclusion suggests something important: in the age of AI, the most expensive resource is not computation—it is judgment.

In reality, this way of working is nothing new. Humans have organized work like this for generations. In software companies, team leaders define the direction, developers build the solution, and reviewers ensure quality before release. Architects design buildings, construction teams bring them to life, and inspectors verify that everything meets the required standards. Filmmaking follows the same pattern: directors shape the vision, cinematographers capture it, actors perform it, and editors refine the final story. Separating high-value judgment from labor-intensive execution has always been one of humanity's most effective productivity strategies. AI is simply bringing that organizational structure into the digital world.

The film Ocean's Eleven offers a perfect metaphor. Danny Ocean never opens the vault himself. He designs the plan. The explosives expert handles demolition. The hacker disables security. The acrobat infiltrates the target. None of them needs to be the smartest person in every discipline. Success comes from assigning the right person to the right role. AI agents are evolving in exactly the same direction.

One of the most important concepts emerging in today's AI industry is Agentic AI. Earlier AI systems mainly answered questions. Modern AI agents plan tasks, edit files, execute terminal commands, run tests, use external tools, and determine their own next actions. Tools such as Claude Code, Codex, Goose, Cline, and Aider all reflect this shift. The competition is no longer about who generates the best response. It is about who can successfully complete an entire workflow.

Interestingly, most of these tools are not AI models themselves. Goose, for example, is neither Claude nor GPT. It is an execution environment capable of orchestrating multiple models. It can connect to Anthropic, OpenAI, Google, or local models running through Ollama. Through the Model Context Protocol (MCP), it can also interact with GitHub repositories, databases, browsers, and countless external tools. Goose's value does not lie in creating the smartest AI. Its value lies in coordinating multiple AIs and tools so they function as a single team.

This is why asking whether Claude Code is better than Goose misses the point. Claude Code is an agent. Goose is also an agent. The real competitive advantage comes from deciding which models to connect, when to invoke them, and how to divide responsibilities between them. In other words, AI developers are gradually becoming architects of AI organizations rather than users of individual models.

This transformation is closely tied to the rise of local LLMs. Until recently, accessing advanced AI capabilities required cloud services. Today, anyone can install tools like Ollama or LM Studio, download models such as Qwen, DeepSeek, or Llama, and run powerful AI agents directly on a personal computer. One of the most common questions people ask is whether they need to train these models first. In most cases, the answer is no. Installation is enough. What matters is not additional training but context. Documents such as AGENTS.md and README are becoming increasingly important because they explain how a project is structured, what rules it follows, and what objectives the AI should respect. Instead of teaching AI new knowledge, we are providing it with the context needed to make good decisions.

The hardware tells the same story. Many people assume AI workloads demand the most powerful CPU available. In reality, GPU memory and overall system memory often matter much more. The most sophisticated reasoning tasks continue to rely on massive cloud GPU clusters, while repetitive implementation, testing, and refactoring can increasingly be handled on personal machines. Even computing resources are becoming specialized. Judgment belongs in the cloud. Repetition belongs on local hardware. AI is not replacing one environment with another—it is teaching them to work together.

Looking back, this evolution mirrors the history of computing itself. Early software attempted to pack every feature into one massive application. As the internet matured, software evolved into APIs, distributed systems, and microservices. Operating systems also became collections of specialized processes working together rather than monolithic programs. AI appears to be following the same path. At first, it seemed as though one gigantic model would eventually solve every problem. Instead, we are witnessing specialized AIs for planning, implementation, retrieval, testing, image generation, and voice processing working together as interconnected systems. Throughout the history of computing, tightly connected ecosystems have repeatedly outperformed isolated monoliths. AI is likely to follow the same trajectory.

From this perspective, AI development resembles filmmaking far more than factory automation. Directors create the vision. Cinematographers capture it. Actors perform it. Editors shape the final experience. Great films are never created by a single genius. They emerge from teams of specialists working together. AI is evolving in much the same way. Rather than relying on one all-powerful intelligence, it is becoming a collaborative system composed of many specialized intelligences.

As a result, perhaps the most valuable skill of the future will not be writing better prompts. It will be knowing which model should perform which role, how to assemble multiple AI systems into a coherent organization, and when to spend premium reasoning capacity versus when to rely on efficient, lower-cost models for repetitive work.

The future of AI is therefore unlikely to belong to one giant model that does everything. It is more likely to resemble a box of LEGO bricks, where specialized capabilities are assembled, combined, and reorganized as needed. One day Claude may design the architecture, Goose may coordinate execution, a local Qwen model may generate most of the code, GPT may perform automated testing, and the strongest reasoning model may conduct the final review. Eventually, users may not even choose these combinations themselves. They will simply describe the objective, while an invisible team of AI agents organizes itself behind the scenes.

For years, we have watched the race to build ever-smarter AI models. The next race may be fundamentally different. It will not be about creating a single genius. It will be about building the best possible team. Human roles are changing as well. Instead of solving every problem directly, we are becoming architects who decide which intelligence should make which judgment. In the age of AI, the most expensive resource is no longer tokens. It is the insight required to decide who should think, when they should think, and what decisions they should be trusted to make.

patreon.com

가성비 높은 AI 활용법, 적재적소를 판단하는 능력이 경쟁력이다

https://www.youtube.com/watch?v=3CFHnZY8mmw

사람들은 AI를 이야기할 때 모델부터 비교한다. GPT가 더 똑똑한지, Claude가 더 잘 코딩하는지, Gemini가 더 빠른지, Qwen은 무료라서 어디까지 쓸 만한지 이야기한다. 하지만 AI를 오래 사용할수록 흥미로운 사실 하나를 발견하게 된다. 이제 경쟁의 중심은 모델 자체가 아니다. 누구에게 생각을 맡기고, 누구에게 일을 시키며, 누가 마지막으로 결과를 검토할 것인가가 점점 더 중요해지고 있다. AI의 성능은 하나의 모델이 아니라 여러 모델과 도구를 어떻게 조직하느냐에서 결정되기 시작했다.

최근 Anthropic이 공개한 Fable 5의 가격 정책은 이런 변화를 상징적으로 보여준다. Fable 5는 입력 100만 토큰당 10달러, 출력 100만 토큰당 50달러로 책정되며 최고 수준의 추론 능력에 가장 높은 가격표를 붙였다. 자연스럽게 실무에서는 새로운 질문이 등장했다. "가장 뛰어난 모델을 모든 작업에 사용할 필요가 있을까?" 그 결과 개발자들 사이에서는 이른바 '10-80-10' 전략이 빠르게 퍼지고 있다. 처음 10%는 최고 성능 모델이 설계와 전략을 수립하고, 중간 80%는 상대적으로 저렴한 모델이 구현과 반복 작업을 수행하며, 마지막 10%는 다시 최고 성능 모델이 결과를 검토한다. 아직 공식적인 방법론이라기보다는 여러 개발자들의 경험에서 자연스럽게 수렴한 패턴이지만, 이 구조가 반복해서 등장한다는 사실은 중요한 의미를 가진다. AI 시대에도 가장 비싼 것은 계산량이 아니라 판단이라는 점이다.

사실 이런 구조는 전혀 새로운 것이 아니다. 인간은 오래전부터 같은 방식으로 일해 왔다. 소프트웨어 회사에서는 팀장이 방향을 정하고, 개발자가 구현하며, 다시 리뷰어가 품질을 검토한다. 건축에서는 건축가가 설계를 하고, 시공사가 공사를 진행하며, 감리가 마지막 검수를 담당한다. 영화 역시 감독이 전체 비전을 제시하고 촬영 감독과 배우, 편집자가 각자의 역할을 수행한다. 높은 판단력이 필요한 일과 많은 노동이 필요한 일을 분리하는 것은 가장 오래된 생산성 전략 가운데 하나였다. AI는 이 조직도를 디지털 세계로 옮겨오고 있을 뿐이다.

영화 <오션스 일레븐>도 같은 원리로 움직인다. 대니 오션은 금고를 직접 열지 않는다. 그는 계획을 세우고, 폭파 전문가는 폭약을 담당하며, 해커는 보안을 무력화하고, 곡예사는 침투를 수행한다. 모든 사람이 가장 뛰어난 천재일 필요는 없다. 중요한 것은 가장 적합한 사람이 가장 적합한 역할을 맡는 것이다. AI 에이전트 역시 점점 이런 조직 구조를 닮아가고 있다.

최근 AI 업계에서 가장 많이 등장하는 단어는 Agentic AI다. 과거의 AI가 질문에 답하는 도구였다면, 이제는 계획을 세우고, 파일을 수정하고, 터미널을 실행하며, 테스트를 수행하고, 스스로 다음 행동을 결정하는 에이전트가 중심이 되고 있다. Claude Code, Codex, Goose, Cline, Aider 같은 도구들이 모두 같은 방향을 향하고 있는 이유도 여기에 있다. 경쟁은 더 이상 누가 더 말을 잘하는가가 아니라, 누가 더 많은 일을 끝까지 완수할 수 있는가로 옮겨가고 있다.

흥미로운 것은 이들 대부분이 특정 모델이 아니라는 점이다. Goose를 예로 들면 Goose는 Claude도 아니고 GPT도 아니다. Goose는 여러 모델을 연결해 하나의 작업을 수행하는 실행 환경이다. Anthropic의 모델을 사용할 수도 있고, OpenAI의 모델을 사용할 수도 있으며, Gemini나 Ollama를 통해 로컬 LLM을 연결할 수도 있다. Model Context Protocol(MCP)을 이용하면 GitHub, 브라우저, 데이터베이스 같은 외부 도구와도 연결된다. Goose의 핵심 가치는 가장 똑똑한 AI를 만드는 것이 아니라, 서로 다른 AI와 도구를 하나의 팀처럼 움직이게 만드는 데 있다.

그래서 앞으로의 경쟁은 "Claude Code가 더 좋은가, Goose가 더 좋은가"라는 질문으로 설명되지 않는다. Claude Code 역시 하나의 에이전트이고, Goose 역시 하나의 에이전트다. 진짜 경쟁력은 어떤 모델을 연결하고, 어떤 순서로 호출하며, 어떤 기준으로 역할을 나누는지에 있다. 다시 말해 AI 시대의 개발자는 모델을 사용하는 사람이 아니라 AI 조직을 설계하는 사람이 되어 가고 있다.

이 변화는 로컬 LLM의 확산과도 자연스럽게 연결된다. 예전에는 최고 성능 AI를 사용하려면 반드시 클라우드 서비스에 접속해야 했다. 하지만 이제는 Ollama나 LM Studio를 설치하고 Qwen, DeepSeek, Llama 같은 모델을 내려받으면 개인 PC에서도 충분히 AI 에이전트를 운영할 수 있다. 많은 사람들이 "로컬 LLM을 사용하려면 학습을 시켜야 하나?"라고 묻지만, 대부분의 경우 답은 아니다. 설치만 하면 바로 사용할 수 있다. 필요한 것은 새로운 학습이 아니라 프로젝트의 맥락이다. AGENTS.md나 README 같은 문서가 중요해지는 이유도 여기에 있다. AI에게 새로운 지식을 주입하는 것이 아니라, 지금 어떤 프로젝트에서 어떤 규칙을 따라야 하는지를 알려주는 것이다.

하드웨어 역시 같은 방향으로 진화하고 있다. 사람들은 AI를 위해 가장 비싼 CPU가 필요할 것이라 생각하지만, 실제로는 GPU의 VRAM과 메모리 용량이 더 중요한 경우가 많다. 최고 수준의 추론이 필요한 작업은 여전히 클라우드의 거대한 GPU 클러스터가 담당하지만, 반복적인 구현과 테스트는 개인 PC에서도 충분히 처리할 수 있다. 결국 컴퓨팅 자원 역시 역할을 나누기 시작한 것이다. 판단은 클라우드가 맡고, 반복은 로컬이 맡는다. AI는 클라우드와 PC를 경쟁시키는 것이 아니라 서로 협력하게 만들고 있다.

돌이켜 보면 컴퓨터의 역사도 같은 방향으로 발전해 왔다. 초기의 소프트웨어는 하나의 거대한 프로그램 안에 모든 기능을 담으려 했다. 그러나 인터넷 시대가 열리면서 세상은 API와 마이크로서비스로 연결된 구조로 바뀌었다. 운영체제도 하나의 거대한 프로그램이 아니라 수많은 프로세스와 서비스가 협력하는 시스템으로 발전했다. AI 역시 비슷한 길을 걷고 있다. 처음에는 하나의 거대한 모델이 모든 문제를 해결할 것처럼 보였다. 그러나 시간이 지날수록 설계하는 AI, 구현하는 AI, 검색하는 AI, 테스트하는 AI, 이미지를 생성하는 AI, 음성을 처리하는 AI가 서로 협력하는 방향으로 진화하고 있다. 컴퓨터 산업은 언제나 거대한 하나보다 잘 연결된 여러 개를 선택해 왔고, AI 역시 예외가 아닐 가능성이 크다.

이 지점에서 AI 시대의 개발은 공장 자동화보다 영화 제작에 더 가까워진다. 감독은 이야기를 설계하고, 촬영 감독은 장면을 만들며, 배우는 연기하고, 편집자는 흐름을 완성한다. 영화는 한 명의 천재가 아니라 수많은 전문가의 협업으로 만들어진다. AI도 마찬가지다. 하나의 만능 지능이 모든 일을 해결하는 것이 아니라, 서로 다른 능력을 가진 AI들이 하나의 프로젝트를 위해 팀을 이루는 방향으로 발전하고 있다.

결국 앞으로 가장 중요한 능력은 프롬프트를 잘 작성하는 기술이 아닐지도 모른다. 어떤 모델에게 어떤 역할을 맡길 것인지 설계하는 능력, 여러 AI를 하나의 조직처럼 조립하는 능력, 그리고 언제 최고의 판단력을 호출하고 언제 비용 효율적인 모델에게 반복 작업을 맡길 것인지를 결정하는 능력이 더 중요해질 가능성이 크다.

그래서 AI의 미래는 하나의 초거대 모델이 모든 일을 대신하는 세상이 아닐 가능성이 높다. 오히려 레고 블록처럼 필요한 능력을 조립하고 해체하는 생태계에 더 가까울 것이다. 오늘은 Claude가 설계를 맡고, Goose가 작업을 관리하며, 로컬의 Qwen이 대부분의 코드를 작성하고, GPT가 테스트를 수행한 뒤, 다시 최고 성능 모델이 최종 검토를 담당하는 식이다. 앞으로는 사용자가 이런 조합을 일일이 지정하지 않아도 될 것이다. 하나의 목표만 제시하면, 뒤에서는 여러 AI가 스스로 역할을 나누고 협업하는 조직이 만들어질 가능성이 크다.

우리는 오랫동안 더 똑똑한 AI를 만드는 경쟁을 지켜봤다. 그러나 이제 시작되는 경쟁은 조금 다르다. 하나의 천재를 만드는 경쟁이 아니라, 가장 좋은 팀을 만드는 경쟁이다. 인간의 역할도 함께 바뀌고 있다. 직접 모든 문제를 해결하는 사람이 아니라, 가장 적합한 AI에게 가장 적합한 판단을 맡길 수 있는 조직 설계자가 되어 가고 있다. 결국 AI 시대에 가장 비싼 것은 토큰이 아니다. 가장 비싼 것은 언제, 누구에게, 어떤 판단을 맡길 것인지를 결정하는 설계자의 통찰이다.

FROM BUNTGAMES.COM