AI 상위 스타트업은 연구를 거의 공개하지 않는다

Who Should Read

외부 모델 위에서 제품을 만들며 어떤 연구·기술을 공개할지 고민하는 AI 스타트업 개발자

Core Mechanics

• 원문 본문은 제공되지 않았다
  • 기사 본문이 비어 있어 글 자체의 사실은 확인할 수 없다
  • 아래 커뮤니티 반응은 댓글에서만 가져왔다

Community Reactions

• 공개 비용이 이익보다 크다는 의견
  • 연구를 공개하면 경쟁사가 바로 베껴 수익을 가져간다는 의견이 여러 개 나왔다
  • 연구가 순수 비용 항목이 된다는 주장도 있었다
• 논문은 투자 유치용이라는 경험
  • 한 스타트업에서 3년간 1티어 저널 게재를 시도하다 결국 프리프린트로 돌렸다는 경험이 나왔다
  • 두 번째 회사는 OpenAI·Anthropic이 결과를 따라 할까 봐 아무것도 공개하지 않는다고 했다
• 기사 해석에 대한 반론
  • 댓글에 따르면 논문은 인용 수를 중요도 대리 지표로 썼고 OpenAI가 누적 인용 1위였다
  • 상당수 스타트업은 논문 대신 블로그와 오픈소스로 공개한다는 경험도 있었다
• 연구 가치가 떨어진다는 우려
  • 블로그식 AI 연구가 근거 없는 주장을 늘린다는 의견이 있었다
  • 모두가 공개를 멈추면 업계 전체가 느려진다는 게임이론식 우려도 나왔다

How to Apply

• 우리 팀 공개 기준 한 장으로 정하기
  • 오늘 30분 동안 논문·블로그·오픈소스 중 무엇을 공개할지 팀 기준을 문서로 적어라
  • 경쟁사가 따라 하면 손해인 항목은 비공개로 분류해라

Terminology

관련 논문

• The Judge Can Debias Itself: LLM-as-a-Judge가 스스로 편향을 고치게 하는 법

  심사 프롬프트에 편향 경고를 넣거나 스스로 비판시켰더니 21개 중 20개 조합에서 정확도가 올랐다

• 미국 노동시간의 90%는 AI 벤치마크가 제대로 다루지 못하는 일이다

  벤치마크 29개를 직업 과제에 매핑했더니 노동시간 90%가 커버 밖

• Postgres 19, AI 코드 리뷰가 버그를 너무 많이 찾아 출시 연기

  LLM 코드 리뷰가 버그를 쏟아내 Postgres 19가 11월로 밀리고 기능 8~10개가 빠졌다

• StarSkirmish Bench v0.2: LLM이 1시간 만에 짜는 StarCraft 봇 대결

  LLM에게 1시간 동안 StarCraft 봇을 짜게 했더니 GPT-6 Astra가 1위

• 그럴듯한 설명 하나면 멀티모달 LLM 심사위원도 속는다 (JUPE 벤치마크)

  정답은 그대로 두고 설명만 붙였더니 MLLM 심사위원의 오답 거절률이 12.7~13.8%p 떨어졌다

• 신경망은 이미 깔끔하다: polysemanticity의 원인 재해석

  뉴런을 직접 들여다봤더니 대부분 한 가지 역할이 있었다는 주장

• Linus Torvalds의 첫 LLM 보조 패치 시리즈

  Linus가 LLM으로 folio 조회 패치 10개를 만들어 read() 벤치가 10배 빨라졌다

Related Resources

• https://www.science.org/content/article/ai-s-top-startups-are-barely-publishing-their-research