클라우드플레어, AI 웹 크롤링을 막을 ‘AI 전용 미궁’ 발표 외 4건
[오늘의 인용글 - 프로덕트 조직에서 리더십이란]
대부분의 기업에서는 진정한 의미의 프로덕트 중심 리더십이 사실상 존재하지 않습니다. 오히려, 이들은 내부 팀(혹은 더 나쁜 경우 외주 팀)을 채용해 기능만 구현하는 ‘기능 공장’을 운영하고, 일정에 맞춰 일이 굴러가도록 관리하는 역할에 머무르는 경우가 많습니다. 성과가 낮은 기업들에는 전략이라는 개념 자체가 아예 없다는 점이 문제입니다. 전략이 잘못됐다는 것이 아니라, 아예 전략이 없다는 것입니다. 기능 팀은 단지 “사업부가 원하는 것을 충족시키기 위한 수단”으로만 여겨질 뿐입니다.
- 마티 케이건, 임파워드
In most product companies, the role of true product leadership is largely missing in action. Instead, they are mainly there as facilitators, responsible for staffing the in‐house (or even worse, outsourced) feature factory, and keeping the trains running on time. In most companies, there is no product strategy. Notice I didn't say a bad product strategy—I mean literally no product strategy. The feature teams are simply there “to serve the business.”
- Marty Cagan, EMPOWERED
(1) 발전한 인공지능의 성능을 측정할 테스트 ‘ARC-AGI-2'
- 개발 주체: 유명 AI 연구자 François Chollet이 공동 설립한 비영리 단체 Arc Prize Foundation에서 개발, 기존 ARC-AGI-1의 후속 버전.
- 목표: AI가 훈련되지 않은 새로운 문제에 얼마나 효율적으로 적응하고 해결할 수 있는지를 측정
- 형식: 색깔 있는 사각형들로 구성된 시각적 패턴 문제를 보고, 올바른 ‘정답’ 그리드를 생성하는 퍼즐 문제
- 특징: 사전 학습된 지식에 의존하지 않고 즉석에서 추론해야 함 -> 브루트포스 방식(대량 연산)으로 문제를 해결하지 못하도록 설계
- 효율성(문제를 해결하는 데 드는 비용과 시간)을 핵심 평가 기준으로 추가
- ARC-AGI-2에서 대부분의 모델이 부진: OpenAI o1-pro, DeepSeek R1 등 “추론형” 모델: 1~1.3%
- ARC-AGI-1에서는 75.7%로 인간 수준의 성과 달성, ARC-AGI-2에서는 4%에 불과하며, 작업당 $200의 연산비용 발생
- 인간 성과 및 벤치마크: 평균적으로 **60%**의 문제를 정확히 해결함 -> 이로 인해 AI 모델과 인간 사이의 명확한 격차 확인
- François Chollet: ARC-AGI-2는 단순한 정답률이 아니라, 지능의 본질적인 요소인 ‘적응력’과 ‘학습 효율’을 평가한다고 강조
- https://techcrunch.com/2025/03/24/a-new-challenging-agi-test-stumps-most-ai-models/
(2) 중국 앤트그룹, “중국이 생산한 AI칩만으로 비용 절감”
- 중국 핀테크 대기업 Ant Group (알리바바 창업자 마윈이 지원) -> 성과 내용: 알리바바와 화웨이가 제작한 중국산 AI 칩만을 활용, 자체적인 최적화 기법을 통해 AI 훈련 비용을 20% 절감.
- Bloomberg 보도에 따르면, 중국산 칩의 성능이 Nvidia 칩과 거의 동등하다고 평가됨
- Ant Group의 성과가 Nvidia 중심의 AI 반도체 시장에 위협이 될 수 있음 -> 특히 Nvidia가 AI 칩 시장에서 높은 수익성과 지배력을 유지하고 있는 상황에서 주목할 만한 변화.
- 과거, 중국 AI 스타트업 DeepSeek의 칩 수요 감소 소문으로 Nvidia 주가가 일시적으로 하락한 전례 있음
- Nvidia의 최신 칩인 Blackwell 시리즈는 미국의 수출 통제에도 불구하고 중국 시장에 유입되고 있음
- 향후 중국 내 자급자족형 AI 인프라 구축 및 미국과의 기술 자립 경쟁 심화 가능성
(3) 10억 달러 이상 펀딩 받은 수직농업 스타트업 ‘플랜티’, 파산 신청
- 파산 신청 시점: 2025년 3월 24일, 챕터 11(Chapter 11) 파산 보호 신청
- 운영 지속 계획: 버지니아의 딸기 농장 운영 지속, 와이오밍의 식물 과학 R&D 센터도 계속 유지 예정
- 재정 지원: 구조조정 계획의 일환으로 $20.7M 규모의 ‘채무자 보호(DIP) 자금 조달’ 확보
- 설립 연도: 2014년, 본사: 캘리포니아 사우스 샌프란시스코, 누적 투자 유치 약 $10억 달러
- 주요 투자자: SoftBank Investment Advisers, Walmart, Bezos Expeditions 및 Jeff Bezos(엔젤 투자자)
- 최종 기업가치: 2022년 1월 시리즈 E 라운드 당시 $19억 달러, PitchBook 기준
- 업계 동향 및 유사 사례: 수직농업 스타트업 전반이 위기 직면 -> Bowery Farming 2024년 11월 폐업 보도, 누적 투자금 $7억 이상, 2021년 기준 기업가치 $20억, AeroFarms: $3억 이상 투자 유치 후 2023년 파산, 이후 재정비 완료, AppHarvest: $7억 이상 투자 유치, 2021년 상장(시가총액 $10억), 2023년 챕터 11 신청
- Plenty의 파산은 수직농업 분야의 지속가능성 및 수익 모델 한계를 다시금 드러냄 -> 거액 투자와 유명 투자자 참여에도 불구하고, 시장 수요, 운영비용, 기술 확장성 등의 문제로 인해 성장 어려움 지속
(4) X(구 트위터)의 개발 디렉터 사임
- Haofei Wang, X의 엔지니어링 디렉터 전격 사임 -> Haofei Wang은 2023년 7월 Elon Musk의 X(구 트위터)에 합류한 핵심 인물
- 최근까지 사실상 X의 엔지니어링 및 프로덕트 총괄 역할을 수행 ->!Musk와 엔지니어 간 주요 커뮤니케이션 브릿지 역할도 맡았음
- 구체적인 이유는 밝혀지지 않았으며, 본인과 회사 모두 공식 코멘트를 하지 않음
- Musk의 관심 분산과 리더십 변화: 최근 Musk는 xAI와 DOGE 관련 프로젝트에 더 집중 -> 이에 따라 X 내 리더십 공백이 점점 커지고 있었으며, Wang이 이를 어느 정도 채우고 있었음, Musk는 X에 대한 직접적인 리더십을 점점 줄이는 모습
- 신규 인재 영입: Mike Dalton과 Uday Ruddaraju가 2025년 1월에 엔지니어링 리더로 합류 -> 두 사람 모두 과거 Robinhood의 기술 리드였으며, 현재는 xAI와 X를 겸직 중, 이는 X와 xAI 간의 조직적 경계가 모호해지고 있음을 반영
- Musk는 여전히 X에 활발히 글을 올리고 있지만, 실제 운영은 점차 다른 프로젝트로 이동 중
- https://www.theverge.com/twitter/634833/x-head-engineering-leaves-elon-musk
(5) 클라우드플레어, AI 웹 크롤링을 막을 ‘AI 전용 미궁’ 기술 발표
- Cloudflare는 웹사이트 데이터를 무단으로 수집하는 AI 훈련용 크롤러를 차단하는 대신 유인하는 전략을 도입 -> AI Labyrinth’는 AI 생성 콘텐츠로 구성된 미끼 페이지를 통해 봇을 함정에 빠뜨림
- 이 페이지들은 무의미하지만 과학적으로 정확한 내용으로 구성되며, 사이트의 실제 데이터와 무관
- 작동 방식과 효과: 탐지된 비정상 크롤러를 AI Labyrinth에 연결된 링크 구조로 유도 -> 크롤러는 이 링크를 계속 따라가며 시간과 리소스를 낭비하게 됨, 일반 사용자에게는 이 링크들이 보이지 않음.
- 보안 기능: 악의적인 봇의 지문(fingerprint) 수집 및 패턴 분석 가능, 향후 Cloudflare의 악성 봇 차단 데이터베이스 강화에 기여
- 과거에는 robots.txt 파일을 통해 크롤링을 제한했으나, Anthropic, Perplexity AI 등 일부 기업들이 이를 무시해 논란 -> Cloudflare는 하루 500억 건 이상의 크롤러 요청을 처리하고 있으며, 기존 차단 방식은 봇의 회피 기술과의 소모전이었다고 언급, AI Labyrinth는 방어에서 공격으로 전략 전환한 셈
- 웹사이트 관리자는 Cloudflare의 Bot Management 설정에서 AI Labyrinth를 수동으로 활성화할 수 있음
- Cloudflare는 향후 “링크된 URL의 거대한 네트워크”를 조성해, 봇이 그 안에서 오랫동안 가짜 데이터를 소비하도록 유도할 예정
- Ars Technica는 크롤러를 수개월 동안 유인하는 ‘AI 지옥’이라고 비유하며 Nepenthes 도구와 유사하다고 평가
- AI 데이터 크롤링이 윤리적 논란으로 번지는 가운데, Cloudflare의 이 같은 대응은 AI 훈련 데이터 보안의 새로운 표준이 될 가능성
- 기술적으로도 생산적인 미끼 콘텐츠 생성 → 자동화된 보안 강화 루프라는 새로운 패러다임을 제시
- https://www.theverge.com/news/634345/cloudflare-ai-labyrinth-web-scraping-bots-training-data