중국의 금지된 마음 읽기 AI가 무료로 제공됩니다.

중국의 한 개발자가 14억 명의 감정을 분석하는 AI를 만들어 이를 무료로 GitHub에 공개했습니다. 이 다중 에이전트 시스템은 소셜 미디어를 스크랩하고, 그 결과를 논의하며, 보고서를 작성하지만, 이를 사용하는 것은 불법일 수 있습니다.

Hero image for: 중국의 금지된 마음 읽기 AI가 무료로 제공됩니다.
💡

TL;DR / Key Takeaways

중국의 한 개발자가 14억 명의 감정을 분석하는 AI를 만들어 이를 무료로 GitHub에 공개했습니다. 이 다중 에이전트 시스템은 소셜 미디어를 스크랩하고, 그 결과를 논의하며, 보고서를 작성하지만, 이를 사용하는 것은 불법일 수 있습니다.

무료가 되어서는 안 되는 도구

감시 기술은 일반적으로 유료 플랫폼과 조달 계약 뒤에 숨겨져 있습니다. 한 중국 학생이 개발한 여론 분석 시스템인 BettaFish는 GitHub에 무료로 다운로드 가능하며, 소스 코드도 공개되어 있습니다. 이 시스템은 정부와 마케팅 대기업이 상당한 비용을 지불하는 것과 동일한 기법을 사용하여 14억 명의 감정 통찰력을 제공합니다.

이 저장소는 30,000개의 스타를 넘어섰으며, 이는 전 세계 개발 커뮤니티가 단순히 호기심을 갖고 있는 것이 아니라 적극적으로 관심을 가지고 있다는 신호입니다. GitHub의 스타는 거칠은 지표이지만, 이 기준을 넘는 것은 BettaFish가 주류 프레임워크와 도구들과 같은 인기 수준에 올라섰음을 의미하며, 특정 연구 프로젝트가 아닙니다. 이는 주요 JavaScript 라이브러리와 같은 참여를 가진 감시 수준의 실험입니다.

베타피시는 중국 소셜 플랫폼을 대규모로 스크랩합니다. 틱톡의 중국 버전인 더윈, 웨이보, 지후 등에서 데이터를 수집한 후 “중국 사람들은 도널드 트럼프, 마블 영화, 애플에 대해 실제로 어떻게 생각할까?”라는 질문에 답하려고 합니다. 웹에 떠돌고 있는 보고서들은 웨이챗 사용자들 사이에서 노인들이 대두 가격에 대한 패닉을 겪고 있다는 사실, 마블에 대한 미지근한 감정, 결함이 있는 배터리로 인해 애플에 대한 불신이 나타나는 것을 보여줍니다. 이것은 장난감처럼 보이기보다는 인구감정 대시보드처럼 보입니다.

그 권력은 즉각적인 법적 및 윤리적 경고를 촉발합니다. 이 시스템은 공격적인 웹 스크래핑, 맞춤형 “마인드 스파이더” 크롤러, 그리고 사용자가 동의하지 않은 내용을 대량 의견 엔진에 공급하는 분석에 의존합니다. 개인정보 보호 법률이 있는 관할권—중국의 PIPL에서 EU의 GDPR까지—에서 BettaFish를 전면 가동하는 것은 빠르게 회색지대에서 명백한 위반으로 전환될 수 있습니다.

이 시스템은 단일 Python 스크립트가 API에 연결된 것이 아닙니다. BettaFish는 Python Flask 백엔드로 조정되는 다중 에이전트 아키텍처로 운영되며, 인사이트, 미디어, 웹 쿼리를 위한 별도의 에이전트가 있습니다. 크롤러는 인기 점수와 감정으로 태그된 게시물로 MySQL 또는 Postgres 데이터베이스를 채워 혼란스러운 소셜 채팅을 구조화된 연료로 변환합니다.

그 에이전트들은 단순히 데이터를 덤핑하지 않고 논쟁을 벌입니다. 포럼 스타일의 조정 레이어는 LLM이 에이전트 간의 토론을 중재하고, 상충하는 증거를 조화시키도록 강요한 다음, 모든 내용을 보고서 생성기로 전달합니다. 그 결과: 국가적 규모에서 불편할 정도로 정신을 읽는 듯한 매끄럽고 서사적인 스타일의 의견 보고서가 탄생합니다.

'마인드 리딩' 엔진 해독하기

일러스트: '마인드 리딩' 엔진 해독하기
일러스트: '마인드 리딩' 엔진 해독하기

정신을 읽는다는 것은 극적이지만, BettaFish (웨이위)는 본질적으로 매우 자동화된 여론 분석 엔진입니다. 그것은 뇌를 들여다보지 않고, 피드, 댓글, 리포스트 체인을 분석하여 그 혼란을 사람들의 생각처럼 보이는 것에 대한 구조화된 보고서로 변환합니다.

중국의 한 학생에 의해 개발되어 GitHub에 공개된 BettaFish는 사이드 프로젝트라기보다는 완전한 내부 분석 플랫폼처럼 작동합니다. 이 디자인은 중국의 사회적 규모에서 데이터 접근을 가정하며, 주로 14억 인구로 구성된 대중을 대상으로 합니다. 이들의 디지털 흔적은 몇 가지 주요 앱을 통해 이루어집니다.

이름 선택은 미션 스테이트먼트입니다. “웨이위”는 “작지만 강력한”이라는 의미의 중국어 구절에서 유래된 것으로, 작은 개발 팀(한 사람)과 산업 강도의 AI를 공공 대화에 적용하는 비대한 영향력을 모두 암시합니다.

베타피시의 주요 작업: 사용자가 입력할 수 있는 어떤 주제에 대해서도 중국 소셜 미디어에서 감정을 긁어모으고, 처리하며, 종합하는 것입니다. 중국 사용자들이 도널드 트럼프, 마블 영화, 혹은 애플에 대해 어떻게 생각하는지 묻는다면, 시스템은 Douyin, Weibo, Zhihu와 같은 플랫폼에서 자료를 조합합니다.

백그라운드에서 Python Flask 오케스트레이터는 자연어 질문을 받아 여러 AI 에이전트에 전달합니다. 크롤러는 지속적으로 실행되며, 게시물, 댓글, 참여 지표를 MySQL 또는 Postgres에 저장하고 각 항목에 핫니스 점수와 감성 레이블을 태깅합니다.

일반적인 "소셜 리스닝" 도구가 대시보드와 키워드 클라우드에서 멈추는 반면, BettaFish는 계속 나아갑니다. BettaFish는 세 가지 주요 에이전트를 병렬로 작동시킵니다: - 인사이트 에이전트는 생성된 SQL을 통해 로컬 또는 개인 데이터베이스를 분석합니다. - 미디어 에이전트는 Playwright와 다중 모달 모델을 사용하여 이미지와 비디오를 검사합니다. - 쿼리 에이전트는 뉴스 및 더 넓은 웹 콘텐츠를 스캔합니다.

그 에이전트들은 단순히 집합하는 것이 아닙니다; 그들은 논쟁을 합니다. 전용 포럼 엔진이 그들을 AI로 조정된 토론으로 몰아가며, 대규모 언어 모델이 증거를 요구하고, 모순을 해결하며, 사용자가 어떤 내용을 받기 전에 이례적인 의견들을 조정합니다.

마침내, 보고서 에이전트는 논의를 서사 형식으로 요약합니다: 감정 차트, 인구 통계별 분석, 대두 가격이나 배터리 결함과 같은 반복적인 주제들. 이러한 자동화된 논거-보고서 파이프라인이 BettaFish를 표준 분석 대시보드를 훨씬 초월하게 만듭니다.

AI 에이전트 하이브마인드 내부

BettaFish에 대한 쿼리는 먼저 모델에 도달하지 않고 인프라에 도달합니다. 사용자의 질문은 Python Flask 오케스트레이터라는 경량 웹 앱에 도착하는데, 이는 이후 모든 것을 관리하는 공항 관제사처럼 작동합니다. 이 오케스트레이터는 의도를 분석하고, 요청을 여러 에이전트로 분산시키며, 어떤 하위 시스템이 아직 작업 중인지 추적합니다.

그곳에서 세 개의 주요 AI 에이전트가 동시에 실행되어 각기 다른 현실의 조각을 바라봅니다. 인사이트 에이전트는 구조화된 데이터와 직접 연결되어, 스크랩된 게시물, 인기 점수 및 감정 레이블로 가득 찬 MySQL 또는 Postgres 테이블을 질의하기 위해 SQL을 생성합니다. 이 에이전트는 자동화된 데이터 분석가처럼 작동하며, 자연어 프롬프트를 JOIN, 필터 및 집계로 변환합니다.

그 옆에서 미디어 에이전트는 시각적 데이터의 홍수에 집중합니다. Playwright를 사용하여 헤드리스 브라우저를 구동하며, Douyin이나 Weibo와 같은 플랫폼에서 페이지를 로드하고, 프레임을 캡처하여 이미지를 다중 모달 모델에 제공하여 분류, OCR, 감성을 분석합니다. 이론적으로, 사용자가 트럼프에 대해 무엇을 썼는지뿐만 아니라, 시위 현수막이 어떻게 생겼는지, 애플 로고가 얼마나 자주 등장하는지, 어떤 마블 장면이 바이럴되는지를 알려줄 수 있습니다.

세 번째 기둥인 질의 에이전트는 네트워크 연구자 역할을 합니다. 웹 및 뉴스 검색 API에 접속하여 국가 매체, 독립 매체, 포럼에서 보도를 수집한 후, 이러한 자료들을 요약하고 정규화하여 다른 에이전트들이 교차 참조할 수 있는 형태로 만듭니다. 이 세 가지가 함께하면 데이터베이스, 소셜 피드, 그리고 전반적인 웹을 동시에 삼각측량하여 단일 질문에 대답할 수 있습니다.

중요하게도, 이러한 에이전트는 특정 모델을 하드코딩하지 않습니다. BettaFish는 모델 독립적 설계를 사용하여 각 에이전트의 백엔드 LLM이 단순한 구성 항목으로 됩니다: Gemini, GPT-4, DeepSeek, Kimi 또는 OpenRouter 또는 직접 API를 통해 연결된 오픈 소스 모델. GitHub의 리포지토리는 모델을 신성한 의존성이 아니라 교체 가능한 부품으로 명시적으로 다룹니다.

이 모듈성 덕분에 한 학생의 프로젝트는 공공 여론을 위한 일종의 플러그 앤 플레이 AI 가시성 스택으로 변모합니다. 대량 스크래핑을 위해 더 저렴한 오픈 소스 모델을 교체하거나 최종 합성을 위해 GPT-4 또는 Gemini를 남겨두고, 미디어 에이전트를 밈에 맞게 조정된 비전 모델로 전문화할 수 있습니다. BettaFish – 다중 에이전트 공공 여론 분석 시스템 (공식 GitHub)에서는 각 구성 요소가 HTTP 및 큐를 통해 어떻게 통신하는지 문서화되어 있어, 개발자들이 새로운 데이터 소스를 추가하거나 더 많은 에이전트를 추가하거나 전반적으로 다른 국가의 소셜 네트워크를 겨냥하는 방식으로 코어를 다시 쓰지 않고도 조정할 수 있습니다.

AI 에이전트들이 논의하는 포럼

감정 대시보드가 단순히 차트를 뱉어내는 것은 잊어버리세요. BettaFish의 ForumEngine은 AI 에이전트를 논쟁하는 분석가 패널로 바꿔, 그들이 합의에 도달할 때까지 서로 논쟁하도록 만드는 시스템입니다.

각 에이전트는 고유한 증거 더미를 가지고 이 가상 방에 들어옵니다. 쿼리 에이전트는 스크랩한 뉴스 보도 및 웹 기사를 가져오고, 미디어 에이전트는 스크린샷, 비디오 전사 및 댓글 스레드를 끌고 들어오며, 인사이트 에이전트는 지역 데이터베이스에서 SQL로 추출한 통계를 보여줍니다.

조용히 출력을 병합하는 대신, ForumEngine은 구조화된 토론을 진행합니다. 에이전트들은 주장을 제시하고, 출처를 인용하며, 자신의 결론이 다른 모든 사람과 엇갈릴 때 질문을 받습니다.

중심에는 끈질긴 편집자처럼 행동하는 중재자 LLM이 자리잡고 있습니다. 이는 에이전트의 주장이 실제로 증거에서 비롯된 것인지 확인하고, 데이터가 부족할 경우 더 많은 샘플을 요구하며, 두 에이전트가 동일한 트렌드를 반대 방향으로 설명할 때 명확성을 요구합니다.

"중국 사용자들은 애플에 대해 실제로 어떻게 생각할까?"라는 쿼리를 상상해 보세요. 쿼리 에이전트는 중립적인 기업 뉴스와 주요 매체의 애플 공급망 및 아이폰 출시 관련 긍정적인 프로필 몇 개를 제시할 수 있습니다.

한편, 미디어 에이전트는 아이폰 분해 동영상 아래에 있는 Douyin과 Weibo 댓글에 깊게 빠져 있는데, 사용자들은 결함 있는 배터리, 수리 문제, 그리고 국산 브랜드 구매를 촉구하는 민족주의적인 발언에 대해 불만을 토로하고 있다. 그곳의 정서는 특히 젊고 기술에 능숙한 사용자들 사이에서 극도로 부정적으로 흐르고 있다.

ForumEngine은 불일치를 감지합니다. 모더레이터 LLM은 Query Agent에 질문합니다: 그 뉴스 출처가 공식 미디어에 과도하게 집중되어 있는가? 그런 다음 Media Agent에게 화난 댓글이 광범위한 트렌드를 나타내는지 아니면 틈새 서브컬처인지 묻습니다.

대리인은 더 많은 데이터를 수집하여 대응합니다. 쿼리 에이전트는 독립적인 기술 블로그와 사용자 포럼을 포함하도록 검색 범위를 확장하며, 미디어 에이전트는 추가 비디오와 다양한 지역을 샘플링합니다. 각 라운드마다 진행자는 합의된 포인트를 요약하고 해결되지 않은 갈등을 표시합니다.

여러 차례의 이러한 사이클이 지나고 나서야 ForumEngine은 합성을 허용합니다: 예를 들어, “주 정부에 맞춘 뉴스 보도는 애플의 경제적 역할에 대해 신중하게 긍정적이며, 반면에 일반 대중의 비디오 댓글은 배터리 및 가격에 대해 집중된 분노를 보여줍니다.”

기계에 연료를 공급하다: 데이터 수집기

일러스트레이션: 기계에 연료를 공급하라: 데이터 수확기
일러스트레이션: 기계에 연료를 공급하라: 데이터 수확기

이 소위 '정신 읽기 엔진'의 연료는 30개 이상의 소셜 플랫폼을 조용히 탐색하는 크롤러의 무리에서 나옵니다. BettaFish는 웨이보, 도우인, 샤오홍슈와 같은 중국 대기업은 물론 포럼, 뉴스 사이트 및 사용자 기반이 10억 명 이상인 작은 앱들에도 맞춤형 '마인드 스파이더'를 겨냥합니다. 크롤러는 항상 새로운 담론을 처리할 수 있도록 필요할 때마다가 아니라 지속적으로 작동합니다.

각 크롤러는 AI 모델에 접근하기 전에 원시 게시물, 댓글 및 메타데이터를 준비 계층에 스트리밍합니다. 그 후, 표준화된 파이프라인이 텍스트를 정리하고, 타임스탬프를 정규화하며, 결과를 왜곡할 수 있는 반복적인 바이럴 게시물을 중복 제거합니다. 이러한 과정을 거친 후에야 콘텐츠가 구조화된 MySQL 또는 Postgres 데이터베이스에 저장되어 즉시 쿼리가 가능해집니다.

베타피쉬는 이 데이터베이스를 자신의 비공식적인 정보 공급원으로 취급합니다. 각 행은 작성자 ID(대개는 가명), 플랫폼, 참여 지표 및 언어 태그가 포함된 게시물을 나타냅니다. 이 자료를 미리 인덱싱함으로써, 시스템은 SQL 쿼리를 통해 "도널드 트럼프"나 "애플 배터리"에 대한 새로운 질문에 대답할 수 있으며, 실시간으로 웹을 스크랩할 필요가 없습니다.

저장되기 전, 각 항목은 온라인에서 게시물이 받는 산소량을 추정하는 핫니스 분류기를 통과합니다. 이 점수는 다음과 같은 요소를 혼합합니다: - 순수 조회수와 좋아요 - 리포스트, 인용 트윗, 댓글 속도 - 트렌드 목록이나 메인 페이지 배치와 같은 플랫폼별 부스트

뜨거움과 함께, 다국어 감정 분석 레이어는 극성과 감정 레이블을 부여합니다. 중국어, 영어 및 기타 언어는 구성 가능한 LLM 또는 소형 감정 모델을 통해 라우팅되어 "매우 부정적," "비꼬는," 또는 "국가적 자부심"과 같은 태그를 생성합니다. 이러한 레이블은 데이터베이스의 일류 열이 되며, 단순히 추가된 주석이 아닙니다.

Scale는 이것을 고급 스크레이퍼에서 인프라로 전환합니다. 매일 수백만 개의 게시물이 수집되고 점수가 매겨지면서 BettaFish는 14억 명 이상의 온라인 공개 의견을 거의 실시간으로 조회할 수 있는 미러를 제공합니다. 이후 에이전트가 중국 사용자들이 마블이나 대두 가격에 대해 어떻게 생각하는지를 묻는 것은 검색을 시작하는 것이 아니라, 살아있는 지속적으로 업데이트되는 데이터 세트를 조사하는 것입니다.

실제 테스트 드라이브: 장점과 단점

현실 세계에서 BettaFish를 시작하는 것은 임대된 Hetzner CX31 서버와 Docker 컴포즈 파일로 시작됩니다. Better Stack 팀은 GitHub 리포를 끌어와 LLM 액세스를 위한 OpenRouter에 연결하고 Python Flask 오케스트레이터를 노출시킵니다. 몇 분 안에 감시 수준의 멀티 에이전트 스택이 저렴한 유럽 VPS에서 실행됩니다.

첫 번째 쿼리에서는 바로 지정학적으로 접근합니다: “중국 미디어는 도널드 트럼프에 대해 정말 무엇을 생각하는가?” 이 한 문장은 인사이트 에이전트, 쿼리 에이전트, 그리고 미디어 에이전트로 퍼져 나가며 각기 작업을 생성하고 진행 상황을 기록하여 포럼 엔진에 피드를 제공합니다. 터미널 창은 실시간으로 타임스탬프, SQL 호출 및 크롤링 로그로 가득 차게 됩니다.

그 다음에는 치명적인 오류가 발생합니다. 미디어 에이전트가 “Bcker 웹 검색 API 키 누락”이라는 단순한 오류로 멈춥니다. 이 키는 연결된 WeChat 계정을 요구하며, 이는 많은 비중국 사용자들이 넘어가기 어려운 장벽입니다. 따라서 전체 미디어 파이프라인이 중단됩니다. 보고서 생성기는 세 개의 에이전트를 모두 기다리기 때문에 다듬어진 최종 보고서는 결코 도착하지 않습니다.

우회 모드가 활성화됩니다. 팀은 포럼 엔진의 출력을 전환하여 원시 토론 로그를 복사하고 보고서 생성을 위해 제미니 1.5에 넣습니다. 시스템은 여전히 30개 이상의 플랫폼에서 데이터를 수집하고, 감정 분석을 수행하며, 하나의 에이전트가 실패하더라도 콘텐츠를 인기 점수에 따라 순위를 매겼습니다.

그 원시 로그는 BettaFish를 위험하고 매혹적으로 만드는 요소를 드러냅니다. 트럼프 관련 대화 속에서 시스템은 바이럴한 위챗 스레드를 드러냅니다: “친애하는 이모님들과 할머니들, 대두유 가격이 이미 배럴당 105위안입니다,” 중장년층 사용자들에 의해 987,000번 전송되었습니다. 대두 가격이 트럼프 관련 정서의 상당 부분을 차지하며, 무역 전쟁이나 NATO가 아닙니다.

그 콩 고정은 BettaFish의 진정한 힘을 드러냅니다: 국가 차원에서 비록 명백하지 않은, 초지역적 집착을 드러내는 것입니다. BettaFish 영어 README – 기술 개요 및 기능에서의 문서화는 이것이 장난감 감정 스크래퍼가 아니라 산업용 공공 여론 레이더임을 분명히 합니다.

'금기' 법적 지뢰밭 탐색하기

여기서 금지라는 것은 기밀을 의미하는 것이 아니라 법적으로 방사능이 있다는 의미입니다. BettaFish는 감시 기술, 대량 데이터 추출, 그리고 국경을 넘는 개인정보 보호법의 교차점에 위치해 있으며, 그 스택의 거의 모든 부분이 누군가의 규칙을 위반합니다.

스크래핑부터 시작합니다. BettaFish의 크롤러 클러스터는 30개 이상의 플랫폼—웨이보, 도우인, 샤오홍슈를 포함하여—산업 규모로 접근한 후, 게시물을 MySQL 또는 Postgres에 인기 점수와 감정 태그와 함께 저장합니다. 이는 단순한 탐색을 넘어 플랫폼의 서비스 약관에 부딪히며, 일반적으로 자동 스크래핑, 대량 수집 및 상업적 분석을 위한 콘텐츠 재사용을 금지하고 있습니다.

여기 역사적으로 남아 있는 것은 불미스럽습니다. 미국에서 메타는 BrandTotalBright Data와 같은 스크래핑 업체를 상대로 고소했으며, 링크드인은 "공개" 프로필의 자동 스크래핑 문제로 HiQ와 수년간 싸워왔습니다. 법원은 혼란스러운 신호를 보냈지만, 플랫폼들이 전하는 메시지는 명확합니다: 대규모 스크래핑, 특히 프로파일링을 위한 스크래핑은 중지 및 철회 통지서, IP 차단, 그리고 기술적 장벽을 무시할 경우 컴퓨터 사기 및 남용 법 관련 주장을 초래할 수 있습니다.

개인정보 보호법은 위험성을 더욱 높입니다. BettaFish는 명목상 공개된 게시물을 모아 풍부한 행동 파일을 생성한 다음, 감정 분석 및 주제 클러스터링을 통해 태도, 두려움 및 충성도를 추론합니다. 중국의 개인정보 보호법(PIPL)과 유럽의 GDPR 하에서는 이는 명시적인 동의나 명확한 법적 근거 없이 대규모 프로파일링 및 “특별 범주” 추론처럼 보이기 시작합니다.

규제 당국은 점점 더 "공공"을 무제한으로 접근할 수 있는 것으로 간주하지 않습니다. Clearview AI에 대한 GDPR 사례는 얼굴 인식 데이터베이스를 구축하기 위해 공개 웹 콘텐츠를 스크래핑하는 것이 불법일 수 있음을 보여줍니다. EU 사용자를 대상으로 하는 BettaFish 배포는 다음과 같은 의무를 유발할 수 있습니다: - 처리에 대한 법적 근거 - 데이터 보호 영향 평가 - 데이터 주체의 접근 및 삭제 권리

오용 위험은 "금지된 마음 읽기"라는 레이블이 더 이상 과대선전처럼 느껴지지 않는 지점입니다. 수백만 사용자에 걸쳐 감정적 유발 요인을 매핑하는 시스템은 허위 정보 캠페인을 최적화하고, 선전 내러티브를 실시간으로 A/B 테스트하며, 특정 인구 통계에 대한 분노를 미세 표적화할 수 있습니다. 정부와 정치 컨설팅 회사들은 이미 훨씬 더 조잡한 대시보드에 비용을 지불하고 있습니다.

기업들은 내부 데이터셋에 BettaFish를 조용히 연결하여 상업적 스파이 행위를 수행할 수 있으며, 직원의 감정, 노조 조직화 또는 내부 고발자의 대화를 추적할 수 있습니다. "개인 데이터베이스"와 실시간 모니터링이 결합되면, 중국의 이모들이 콩 기름에 대해 어떻게 생각하는지를 설명하는 동일한 경로가 반대 의견자를 감지하고, 보이cott 주도자를 식별하며, 활동가들이 트렌드화되기 전에 압박할 수 있습니다.

중국을 넘어서: 글로벌 잠재력과 위험

일러스트: 중국을 넘어서: 글로벌 잠재력과 위험
일러스트: 중국을 넘어서: 글로벌 잠재력과 위험

서양 소셜 미디어에 들어가게 된다면, BettaFish는 14억 명에 대한 호기심이 아닌 견해 드래그넷으로 변모하게 될 것입니다. Weibo와 Douyin을 X, Reddit, Facebook, YouTube, Instagram, TikTok으로 바꾸면, 같은 크롤러 스택이 매시간 수백만 개의 게시물을 수집하고, 이를 지리, 이념, 또는 커뮤니티에 따라 태그한 후, 같은 다중 에이전트 토론 루프에 제공할 수 있습니다. OpenAI, Anthropic 또는 로컬 LLMs가 연결되면, 인터넷의 어떤 단편이 가자(Gaza), 테일러 스위프트(Taylor Swift), 또는 S&P 500에 대해 “정말로 생각하는 것”에 대한 거의 실시간 합성이 이루어집니다.

합법적인 플레이어들에게는 이게 매력적입니다. 헤지 펀드는 BettaFish를 레딧의 r/wallstreetbets, X 금융, 그리고 유튜브 금융 인플루언서와 연결하여 밈 주식 모멘텀을 블룸버그 단말기에 도달하기 전에 정량화할 수 있습니다. 공공 보건 기관은 "달리고 난 뒤 가슴 통증," "오젠픽 부작용," 혹은 백신 반대 서사에 대한 Facebook 그룹 및 텔레그램 채널에서의 급증을 모니터링한 뒤, 며칠 전에 개입을 목표로 삼을 수 있습니다. 브랜드는 이미 소셜 리스닝을 위해 6자리 수를 지불하고 있으며, 강화된 BettaFish 포크는 클라우드 GPU와 DevOps 채용비용으로 언어, 아비투어 문화, 그리고 주변 플랫폼들에서 세밀한 평판 추적을 제공할 수 있습니다.

서구 정치에서는 이러한 메커니즘이 빠르게 추악해집니다. 이러한 도구가 오픈 소스화되면 어떤 캠페인, 정치 행동 위원회(PAC), 또는 외국 영향력 기관도 24/7 내러티브 정찰을 수행할 수 있습니다: 미시간 교외에서 어떤 토론 주제가 반향을 일으키는지, 브라질에서 어떤 음모론 해시태그가 뜨거운 이슈가 될지, 이민이나 성전환 권리에 대해 어떤 인플루언서 집단이 기울어지는지를 파악할 수 있습니다. 여기에 저렴한 콘텐츠 농장과 광고 API를 결합하면, 공공장에서 선전물을 A/B 테스트하는 자동화된 피드백 루프가 생성되고, 이후 가장 강력하게 양극화되는 내용만을 증폭할 수 있습니다.

베타피시는 이중 용도의 AI를 제한하는 것이 얼마나 어려운지를 보여줍니다. 코드는 GitHub에 있으며, 이미 수만 번의 별을 받았고, 미국, EU 또는 인도 정치에 맞춰 조정된 포크가 개인 저장소와 Discord 서버를 통해 확산되는 것을 막을 수 있는 것은 아무것도 없습니다. 일단 다중 에이전트 감시 등급 분석 시스템이 존재하게 되면 이를 의미 있게 “회수”할 수는 없습니다; 오히려 다음 학생이 더 정교한 버전을 출시하기 전에 규범, 규제를 구축하고 대응 도구를 만들기 위해 경쟁해야 할 뿐입니다.

창조자의 역설적인 비전

베타피쉬(BettaFish)의 창립자는 이를 무기로 제안하지 않는다. 그는 플랫폼 전반에 걸쳐 “실제 감정 지형”을 매핑하여 “에코 챔버에서 벗어날 수 있는 시스템”에 대해 이야기하며, 수백만 개의 게시물을 스크래핑하여 14억 명이 실제로 무엇에 대해 논쟁하는지를 보여준다. 단지 국가 미디어나 바이럴 분노 스레드가 강조하는 것뿐만 아니라. 그의 프레임에서는 더 많은 데이터와 더 많은 뉘앙스가 더 많은 진실을 의미한다.

그 이상주의는 공식 로드맵에까지 확장된다. 향후 버전에서는 사용자, 주제, 서사 및 시간 시퀀스 파이프라인 간의 관계를 모델링하는 그래프 신경망이 약속되며, 이러한 그래프를 며칠 또는 몇 달간 추적할 수 있다. 목표는 단순히 현재 중국 소셜 미디어가 도널드 트럼프나 애플에 대해 무엇을 생각하는지를 설명하는 것이 아니라 예측하는 것이다. 감정이 다음에 어디로 이동할지를 말이다.

로드맵 노트에서는 다음을 결합하는 것에 대해 언급합니다: - 크로스 플랫폼 소셜 그래프 - 역사적인 "인기도" 점수와 감정 곡선 - 뉴스 사이클이나 정책 이벤트와 같은 외부 신호

이러한 데이터는 BettaFish가 의견 전파의 시뮬레이션을 실행할 수 있게 해준다—누가 누구에게 영향을 미치는지, 분노가 얼마나 빠르게 감소하는지, 어떤 인구통계가 먼저 변화하는지.

그 같은 구조는 대규모 감시 및 심리 프로파일링 엔진과도 구분이 가지 않습니다. 사용자를 영향 그래프로 묶고 감정으로 태그하며 미래 반응을 예측하는 시스템은 단순히 인구를 설명하는 것이 아니라 광고주, 정치 작전자 또는 보안 기관을 위한 타겟팅 매트릭스를 생성합니다. BettaFish (WeiYu) – 오픈 소스 여론 플랫폼에 대한 심층 소개와 같은 문서와 설명 자료는 이를 분석적 힘으로 프레임화하지만, 예측이 향상될수록 “분석”과 “통제” 사이의 경계는 좁아집니다.

이 프로젝트는 역설에 놓여 있습니다. 진정으로 “에코 챔버를 깨기” 위해 BettaFish는 모든 것을 보고, 모든 것을 기억하며, 모든 사람을 모델링해야 하며, 이는 거의 개인 정보와 디지털 권리에 대한 부수적 피해를 보장합니다. 남은 질문은 어떤 공공 의견 엔진이 이처럼 세밀한 수준에서 작동할 때, 국가, 플랫폼 또는 악의적인 행위자들이 이 시스템에 연결되면 투명성의 도구로 남을 수 있는가입니다.

서버 위의 양날의 검

권력은 `docker compose up`을 실행할 수 있는 사람에게 불편할 만큼 가깝다. BettaFish는 중급 Hetzner 박스를 감시급 감정 레이더로 변모시켜, Weibo, Douyin, Xiaohongshu 및 수십 개의 다른 플랫폼에서 조용히 데이터를 수집한 후, 14억 명의 사람들이 supposedly “진짜 생각하는 것”에 대한 수백만 개의 게시물을 정교한 보고서로 융합한다.

그 리치는 README에 직접 포함된 단점이 있습니다. 과대선전 아래에는 솔직한 면책 조항이 숨겨져 있습니다: 저자는 어떤 오용에 대해서도 거리를 두며, 모든 법적 및 윤리적 결과는 실제로 이 코드를 배포하는 사람에게 전가됩니다. 다시 말해, BettaFish는 무료이지만 책임은 완전히 개인화됩니다.

그 경고들은 학문적이지 않습니다. 지속적인 데이터 수집, 플랫폼 간 상관관계 분석, 실시간 트렌드 추적은 중국의 개인 정보 보호법 및 다른 지역의 유사한 프라이버시 제도와 충돌합니다. 이 스택을 Twitter(X), Reddit, Facebook 또는 YouTube에 적용하면 광고 기술 대기업과 정보 기관들이 일반적으로 운영하는 규모의 소셜 리스닝 플랫폼을 운영하게 됩니다.

베타피시를 불안하게 하는 것은 그것이 특별히 악하다는 것이 아니라 현대 AI가 무엇을 할 수 있는지에 대해 유난히 솔직하다는 점이다. 다중 에이전트 토론, 자동화된 SQL 생성, 그리고 단일 감정 데이터베이스에 정보를 제공하는 크롤러 클러스터는 상업적 평판 모니터링 및 정치 컨설팅 도구가 이미 작동하는 방식과 정확히 일치한다. 다만, 이것들은 GitHub 스타나 Docker Hub 다운로드가 아닌 유료 벽과 NDA 뒤에 숨겨져 있다.

그래서 질문은 더 이상 “이 도구가 좋으냐 나쁘냐?”가 아니라 “누가 이 작업을 할 수 있으며, 어떤 규칙 아래에서 하는가?”로 바뀐다. 이제 정부 부처, 헤지 펀드, 트롤 농장, 그리고 외로운 대학원생이 거의 동일한 능력에 접근할 수 있게 되었다: 스크랩하고, 클러스터링하며, 분석하고, 거의 제로에 가까운 변동 비용으로 대중의 의견을 거의 실시간으로 예측하는 것이다.

베타피쉬는 현재 AI 시대를 하나의 명령어로 결정짓습니다. 당신은 이를 포크하고, OpenRouter를 연결하며, 가장 좋아하는 플랫폼을 가리키고, 보고서가 쏟아지는 것을 지켜볼 수 있습니다. 그렇게 하기 전에 자신에게 물어보세요: 지구 규모로 군중을 읽을 수 있는 오픈 소스 코드의 시대에, 통찰과 침해 사이의 경계를 어디에 그을 것인가?

자주 묻는 질문

베타피시 AI란 무엇인가요?

베타피쉬(웨이유)는 소셜 미디어 플랫폼에서 데이터를 수집하여 여론을 분석하도록 설계된 오픈 소스 다중 에이전트 AI 시스템으로, 다양한 AI 에이전트를 사용하여 정보를 처리하고, 발견 사항에 대해 토론하며, 포괄적인 보고서를 생성합니다.

베타피시(BettaFish)는 어떻게 작동하나요?

소셜 미디어를 크롤링하여 정보를 수집한 후, 여러 AI 에이전트를 병렬로 배치합니다: 웹 뉴스 용 쿼리 에이전트, 이미지/비디오 용 미디어 에이전트, 그리고 개인 데이터 용 인사이트 에이전트입니다. 독특한 '포럼 엔진'은 이 에이전트들이 각자의 발견을 토론한 후, 보고서 에이전트가 최종 결과를 종합합니다.

베타피시를 사용하는 것이 합법인가요?

Using BettaFish는 법적 회색지대에 존재합니다. 해당 웹 스크래핑 기능은 많은 소셜 미디어 플랫폼의 서비스 약관을 위반할 수 있으며, 사용되는 방식과 장소에 따라 데이터 보호 법률(예: GDPR 또는 중국의 PIPL)을 위반할 수 있습니다. 프로젝트의 GitHub 페이지에는 사용자에게 현지 법률을 준수할 것을 권장하는 면책조항이 포함되어 있습니다.

BettaFish는 어떤 소셜 미디어 플랫폼을 분석할 수 있나요?

베타피쉬는 주로 웨이보, 더우인(중국 틱톡), 샤오홍수 및 지후와 같은 주요 중국 소셜 미디어 플랫폼을 분석하도록 설계되었습니다. 그러나 그 아키텍처는 확장 가능하여 트위터(X), 레딧 또는 유튜브와 같은 다른 글로벌 플랫폼을 스크랩하는 데 적응할 수 있습니다.

Frequently Asked Questions

베타피시 AI란 무엇인가요?
베타피쉬는 소셜 미디어 플랫폼에서 데이터를 수집하여 여론을 분석하도록 설계된 오픈 소스 다중 에이전트 AI 시스템으로, 다양한 AI 에이전트를 사용하여 정보를 처리하고, 발견 사항에 대해 토론하며, 포괄적인 보고서를 생성합니다.
베타피시(BettaFish)는 어떻게 작동하나요?
소셜 미디어를 크롤링하여 정보를 수집한 후, 여러 AI 에이전트를 병렬로 배치합니다: 웹 뉴스 용 쿼리 에이전트, 이미지/비디오 용 미디어 에이전트, 그리고 개인 데이터 용 인사이트 에이전트입니다. 독특한 '포럼 엔진'은 이 에이전트들이 각자의 발견을 토론한 후, 보고서 에이전트가 최종 결과를 종합합니다.
베타피시를 사용하는 것이 합법인가요?
Using BettaFish는 법적 회색지대에 존재합니다. 해당 웹 스크래핑 기능은 많은 소셜 미디어 플랫폼의 서비스 약관을 위반할 수 있으며, 사용되는 방식과 장소에 따라 데이터 보호 법률을 위반할 수 있습니다. 프로젝트의 GitHub 페이지에는 사용자에게 현지 법률을 준수할 것을 권장하는 면책조항이 포함되어 있습니다.
BettaFish는 어떤 소셜 미디어 플랫폼을 분석할 수 있나요?
베타피쉬는 주로 웨이보, 더우인, 샤오홍수 및 지후와 같은 주요 중국 소셜 미디어 플랫폼을 분석하도록 설계되었습니다. 그러나 그 아키텍처는 확장 가능하여 트위터, 레딧 또는 유튜브와 같은 다른 글로벌 플랫폼을 스크랩하는 데 적응할 수 있습니다.
🚀Discover More

Stay Ahead of the AI Curve

Discover the best AI tools, agents, and MCP servers curated by Stork.AI. Find the right solutions to supercharge your workflow.

Back to all posts