https://arxiv.org/abs/2305.17066
Mindstorms in Natural Language-Based Societies of Mind
Both Minsky's "society of mind" and Schmidhuber's "learning to think" inspire diverse societies of large multimodal neural networks (NNs) that solve problems by interviewing each other in a "mindstorm." Recent implementations of NN-based societies of minds
arxiv.org
1. Minsky의 "마음의 사회"와 Schmidhuber의 "사고를 배우다"는 서로 다른 대형 다중 모달 신경망(NN)의 사회를 영감으로 받아, 이들이 "마인드스톰"이라는 서로 상호작용하는 과정을 통해 문제를 해결합니다. 최근 NN 기반의 마음의 사회의 구현은 대형 언어 모델(LLM)과 다른 NN 기반 전문가들이 자연 언어 인터페이스를 통해 의사소통하며, 이를 통해 단일 LLM의 한계를 극복하고 다중 모달 제로샷 추론을 향상시킵니다.
2. 이런 자연 언어 기반 마음의 사회(NLSOMs)에서는, 모든 에이전트가 같은 보편적인 기호 언어를 통해 의사소통하면서, 새로운 에이전트가 모듈식으로 쉽게 추가될 수 있습니다. NLSOMs의 힘을 보여주기 위해, 우리는 몇 가지를 조립하고 실험하였으며(최대 129명의 회원을 가진), 그들 안에서 마인드스톰을 활용하여 몇 가지 실용적인 AI 작업을 해결합니다: 시각 질문 답변, 이미지 캡셔닝, 텍스트-이미지 합성, 3D 생성, 자기중심적 검색, 구현된 AI, 그리고 일반적인 언어 기반의 작업 해결입니다.
3. 이를 AI의 미래에 중요한 새로운 연구 질문이 무엇이며, NLSOM의 사회 구조는 어떻게 되어야 하는가, 왕정 구조보다 민주적 구조를 가지는 것의 (불)이점은 무엇인가, NN 경제의 원칙들은 어떻게 강화학습 NLSOM의 총 보상을 극대화하는데 사용될 수 있는가 등의 질문들을 식별, 논의, 그리고 일부를 해결하려는 시도로 간주합니다.
'AI > etc' 카테고리의 다른 글
| OlaGPT: 인간과 같은 문제 해결 능력으로 LLM 강화 (0) | 2023.05.29 |
|---|---|
| RWKV: 트랜스포머 시대를 위한 RNN 재창조 (0) | 2023.05.29 |
| 대규모 언어모델로 반복 게임하기 (0) | 2023.05.29 |
| BiomGPT: 비전, 언어 및 멀티모달 작업을 위한 통합 및 제너럴리스트 Biomedic GPT (0) | 2023.05.29 |
| Panda-GPT: 하나의 모델에서 지침까지 모두 따르세요. (0) | 2023.05.29 |