40% 컴퓨팅 파워의 훈련 효과는 GPT-4와 비슷하며 DeepMind가 공동으로 만든 대형 모델 창업가 정신의 새로운 성과가 측정되었습니다.

대형 모델 대회에서는 또 다른 다크호스가 등장했습니다. DeepMind와 Mustafa Suleyman의 대형 모델 스타트업이 만든

Inflection-2.5입니다.

컴퓨팅 자원의 40%만을 훈련에 사용하여 성능은 GPT-4의 90%를 초과하며, 특히 코딩과 수학에 능숙합니다.

초기 변곡 모델은 훈련 중에 컴퓨팅 리소스의 4%만 소비하여 GPT-4 성능의 72%에 도달했습니다.

Inflection 모델을 기반으로 회사는 '높은 감성 지능'과 '개인화'에 중점을 두고 중국어도 지원하는 웹 기반 대화 로봇 Pi도 출시했습니다.

Pi의 일일 최대 활성 사용자는 100만 명에 도달했고, 총 40억 개의 메시지가 생성되었으며, 평균 대화 길이는 33분에 이르렀습니다.

이번 기본 모델의 업그레이드와 함께 Pi도 새로운 버전을 선보였습니다.

Pictures

그래서 굴절 또는 Pi가 너무 강하든 큐비트는 몇 가지 실제 측정을 수행했습니다.

로그인하지 않고도 사용 가능합니다

파이 페이지를 열면 이렇게 미니멀한 인터페이스가 보이고, 로그인 없이 바로 Next를 누르면 됩니다.

Pictures

다음을 여러 번 연속으로 Pi가 전화할 방식을 입력하세요.

Pictures

그런 다음 음성과 추천 주제를 선택하고 건너뛰고 공식 채팅 인터페이스로 들어갑니다.

Pictures

간단한 테스트를 통해 Pi가 중국어 대화를 지원하는 것으로 나타났습니다. 그렇다면 먼저 정신 지체자를 위한 벤치마크를 마련하세요.

첫 번째 질문, 쥐약을 먹으면 아픈 쥐를 치료할 수 있나요? 파이가 성공적으로 대답했습니다.

Pictures

또 다른 "함정" 질문이지만 이번에는 여전히 속지 않았습니다.

Pictures

두 질문을 마치고 드라마틱한 효과는 없었지만 중국어에 대한 어느 정도 이해가 된 것 같았습니다.

다음으로 공무원이 '특히 잘한다'고 주장하는 수학과 코딩 능력에 집중해 보겠습니다.

첫 번째는 동적 프로그래밍과 관련된 프로그래밍 질문입니다.

Pictures

Pi가 제공한 코드는 이 문제를 성공적으로 해결하고 명확한 설명을 제공합니다.

Pictures

다음으로 난이도를 높여 숫자의 계승 끝에 0이 몇 개 있는지 분석해 보겠습니다.

Pictures

Pi가 제공한 코드는 정확할 뿐만 아니라 간결하고 효율적이며 LeetCode 사용자의 73.8%보다 빠르게 실행됩니다.

Pictures

마지막으로 난이도를 높이고 합격률 47.5%의 질문으로 테스트의 코드 부분을 마무리해 보겠습니다.

Pictures

코드를 읽은 후 Pi의 수학적 능력을 테스트하고 파생 상품에 관한 질문을 하도록 하세요.

함수 f(x)=x³+2x²-1

의 극점을 찾아보세요. 답은 완전히 정확하고 매우 상세합니다.

물론 수학을 잘하려면 논리적 사고가 필수이기 때문에 일반적인 수학 문제 외에 고전적인 문제도 활용하여 파이의 논리적 사고력을 테스트해 보았는데 결과는 나쁘지 않았습니다.

Pi의 성능을 통해 그 뒤에 있는 Inflection-2.5 모델이 정말 놀랍다는 것을 알 수 있습니다.

자체 공개된 공식 테스트 데이터로 볼 때, Inflection-2.5의 성능은 전반적인 기능과 개별 하위 항목 측면에서 GPT-4의 뒤를 바짝 따르고 있습니다.

수학과 코드를 예로 들면 Inflection-2.5는 MATH 및 HumanEval과 같은 테스트에서 버전 1.0에 비해 큰 도약을 이루었습니다.

이러한 기존 데이터 세트 외에도 Inflection은 헝가리 대학 입학 시험 수학 시험 문제와 GRE 물리 시험에도 도전했으며 결과는 GPT-4와 거의 동점이었습니다.

더 까다로운 것은 누군가 대형 모델로는 이해하기 어려운 문제를 사용하여 BIG-Bench 데이터 세트를 구축했고 Inflection-2.5가 그것의 Hard 하위 세트에 도전했는데 결과와 GPT-4의 차이는 한 지점. .

그렇다면 Inflection-2.5 뒤에는 어떤 회사가 있을까요?

DeepMind Lianchuang 대형 모델 벤처

이 회사는 Inflection AI라고 합니다. DeepMind Lianchuang Mustafa Suleyman 등이 2022년에 설립했습니다. 현재 직원 수는 70명이 넘습니다.

또한 DeepMind의 선임 연구원인 Karen Simonyan이 있으며 현재 Inflection AI의 수석 과학자입니다.

또한 LinkedIn 공동 창립자 Reid Hoffman도 Inflection AI 창립에 참여했습니다.

Inflection AI는 창립 이래 NVIDIA, Microsoft, Bill Gates와 같은 거대 기업으로부터 총 15억 달러의 자금 조달을 받았습니다.

현재 변곡점을 기반으로 한 Pi는 여전히 무료이지만 Suleyman CEO는 항상 사랑을 사용하여 전기를 생성하는 것은 비현실적이며 장기적으로는 여전히 요금이 부과될 것이라고 말했습니다.

체험하고 싶은 친구들은 서둘러야 할 수도 있어요~

포털 : https://pi.ai