OpenAI는 최근 차기 플래그십 모델 GPT-4o를 출시하고 멋진 데모를 선보였습니다. 인간과 같은 음성 채팅이 헤드라인 기능이 되었지만, 그 외에도 많은 기능이 있습니다. OpenAI는 ChatGPT 4o가 할 수 있는 멋진 기능을 많이 강조하지 않았습니다. 이러한 세부 정보는 OpenAI 페이지에서 확인할 수 있으며, 저는 모든 기능을 살펴보았습니다. 그런 의미에서 ChatGPT 4o의 멋진 새로운 기능을 알아보겠습니다.
1. 이미지에서 정확한 텍스트 생성
우리는 확산 모델이 이미지에 텍스트를 생성하는 데 어려움을 겪는다는 것을 알고 있습니다. Dall-E 3은 여전히 주어진 텍스트로 이미지를 생성하지 못합니다. 그러나 엔드투엔드 멀티모달 모델인 ChatGPT 4o 모델은 텍스트를 정확하게 렌더링할 수 있습니다. OpenAI는 프레젠테이션에서 이에 대해 언급하지 않았습니다. 그러나 OpenAI의 페이지 회사가 자사의 역량을 탐구하는 곳입니다.
이미지에 텍스트를 손쉽게 생성하고 추가할 수 있습니다. 많은 샘플의 일관성이 놀랍습니다. 이미지를 첨부하여 동일한 캐릭터의 다른 각도에서 이미지를 생성하도록 요청할 수도 있으며 모든 시나리오에서 일관성을 유지합니다. 또한 3D 렌더링을 만들기 위해 결합할 수 있는 객체의 3D 뷰를 생성할 수도 있습니다. 말할 것도 없이 글꼴도 생성할 수 있습니다.
이러한 기능은 아직 ChatGPT에서 사용할 수 없다는 점을 명심하세요. 여전히 Dall -E 3을 사용하여 이미지를 생성합니다. OpenAI는 가까운 미래에 이러한 기능을 잠금 해제할 수 있습니다.
2. GPT-4o도 비디오를 처리할 수 있습니다
OpenAI는 GPT-4o가 비디오도 처리할 수 있다는 것을 언급하지 않았습니다. 글쎄요, 모델 페이지에서 OpenAI는 비디오를 업로드하고 GPT-4o에 요약을 요청할 수 있다는 것을 보여주었습니다. 필사에서 요점 요약까지 모든 것을 처리합니다. 그래서 Gemini 1.5 Pro가 비디오를 처리할 수 있는 유일한 모델은 아닌 듯합니다.
3. GPT-4o가 당신의 튜터가 될 수 있습니다
Khan Academy의 Sal Khan과의 프레젠테이션에서 OpenAI는 GPT-4o 모델을 사용한 흥미로운 데모를 선보였습니다. 기본적으로 iPad에서 ChatGPT 4o와 화면을 공유하면 화면에 있는 모든 것을 볼 수 있습니다.
들으셨나요? @오픈AI최신 모델은 오디오, 시각, 텍스트를 통해 실시간으로 추론할 수 있습니다.
GPT-4o는 수학 과외에 어떤 효과가 있나요?@살카나카데미 그리고 그의 아들은 칸 아카데미 수학 문제에 그것을 시험해 보았습니다.
지금 Khanmigo로 AI 기반 수학 튜터링을 받아보세요:… pic.twitter.com/8NXoh0SwtU— 칸 아카데미(@khanacademy) 2024년 5월 13일
이제 문제를 설명하고 해결책을 찾도록 요청할 수 있습니다. 수학, 과학, 차트, 지도 또는 그 밖의 무엇이든 ChatGPT 4o는 공부 세션 내내 당신을 안내하는 개인 교사가 될 것입니다. GPT-4o의 멀티모달 비전 기능으로 구동되는 AI의 훌륭한 응용 프로그램입니다. 그런데 macOS용 ChatGPT 데스크톱 앱에서도 작동합니다.
4. ChatGPT 4o는 당신의 회의 동반자가 될 수 있습니다
GPT-4o로 AI를 만나다 pic.twitter.com/rHkQ316MYj— OpenAI (@OpenAI) 2024년 5월 13일
데모 중 하나에서 OpenAI는 회의 중에 ChatGPT 4o를 라이브 컴패니언으로 사용할 수 있음을 보여주었습니다. ChatGPT 4o와 화면을 공유할 수 있으며, 모든 참가자를 보고 들을 수 있습니다. 또한 입력을 제공할 수 있으며 참가자는 GPT-4o 모델에 질문을 할 수도 있습니다. 자발적으로 답변하고 대화에 계속 참여합니다. 마지막에 회의를 요약해 달라고 요청할 수도 있습니다. 얼마나 멋진가요?
5. 비영어권 언어 성능 향상
OpenAI는 영어에서 GPT-4o의 성능을 개선했을 뿐만 아니라 지역 언어의 성능도 개선했습니다. 모델이 영어가 아닌 언어를 압축하여 더 많은 토큰에 맞출 수 있도록 하는 토크나이저를 크게 개선했습니다.
몇 가지 예를 들자면, 구자라트어는 4.4배 적은 토큰을 차지하고, 힌디어는 2.9배 적은 토큰을 차지하고, 텔루구어는 3.5배 적은 토큰을 차지하고, 우르두어는 2.5배 적은 토큰을 차지하고, 러시아어는 1.7배 적은 토큰을 차지하고 있습니다. 기본적으로 지역 언어의 경우 ChatGPT 4o가 더욱 강력해졌습니다.
6. ChatGPT 4o는 다른 모든 AI 모델을 능가합니다.
OpenAI는 벤치마크 수치에 대해 논의하지 않고 새로운 경험 제공에 집중했습니다. 그러나 ChatGPT 4o의 벤치마크 숫자 Google, Anthropic, Meta 등의 다른 모든 AI 모델을 압도합니다. 사실, 몇 달 전에 출시된 자체 GPT-4 Turbo 모델보다 성능이 더 뛰어납니다.
MMLU에서 HumanEval, GPQA, DROP까지 ChatGPT 4o는 독점 모델과 오픈 소스 모델보다 순위가 높습니다. LMSYS 아레나 또한, 신비로운 im-also-a-good-gpt2-chatbot 모델(실제로는 ChatGPT 4o 모델)은 다른 AI 모델보다 훨씬 높은 1310의 전체 ELO 점수를 받았습니다.
우리의 활동을 지원해주세요 ❤️
이 글이 마음에 드셨다면, 앞으로도 좋은 콘텐츠를 계속 발행할 수 있도록 팁을 남겨주세요.
