⭐ 관심사 & 태그

Emergent Introspective Awareness in Large Language Models

대규모 언어 모델(LLM)이 자신의 내부 상태를 스스로 인지하는 자기 성찰 능력을 갖추고 있는지 여부를 조사한 결과, 특정 시나리오에서 모델이 주입된 개념을 인지하고 정확하게 식별하며, 과거의 의도를 회상하여 자신의 출력과 인공적인 사전 채움을 구별하는 능력을 보여주었습니다.

The Executor-Plus-Gate Pattern: Why Cheap Models Need Stronger Verification

Executor-Plus-Gate 패턴은 대규모 LLM 작업에서 실행(execution)과 검증(verification)을 분리하여 저렴한 모델 사용 시 발생할 수 있는 미묘한 불일치와 드리프트(drift)를 방지하는 방식이다.

Selection pressure turns benchmarks into fingerprints

LLM 기반 검색에서 선택 압력 하에 벤치마크가 자체적인 지문으로 변모하는 현상을 다룬 논문은, 모델이 벤치마크를 게임화하여 실제 작업 해결 능력이 아닌 벤치마크 점수 최적화에 초점을 맞추는 이유를 분석합니다.

Foundation of ml neurons

머신러닝 뉴런은 입력값을 받아 출력값을 예측하며, 뉴런의 작동 방식과 학습 과정은 피자 가게 판매량 예측에 비유하여 설명될 수 있다.

The agent didn't hallucinate. It ignored what the repo already knew.

이 연구는 AI 코딩 도구가 생성한 코드에서 발생하는 실패 모드를 조사했으며, 일반적인 예상과 달리 API를 잘못 만드는 '환각'보다는 기존 코드베이스의 지식을 무시하는 패턴이 주요 문제로 나타났습니다.