Notice
Recent Posts
Recent Comments
Link
언유상씨의 건전한 취미생활
[매일 논문 초록 읽기 : 40일차] LLM의 query 사용 능력을 조사하는 연구 본문
많은 양의 코드가 포함된 corpus로 학습된 대규모 언어모델 (LLM)은 HTML 코드를 이해할 수 있는 눈에 띄는 능력을 가지고 있다. 웹 인터페이스는 주로 HTML을 사용하여 구성하였으므로, 우리는 LLM이 유저가 준 query를 사용하여 웹 인터페이스상의 중요한 요소들을 검색하고 찾는 방법에 대한 깊은 연구를 설계한다.
자율적인 웹 탐색에 집중했던 이전 연구들과 대조적으로, 우리는 원자 단위까지 문제를 분해하였다.
- LLM은 유저가 준 query를 이용하여 웹 페이지의 중요한 정보들을 식별할 수 있는가? -
이러한 분해는 LLM들의 능력과 그들에게 존재하는 알려지지 않은 기회들과 도전들을 보다 세세하게 조사할 수 있도록 한다.
우리의 실험은 LLM은 중요한 UI 요소들을 검색하는 합리적인 성능의 능력이 있지만, 여전히 향상 시킬 부분이 존재한다는 점을 보인다. 우리는 우리의 연구가 이 도메인에서 발생하는 여러 문제들을 극복할 수 있도록 후속 연구들에게 영감을 주기를 희망한다.
제목 : "What’s important here?": Opportunities and Challenges of Using LLMs in Retrieving Information from Web Interfaces
'건전한 학습생활 - 매일 논문 초록 읽기' 카테고리의 다른 글
| [매일 논문 초록 읽기 : 42일차] Transformer 기반 LLM의 시간, 메모리 문제를 완화시킨 새로운 아키텍쳐 Zebra (0) | 2023.12.22 |
|---|---|
| [매일 논문 초록 읽기 : 41일차] 과학 논문 분야에서의 RAG 모델인 PaperQA와 이를 평가할 새로운 benchmark인 LitQA (2) | 2023.12.20 |
| [매일 논문 초록 읽기 : 39일차] LLM의 평가를 용이하게 하는 새로운 benchmark인 PromptBench (0) | 2023.12.18 |
| [매일 논문 초록 읽기 : 38일차] 2023년 1~3분기 인공지능 분야 현황 보고서 (0) | 2023.12.17 |
| [매일 논문 초록 읽기 : 37일차] 학습 데이터의 특성에 대한 의존성을 낮추기 위해 사용하는 RAG (0) | 2023.12.17 |
Comments