AI Briefing#nlp
#nlp와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#nlp와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Transformers v5는 토크나이저 설계와 학습된 어휘를 분리하여 모듈성과 커스텀 편의성을 대폭 강화했다.
인기 임베딩 라이브러리인 Sentence Transformers가 TU Darmstadt UKP Lab에서 Hugging Face로 이관된다.
OpenChat의 사용자 참여를 높이기 위해 메시지 텍스트에서 트렌딩 키워드를 추출하는 기술을 개발했다.
1,800개 이상의 언어를 지원하며 ModernBERT 아키텍처를 기반으로 한 차세대 다국어 인코더 mmBERT가 공개되었다.
아랍어 LLM의 STEM 및 코드 생성 능력을 평가하기 위한 새로운 벤치마크 3LM이 공개되었다.
TII가 Falcon 3 아키텍처를 기반으로 아랍어 성능을 극대화한 7B 파라미터 모델 Falcon-Arabic을 공개했다.
Sentence Transformers v4.0 업데이트를 통해 Reranker 모델의 효율적인 학습 및 파인튜닝 방법이 공개되었다.
8,192 토큰의 긴 컨텍스트와 향상된 성능을 갖춘 차세대 BERT 대체 모델, ModernBERT가 공개되었습니다.
핵심 정보를 앞쪽 차원에 집중시켜 성능 저하 없이 임베딩 차원을 축소하는 Matryoshka Embedding 기술을 소개한다.
설명 가능한 인공지능(XAI)의 개념을 정의하고, Computer Vision과 NLP 모델의 성능 개선 및 사용자 경험 향상을 위한 활용 사례를 소개한다.
데이터 어노테이션 도구 Prodigy와 Hugging Face를 직접 연결하는 Prodigy-HF 플러그인이 출시되었다.
Meta AI의 fastText 모델과 157개 언어의 워드 벡터가 Hugging Face Hub에 통합되었습니다.
BERTopic 모델을 Hugging Face Hub에 직접 저장하고 불러올 수 있는 통합 기능이 추가되었습니다.
Witty Works가 SetFit를 활용해 적은 데이터로 문맥에 따른 비포용적 언어를 분류하는 기술적 해결책을 구현했다.
Sentence Transformers 창시자 Nils Reimers가 MTEB·BEIR로 임베딩 평가법을 공유한다.
카카오페이가 방대한 데이터를 활용해 사용자 행동을 분석하고 개인화 서비스를 제공하는 유저 프로파일링 시스템 '페이프로파일'을 소개한다.
기존 웹 크롤링 데이터의 편향과 저작권 문제를 해결하기 위해 크라우드 소싱으로 생성된 한국어 혐오 발화 평가 데이터셋 APEACH를 공개했다.