Data Engineering Weekly #278
이슈 내 아티클 8건
| 아티클 | 출처 | 한 줄 요약 |
|---|---|---|
| Building Lyfts ARIA Assistant as Onboarding Project | Sagar Baronia (Lyft) · eng.lyft.com | LangGraph·SQL 생성·시맨틱 레이어를 갖춘 백엔드는 이미 있었지만 Streamlit 프론트엔드 때문에 프로토타입에 갇혀 있던 사내 분석 어시스턴트를, 신규 입사자의 온보딩 프로젝트로 3… |
| Direct Lake is Magic Until It Isnt | Praveenkrishnan · Medium | Direct Lake는 프레임을 메모리에 못 올리면 에러를 던지지 않고 조용히 DirectQuery로 fallback하기 때문에, 리포트는 계속 동작하면서 성능만 무너지고 원인을 며칠 동안 못… |
| Flint - A Visualization Language for the AI Era | Brenda Potts (Microsoft Research) · microsoft.com | 짧은 차트 스펙은 밋밋한 결과를, 예쁜 차트는 장황하고 깨지기 쉬운 스펙을 요구한다는 트레이드오프를, 의미론적 타입에서 저수준 설정을 컴파일러가 유도하는 중간 언어로 끊어낸 오픈소스 프로젝트. |
| MCP tool design - Practical approaches and tradeoffs | Daniel Wells, Raian Osman (AWS) · AWS ML Blog | MCP 툴이 부진할 때 원인은 프로토콜이 아니라 툴 설계이며, 거의 모든 실패가 bloat(정의가 컨텍스트를 먹음) 와 confusion(모델이 잘못 고름) 두 축의 균형 문제로 환원된다 — 하… |
| Measuring the Impact of Personalized Recommendations | Netflix Technology Blog · netflixtechblog.medium.com | 추천은 수요를 겨냥해 배치되기 때문에 “추천된 타이틀의 시청 비중”은 인과적 질문에 답하지 못하고, Netflix는 low-rank 선택 모델 + 소규모 랜덤 실험 검증이라는 하이브리드로 노출·… |
| Scaling Grabs Data Lake - Journey to Apache Iceberg | Rahul Penti (Grab) · engineering.grab.com | 페타바이트 규모에서 Hive Metastore + 디렉토리 레이아웃이 한계에 부딪혀 Iceberg로 전환하되, 전체를 한 번에 바꾸는 대신 스캔 빈도·API 비용 기준으로 고가치 테이블부터 옮기… |
| The Medallion Architecture Reconsidered | Santosh Shinde · Medium (AI That Ships) | Bronze/Silver/Gold는 레이크하우스를 조직하는 기본 멘탈 모델의 자리를 정당하게 얻었지만, 패턴에 대한 비판이 날카로워졌고 AI 워크로드가 데이터 플랫폼에 요구하는 것 자체를 바꿔놓… |
| The language tax on AI | Bharath Vadhoola · LinkedIn Pulse | 토크나이저가 영어 데이터 위주로 학습된 탓에 비영어 사용자는 같은 의미의 텍스트에 몇 배의 토큰을 지불하며, attention이 시퀀스 길이에 제곱으로 비례하므로 이 격차는 비용에서 더 크게 증… |
상위: index