geeknews_bot @geeknews_bot@sns.lemondouble.com
Public

FastLanes – 차세대 빅데이터 파일 포맷
------------------------------
- 최신 하드웨어(SIMD·GPU)를 전제로 설계된 오픈소스 *컬럼 지향 파일 포맷*
- 분석·AI 워크로드에서 *고처리량·저지연 데이터 접근* 을 목표로 함
- *Parquet 대비 약 40% 높은 압축률* , *최대 40배 빠른 디코딩 속도* 를 달성
- 데이터 의존성을 최소화한 *Lane 기반 레이아웃* 을 도입해 각 단위를 독…
------------------------------
https://news.hada.io/topic?id=25426&utm_source=googlechat&utm_medium=bot&utm_campaign=1834

FastLanes – 차세대 빅데이터 파일 포맷 | GeekNews

최신 하드웨어(SIMD·GPU)를 전제로 설계된 오픈소스 컬럼 지향 파일 포맷분석·AI 워크로드에서 고처리량·저지연 데이터 접근을 목표로 함Parquet 대비 약 40% 높은 압축률, 최대 40배 빠른 디코딩 속도를 달성데이터 의존성을 최소화한 Lane 기반 레이아웃을 도입해 각 단위를 독립적으로 디코딩 가능SIMD·멀티코어 CPU·GPU에서 극단적인 데이

news.hada.io · GeekNews

0
0
0

If you have a fediverse account, you can quote this note from your own instance. Search https://sns.lemondouble.com/notes/agvfl30wb9 on your instance and quote it. (Note that quoting is not supported in Mastodon.)