5μs 내 JIT 컴파일: Postgres pgrust용 고속 JIT 구축하기

역사적으로, 빠른 JIT 컴파일은 마법과 같은 기술이었습니다. 프로덕션 데이터베이스는 LLVM을 사용하거나 C/C++ 코드를 생성하는데, 둘 다 컴파일 시간이 높습니다. 이제 AI 지원 덕분에 어셈블리를 직접 타게팅하는 JIT 컴파일러를 작성하는 것이 실용적이 되었고, 약 5μs의 컴파일 시간을 달성할 수 있습니다. 이것이 Rust로 작성된 Postgres 확장인 pgrust에서 저자가 한 일입니다.

핵심 통찰: JIT 컴파일은 런타임 정보가 동작을 급격히 변경할 때, 예를 들어 알 수 없는 스키마의 데이터를 파싱할 때 가치가 있습니다. 데이터베이스에서 모든 쿼리를 JIT 컴파일하면 2-5배의 성능 향상을 얻을 수 있지만, 컴파일 시간이 무시할 만한 경우에만 가능합니다. LLVM 및 C/C++ 생성은 밀리초가 걸리므로 복잡한 쿼리에만 사용이 제한됩니다. 5μs JIT는 모든 쿼리를 처리할 수 있습니다.

시연을 위해, 이 글은 리터럴과 반복(*)을 지원하는 간단한 정규 표현식 엔진을 만듭니다. 정규식 b(an)*이 벤치마크로 사용됩니다. 인터프리터 버전은 손으로 작성한 코드보다 10-20배 느립니다. JIT 접근 방식은 이 격차를 줄이는 것을 목표로 합니다.

게시물의 주요 요점:

• JIT 컴파일은 런타임에 컴파일된 코드를 생성하는 방식으로, 종종 2-5배의 성능 향상을 제공합니다.
• 전통적인 JIT 경로(LLVM, C 생성)는 높은 컴파일 시간 문제가 있습니다.
• AI 지원은 어셈블리 생성 JIT 작성의 장벽을 낮춥니다.
• pgrust의 JIT 컴파일러는 약 5μs에 코드를 컴파일하여 모든 SQL 쿼리에 JIT를 가능하게 합니다.
• 이 글은 파서를 생략하여 간단한 정규식 엔진을 JIT로 만드는 과정을 안내합니다.

데이터베이스 내부 또는 JIT 기술에 관심 있는 개발자에게 이 글은 레거시 시스템을 개선할 수 있는 새로운 접근 방식에 대한 실용적인 통찰을 제공합니다.