빅데이터 배치 및 스트림 통합을 위한 최초의 국가 표준이 공식적으로 발표되었으며, alibaba cloud가 주요 초안 작성 단위가 되었습니다.
2024-09-03
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
최근 국가시장규제총국과 국가표준화국은 빅데이터 분야 최초의 배치스트림 통합 국가표준인 gb/t 44216-2024 "정보기술의 빅데이터 배치스트림 융합 컴퓨팅에 대한 기술 요구사항"을 공식적으로 발표했습니다. ". 이 표준의 주요 초안 단위는 alibaba입니다. cloud computing co., ltd.는 2025년 2월 1일에 공식적으로 구현됩니다.
"정보 기술 빅데이터 배치 및 스트림 융합 컴퓨팅 기술 요구 사항"은 배치 및 스트림 융합 기술을 명확하게 정의하고 배치 및 스트림 융합 시스템이 실시간 및 오프라인 컴퓨팅 모델을 모두 지원할 수 있어야 하며 통합된 자원 관리를 가져야 한다고 규정합니다. 통합 컴퓨팅 프레임워크, 통합 주요 기능에는 api, 통합 sql 인터페이스, 통합 작업 관리, 통합 권한 관리 및 유연한 확장이 포함됩니다.
배치 스트림 융합은 빅데이터 분야에서 중요한 신흥 기술 트렌드입니다. 인터넷이 발전함에 따라 기업은 전자상거래 추천, 운송 물류, 금융 거래 모니터링 등 다양한 시나리오에서 대규모 실시간 데이터 계산에 대한 수요가 증가하고 있습니다. 기존의 배치 컴퓨팅 패러다임은 이러한 요구 사항을 충족할 수 없습니다. 데이터의 실시간 처리 흐름은 통합된 기술 프레임워크 하에서 공식 컴퓨팅과 배치 컴퓨팅을 통합하는 것이 업계의 유일한 방법이 되었습니다.
스트림 컴퓨팅과 배치 컴퓨팅이 호환되는 오픈소스 컴퓨팅 엔진인 아파치 플링크(apache flink)는 빅데이터 컴퓨팅 분야의 떠오르는 스타로, 사용자가 일련의 코드로 스트림 프로세싱이나 배치 프로세싱을 수행할 수 있어 개발 비용이 많이 절약된다. 2019년 alibaba는 apache flink의 모회사를 인수하고 자체 전자 상거래 시나리오 관행을 결합하여 apache flink 제품을 최적화하기 위해 많은 연구 개발 노력을 투자하여 높은 처리량의 엔터프라이즈 수준 애플리케이션 표준을 달성할 수 있었습니다. , 짧은 대기시간, 고가용성, 높은 정확도를 지속적으로 제공하고 있습니다. 글로벌 오픈소스 커뮤니티는 커뮤니티와 기술 혁신을 촉진하는 데 기여하고 선도적인 힘이 됩니다. 현재 apache flink는 alibaba, ant group, bytedance, xiaomi, kuaishou, xiaohongshu, bilibili, didi, china unicom 및 기타 수백 개의 회사에서 업계 배치 스트림 융합 컴퓨팅의 사실상 표준이 되었습니다. 실시간 컴퓨팅을 위해.
중국 빅데이터 분야의 선두주자인 alibaba cloud는 2019년에 배치 스트림 융합 컴퓨팅 기술에 대한 국가 표준 수립 및 편집을 시작했으며 업계의 다양한 부서와 협력하여 초안을 작성하고 개선했습니다. alibaba cloud의 실시간 컴퓨팅 flink 버전 구축 경험과 풍부한 업계 관행을 통합한 국가 표준 "정보 기술 빅 데이터 배치 및 스트림 융합 컴퓨팅 기술 요구 사항"은 배치 및 스트림 융합 컴퓨팅의 기술 개발을 더욱 촉진하고 국내 배치 및 스트림을 안내할 것입니다. 융합 컴퓨팅 시스템 설계, 개발 및 배포를 지원하며 다양한 산업 분야에서 배치 스트림 융합 기술을 구현하는 데 도움을 줍니다.
알리바바 클라우드는 빅데이터 분야에서 탄탄한 기술력을 축적한 것으로 알려졌다. 알리바바 클라우드는 빅데이터 처리 및 분석, 데이터 웨어하우징부터 ai 엔지니어링 서비스까지 풀스택 기술 역량을 보유하고 있다. 자체 개발한 maxcompute, dataworks, hologres 등의 주력 제품은 업계 최고 수준의 데이터 처리 성능, 확장성, 안정성과 동시에 alibaba cloud는 apache flink, apache paimon 등을 포함한 일련의 최고의 오픈 소스 프로젝트에 적극적으로 기여하고 유지하여 개발자에게 다양한 도구와 완전 관리형 클라우드 서비스를 제공합니다.
