Kwai перенесла расчёт метрик A/B-экспериментов со Spark на Apache Doris: до 145 раз быстрее при снижении потребления ресурсов на 72%. В переводе разбираем, как команда переработала размещение данных, Local Distinct, UDF, планирование и метаданные FE на кластере из 2000 BE-узлов. С примечаниями о…
[Перевод] Со Spark на Apache Doris: как Kwai ускорила расчёт метрик A/B-экспериментов в 145 раз
Это краткое изложение. Полный текст материала доступен на сайте источника.