home.social

#adversarial_validation — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #adversarial_validation, aggregated by home.social.

  1. Быстрая Data Quality проверка на базе алгоритма adversarial validation

    Привет, Хабр! Всем привет, меня зовут Максим Шаланкин, я Data Science Team Lead в команде Финтеха Big Data МТС. Из этой статьи вы узнаете, как оценивать качество данных при помощи алгоритма adversarial validation с использованием spark user defined function. В частности, я расскажу, почему такой подход хорошо масштабируется и может быть успешно применен к различным типам данных, становясь универсальным инструментом для встраивания в ваши продуктовые процессы. Все подробности — под катом.

    habr.com/ru/companies/ru_mts/a

    #psi #adversarial_validation #data_quality #spark #udf