home.social

#parquet — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #parquet, aggregated by home.social.

  1. −1000% занятости: как я нашёл дыры в собственном опубликованном датасете

    Мы выложили открытый датасет по загруженности парковок, а потом увидели в нём процент занятости со значением −1000. Дальше — расследование, в котором каждая следующая гипотеза оказывалась неверной: почему пересчитать «правильно» было бы худшим решением, как достать из данных знаменатель, которого в них нет, и почему проверка, честно срабатывавшая полтора года, никого ни разу не предупредила.

    habr.com/ru/articles/1085408/

    #датасеты #dataquality #parquet #kaggle #pandas #валидация #открытыеданные

  2. −1000% занятости: как я нашёл дыры в собственном опубликованном датасете

    Мы выложили открытый датасет по загруженности парковок, а потом увидели в нём процент занятости со значением −1000. Дальше — расследование, в котором каждая следующая гипотеза оказывалась неверной: почему пересчитать «правильно» было бы худшим решением, как достать из данных знаменатель, которого в них нет, и почему проверка, честно срабатывавшая полтора года, никого ни разу не предупредила.

    habr.com/ru/articles/1085408/

    #датасеты #dataquality #parquet #kaggle #pandas #валидация #открытыеданные

  3. −1000% занятости: как я нашёл дыры в собственном опубликованном датасете

    Мы выложили открытый датасет по загруженности парковок, а потом увидели в нём процент занятости со значением −1000. Дальше — расследование, в котором каждая следующая гипотеза оказывалась неверной: почему пересчитать «правильно» было бы худшим решением, как достать из данных знаменатель, которого в них нет, и почему проверка, честно срабатывавшая полтора года, никого ни разу не предупредила.

    habr.com/ru/articles/1085408/

    #датасеты #dataquality #parquet #kaggle #pandas #валидация #открытыеданные