Pull to refresh
4
Семен Самарский@ex610z

User

2
Subscribers
Send message

Data Quality в масштабе Big Data: как мы построили систему контроля качества данных в Hadoop

Reading time9 min
Reach and readers11K

Качество данных — это не просто вопрос наличия значений в столбцах таблиц. Это вопрос доверия к данным в целом. Мы можем создавать сложные системы отчётности, но если на каком-то этапе ETL в данных возникают пропуски, дубликаты или они не соответствуют ожиданиям, вся система теряет доверие потребителей. В результате приходится тратить много времени на поиск и устранение причин таких проблем.

Читать далее

Information

Rating
Does not participate
Location
Россия
Registered
Activity