Находимся в поиске сеньор-разработчика для работы над проектом агрегатора персональных данных. На вход подаём файлы в различных форматах с ключевыми данным, в результате их обработки хотим иметь общую базу вокруг единых идентификаторов данных. Отдельно предполагаются задачи над обогащением данных из открытых источников.
Соответственно, крайне желателен опыт в:
- Парсинге данных как из файлов, так и в веб-формате;
- Работы с высоконагруженными, объёмными БД, начиная от архитектуры или подготовки данных и заканчивая оптимизациями на записьчтение;
- Шифровании данных.
По стеку рассматриваем django либо go, иные вариант интересуют в меньшей степени.
Описывайте ваш релевантный опыт в отклике на задание.