Собеседование Senior Data Engineer Оффер на 400k HuntIt
Added 2024-07-16 08:02:56 +0000 UTCСобеседование Senior Data Engineer Оффер на 400k HuntIt
Систем дизайн вопрос:- стартап BTC продуктовый
- данные с двух бэкенд БД, кликстрима, аналитика, CRM систем, звонилок и пр.
- 30 млн строк рассылки в месяц в каждой БД
- 300 млн кликстрима в месяц
Как я построю хранилище данных?
Вопросы к решению + на теорию:
- почему витрины выбрал Кимбалла, а не OBT?
- работал с dbtvault?
- почему для ядра хранилища Инмон, а не data vault?
- что используешь для обеспечения качества данных?
- как бы дальше работал с хранилищем после определения архитектуры?
- работал ли с CDC? какие проблемы можешь встретить с данными из CDC (не конфиг сервиса, а работа с ним как DE)
- какие бывают индексы в БД?
- шардирование vs партицирование?
- как работал с Airflow?
- что ищешь, какие твои сильные и слабые стороны?
- норм ли тебе работать одному над проектом?
Comments
<div ><div><span class="text">по факту компания 1WIN ?</span></div></div>
Eugene
2024-07-18 14:19:33 +0000 UTC<div ><div><span class="text">brjppru, спасибо за предложение. Это видео, присланные участниками сообщества, я не отвечаю за их монтаж, звук и качество картинки.</span></div><div><span class="text">100 usd можно прислать на донатный сбор (или напрямую заказать устройство на мой адрес), я передам его монтажеру.</span></div></div>
Осознанная Меркантильность | Антон Назаров
2024-07-16 09:07:52 +0000 UTC<div ><div><span class="text">Антон, купи пожалуйста platinum notes хотя-б. Звук "попердывает" не нормализован, клипует, Эта штука позволит его хотя бы привести к тому, что не будет скакать громкость, не будет "клипов" и вообще можно будет слушать. Брать тут https://mixedinkey.com/platinum-notes/how-to/ - стоит 100 USD, дешевле чем любой звукоинженер и не нужно учить solfeggio компрессию, нормализацию и вообще становиться саундпродюссером. Нажал готово. Пожалей нашы ушы, а то приходится видео выкачивать, потом выдерать оттуда звук, нормализовывать и потом уже можно слушать. Благодарю.</span></div></div>
brjppru
2024-07-16 08:59:57 +0000 UTC
