Без GPU в нашем случае не обошлось.
Как элегантно встроить ветку с процессингом в наш масштабируемый пайплайн?
Когда имеешь дело с 3D сканами нужно помнить две вещи про процессинг - это дорого и долго. Да и нагрузка у нас с четкими пиками. Использовать docker и автоскейлинг для нас самое простое решение.
Не про майнинг доклад, однако наиболее полезные статьи для нас были "сделай себе ферму", так как архитектурно очень похоже.
GPU, Docker, scaling. Что в итоге получилось, от чего пришлось отказаться и сколько шишек мы набили - в моем докладе.
Велком-видео:
Презентация доклада:
https://speakerdeck.com/codefest/anna-scherbinina-be3-day2
Запись выступления:
