GLOBALATLAS AI · Data science infrastructure

Infrastruktura ng data science

Ang interactive analysis ay nakadepende sa laki ng dataset, working memory at reproducible environments.

Isang analysis workspace na maaaring i-reproduce

  1. 01

    Orihinal na data sa persistent storage

  2. 02

    Kapaligiran ng notebook na may pinned dependencies

  3. 03

    Badyet sa memorya para sa mga transforms at intermediate na mga talahanayan

Desisyon sa arkitektura

Planuhin ang RAM para sa aktibong working set, hindi lamang ang input file. Magdagdag ng GPU kung sinusuportahan ng analysis library ang acceleration.

Mga pangangailangan sa configuration

Piliin ang RAM para sa aktibong dataset, object storage para sa mga orihinal, at hiwalay na environment bawat proyekto. Magdagdag ng GPU kung ginagamit ito ng library sa pagsusuri.