管理服务器是核心的视频管理软件组件。它在SQL Server数据库中存储监控系统的配置，该数据库位于管理服务器计算机自身的SQL Server上或网络中单独的SQL Server上。还可处理用户身份验证、用户权限、规则系统等。

为改善系统性能，可以将多个管理服务器作为 Milestone Federated Architecture™ 运行。管理服务器作为服务运行，并且通常安装在专用服务器上。

用户连接到管理服务器进行初始身份验证，然后透明地连接到记录服务器以便访问视频记录等。