0

我正在使用 docker 容器检查 Apache Aurora (1.1.0) (0.16.0) 和 Apache Mesos (0.16.0) (1.1.0)。这是一个示例 Aurora 作业定义,

process_nginx = Process(
    name='nginx',
    cmdline=textwrap.dedent(r'''
        exec /path_to/nginx -g "daemon off; pid /run/nginx.pid; error_log stderr notice;"
    '''),
    min_duration=3,
    daemon=True,
)

task_nginx = Task(
    name='nginx',
    processes=[process_nginx,],
    resources=Resources(
        cpu=0.1,
        ram=20*MB,
        disk=50*MB,
    ),
    finalization_wait=14,
)

job_nginx = Job(
    cluster='x',
    role='root',
    name='nginx',
    instances=6,
    service=True,
    task=task_nginx,
    priority=1,
    #tier='preferred',
    constraints={
        'X_HOST_MACHINE_ID': 'limit:2',
        'HOST_TYPE.FRONTEND': 'true',
    },
    update_config=UpdateConfig(
        batch_size=1,
        watch_secs=29,
        rollback_on_failure=True,
    ),
    container=Docker(
        image='my_nginx_docker_image_name',
        parameters=[
            {'name': 'network', 'value': 'host'},
            {'name': 'log-driver', 'value': 'journald'},
            {'name': 'log-opt', 'value': 'tag=nginx'},
            {'name': 'oom-score-adj', 'value': '-500'},
            {'name': 'memory-swappiness', 'value': '1'},
        ],
    ),
)

但是,由于指定diskram限制困扰着我,我想让两者都禁用。

问题1

我认为如果我的所有 mesos 代理都是使用选项--isolation=cgroups/cpu(not ) 启动的,那么只有 CPU 资源会被隔离(=limited --isolation=cgroups/cpu,cgroups/mem)。

但即使在这种情况下,mesos docker containerizer 启动的所有 docker 容器都有--memory选项,这是硬限制,如果 docker 容器需要更多内存,则会导致 OOM 杀手。(而且似乎 mesos docker containerizer 不支持--memory-reservation。)

问题 2

即使在Aurora实例中--isolation=cgroups/cpu删除ram或参数的情况下,也会导致以下错误。diskResource

加载配置时出错:TypeCheck(FAILED): MesosJob[task] failed: Task[resources] failed: Resources[ram] is required。

我的问题

  • 是否可以禁用内存和磁盘隔离?
  • --isolation=cgroups/cpu和 和有什么不一样--isolation=cgroups/cpu,cgroups/mem
4

1 回答 1

1

正如您所发现的,您可以禁用 Mesos 中的内存和磁盘隔离器,方法是不将它们指定为隔离代理标志的一部分。我不确定 Docker Containerizer 在这种情况下的行为,但您可能想尝试使用Mesos Containerizer,因为这是在 Mesos 中运行 Docker 映像的首选方式。

Resources从您的 Aurora 配置中省略 而言,不幸的是,这是不可能的。每个 Aurora 作业都必须指定其资源要求,以便调度程序可以将您的任务实例与 Mesos 的报价相匹配。

于 2016-11-26T19:59:52.183 回答