最近运行spark任务,发现一直unassigned。
之前一直认为是一些参数配置过大的缘故,调整了后还是unassigned。
后来看了下配置的queue,貌似很多任务都卡着,然后就换了queue,就没问题了。
估计是由于不同队列的资源占用不同导致的。
最近运行spark任务,发现一直unassigned。
之前一直认为是一些参数配置过大的缘故,调整了后还是unassigned。
后来看了下配置的queue,貌似很多任务都卡着,然后就换了queue,就没问题了。
估计是由于不同队列的资源占用不同导致的。