本申请实施例提供一种任务分配方法、装置、服务器和存储介质，该方法可应用于分布式爬虫系统中的主节点，该任务分配方法包括：向从节点发送任务数量为第一数量的第一任务；接收从节点返回的第一数量的第一任务的任务执行结果；根据任务执行结果计算从节点当前的处理能力值；根据当前的处理能力值对从节点的任务数量进行更新，以在下一次发送任务时根据更新后的任务数量向从节点发送任务。以此能够改善现有技术中爬虫集群的处理效率低的问题。