之前用的是2.0.0的版本,平时从S3导入数据的速度非常快,1G大小的数据,小几十秒就导完了。升级到2.1.8之后,同样大小的文件,需要30多分钟才能导入完成。通过查看BE节点的监控发现,前后下载文件的速度差距非常大,2.0.0版本下载速度一般可以到几百Mb/s,而2.1.8版本,一般只有几Mb/s,甚至只有几十Kb/s。两个版本的be.conf的配置是一样,不知是否需要修改其他的配置,才能提高数据的导入速度。
之前用的是2.0.0的版本,平时从S3导入数据的速度非常快,1G大小的数据,小几十秒就导完了。升级到2.1.8之后,同样大小的文件,需要30多分钟才能导入完成。通过查看BE节点的监控发现,前后下载文件的速度差距非常大,2.0.0版本下载速度一般可以到几百Mb/s,而2.1.8版本,一般只有几Mb/s,甚至只有几十Kb/s。两个版本的be.conf的配置是一样,不知是否需要修改其他的配置,才能提高数据的导入速度。