可以处理大数据的电子表格应用程序 OS X

可以处理大数据的电子表格应用程序 OS X

我使用 Excel 进行一些常规统计分析已经有一段时间了。然而,最近我处理的数据量变得越来越大。相关数据库的布局非常简单,通常只有三行,其中包括一个 UNIX 时间戳、一个 EST 值、一个专有数值,最后是时间戳为 +/- 1000 的行的平均值(小AVERAGEIFS()公式)。该公式和 EST 转换是工作表中唯一的公式。

我开始处理包含 500,000 多行的文件。对整行运行平均公式需要很长时间。最终结果是生成值得打印的图表。我正在寻找 UNIX CL 实用程序或单独的电子表格/数据库应用程序,可以处理这种数量的数据,而不会耗尽我的 CPU 或让我等待一个小时。有没有什么可以做的?

总结:包含超过五十万行数据的简单 Excel 表处理起来太慢了。有 OS X 替代品吗?

答案1

我会看看您是否可以在传统数据库(SQL 或类似数据库)或类似 R 控制台的程序中执行此操作。如果问题出在绘图而非计算上,我会尝试进行某种类型的过滤(不确定您拥有哪种数据,或者数据如何分布,但无论如何您不需要图表上有 500k+ 个数据点)以摆脱绘图中许多不需要的数据点。这将使绘图更快(如果 Excel 太慢,您可以使用 R 或 gnuplot 进行实际绘图)

相关内容