Pandas 大量的数据，我需要帮助找到一种方法

我已经用Python编写了一个应用程序，它处理用于生成图形的大量数据。我需要帮助找到一种技术，允许用户在两个方向上滚动数据，同时在图形中显示数据段。理想情况下，只有可见的数据才能从数据库中读取

我目前正在使用Pandas、Sqlalchemy和bqplot的组合，但是如果有更好的包来实现所需的功能，我愿意更改

Sqlalchemy似乎是处理数据库的好方法，但我发现文档很难理解，需要朝着正确的方向推进。任何帮助或建议都将不胜感激

谢谢，

---

Steve

您可以将数据存储在一个网格中，该网格的每个矩形都是用户显示器的大小：

这样，最多需要加载4个矩形

---

至于数据库，sqlalchemy很棒，但它确实提供了您不需要的ORM功能。事实上，根据经验，如果您不打算进行表联接（根据您的描述，您不打算这样做），那么您根本不需要SQL数据库，而是需要一个大型键值存储。举个例子，这里有一个，但只需选择任何适合您的键值存储即可