Golang 实现 HTTP GET 结果的内存缓存

Golang不知道大家是否熟悉？今天我将给大家介绍《Golang 实现 HTTP GET 结果的内存缓存》，这篇文章主要会讲到等等知识点，如果你在看完本篇文章后，有更好的建议或者发现哪里有问题，希望大家都能积极评论指出，谢谢！希望我们能一起加油进步！

我正在 Go 中开发一个 CLI，它可以抓取网页以将页面上所有链接的 href 属性收集到一个切片中。我想将此切片存储在内存中一段时间​​，以便每次执行 CLI 命令时都不会调用抓取器。理想情况下，只有在缓存过期或用户提供某种 --update 标志后才会调用抓取器。

我遇到了 go-cache 库和其他类似的库，但据我所知，它们只适用于持续运行的东西，比如服务器。

我考虑过将链接写入文件，但是如何在特定持续时间后使结果过期？为了使用像 go-cache 这样的库，在后台创建一个在一段时间后关闭的小型服务器是否有意义？如有任何帮助，我们将不胜感激。

解决方案

这些场景中有两种主要方法：

1. 创建充当数据存储库的守护程序、服务或后台应用程序。您可以根据您的要求将其作为 HTTP 服务器/RPC 服务器运行。然后，您的 CLI 应用程序根据需要与此守护进程交互；

2. 实施持久性机制，允许跨多个 CLI 应用程序执行写入和读取数据。您可以使用普通的文本文件、数据库甚至 golang 的编码/gob 实现来向二进制文件写入和读取切片（映射可能会更好）。

您可以为条目添加时间戳，并根据上面选择的策略/方法，通过显式删除它们或在后续执行期间不重写它们，在 ttl 过期后简单地删除它们。

此类开放式问题的示例范围和数量太多，无法在单个答案中发布，并且很可能需要多个具体问题。

使用数据库并存储尽可能多的详细信息可以（fetched_at、主机、路径、标题、meta_desc、锚点等）。稍后您将能够查询数据，并且以结构化格式保存数据会很有用。如果您不想处理数据库依赖项，您可以嵌入诸如 Boltdb (pure go) 或 sqlite (cgo) 之类的东西。

以上就是本文的全部内容了，是否有顺利帮助你解决问题？若是能给你带来学习上的帮助，请大家多多支持golang学习网！更多关于Golang的相关知识，也可关注golang学习网公众号。