























这是一个创建于 1453 天前的主题,其中的信息可能已经有所发展或是发生改变。
在 VPS 上起了一个 MongoDB 服务,存一些爬虫抓来的数据
结果隔三差五就会丢失一部分 collection ,代码里没查出问题,加上每天都会重抓补齐数据,就一直没管
前两天想着还是解决一下,用 Celery 做了一个每分钟执行的任务,检查 collections 里缺少某一张表就发消息报警
结果三天过去了,数据都没再丢了
MongoDB 是第一个使用概率云形式存储数据的数据库吗,一直被观察就会坍缩,不观察就会逸散的
(其实是想问问丢数据的原因,和排查的方法)
1 Envov 2022 年 6 月 22 日薛定谔的数据库 |
2 ClericPy 2022 年 6 月 22 日果然不观察就会坍缩... 一般稍微正经一点的公司都不会让直连数据库吧, 直接查操作日志不行么 |
3 acehowxx 2022 年 6 月 22 日 via Android也可能是你的记忆出了问题。是不是看了啥不该看的东西被黑衣人删记忆了。 |
4 Buges 2022 年 6 月 22 日 via Android这个常见啊,你存入数据库的代码有什么 bug ,比如哪里吞了报错、存在 data race 、变量覆盖等原因,导致部分数据没有真的存入数据库。 |
7 jin7 2022 年 6 月 22 日 via Androidmongodb 真不建议使用。 用 es 不行吗 |
8 adekyou06 2022 年 6 月 23 日 via Android量子数据库,笑死 |
9 dream4ever 2022 年 6 月 23 日感觉很大可能是代码层面的问题,或者 MongoDB 没有用对,都商业化了还出这种问题,那 MongoDB 也太菜了。 |
10 Saxton 2022 年 6 月 23 日《量子数据库》 |
12 haoliang 2022 年 6 月 23 日以我对 mongodb 跟楼主代码的理解,我不相信是数据库的问题,也不相信这些上来就“xx 就是不行”的结论。 |
13 libook 2022 年 6 月 23 日我用过 7 年 MongoDB ,做公司的支付和订单系统的数据库,没出过什么幺蛾子,性能也不错;遇到过觉得不好用的要么是对这个数据库的特性不够了解,要么就是拿来当存关系模型。 查一下数据库日志呗,看看有没有 drop 记录,没有的话问问 VPS 运营商是不是回滚来着,滚到了 collection 产生之前的快照。 @jin7 #7 ES 是搜索引擎,跟 MongoDB 根本不是一类东西,各有擅长的场景,所以通常可以拿 ES 跟业务数据库组合使用,我们之前就是使用 MongoDB 的 Change Streams 特性来同步数据给 ES 用的,用于支持一些实时性要求低的复杂表单搜索场景。 |
14 karloku 2022 年 6 月 23 日丢失 collection 不至于. |
15 mlxy123123 2022 年 6 月 23 日喷了,查到了原因,原来是被勒索了 ```{ "_id" : ObjectId("62b32c12a4e36a7a7746a711"), "content" : "All your data is a backed up. You must pay 0.01 BTC to 12nx7Q6FAczH6yfhaEMJRmvRkavDTcwUJK 48 hours for recover it. After 48 hours expiration we will leaked and exposed all your data. In case of refusal to pay, we will contact the General Data Protection Regulation, GDPR and notify them that you store user data in an open form and is not safe. Under the rules of the law, you face a heavy fine or arrest and your base dump will be dropped from our server! You can buy bitcoin here, does not take much time to buy https://localbitcoins.com with this guide https://localbitcoins.com/guides/how-to-buy-bitcoins After paying write to me in the mail with your DB IP:\[email protected]\[email protected]" } 勒去吧,玩具服务器而已 |
16 alexsunxl 2022 年 6 月 23 日哈哈哈哈哈。 这也太好笑了。 |
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。