doufen-org / tofu Goto Github PK

View Code? Open in Web Editor NEW

535.0 8.0 45.0 3.02 MB

一款 Chrome 扩展。用于备份豆瓣账号的数据，并支持导出 Excel 文档。

Home Page: https://doufen.org

License: MIT License

CSS 2.12% JavaScript 75.65% HTML 18.39% C 2.68% CMake 1.16%

douban chrome doufen

tofu's People

Contributors

Stargazers

Watchers

Forkers

karma-er tonyzhang0102 vshangxiao wilbeibi rinkaka st-youth einvince siml1169 ywzhaiqi nixyme raylying sanqienjoy jarrywangcn neiljudson mrluzhe zokingo alphabet1226 ryanhun wq163 dsbj90 sunyanbin metalecho octref lipinghai sensensen404 huangjiahua chenhongjihelena slnuo pipa78 onestarshang yuanyunjing rivero0o weteams shin000000 monywoex heremk watch-later elneanor nonomal i7mist zhuth estost tonytony2020 jessecai33 yanghaod2278827

tofu's Issues

导出收藏豆列失败

Export other users' dou-list fails, right after finishing exporting lists of my own:

 [2020-02-06T06:22:19.657Z] DEBUG: Fetching https://m.douban.com/rexxar/api/v2/user/91872582/following_doulists?start=0&count=50&ck=H3Jq&for_mobile=1...

[2020-02-06T06:22:22.558Z] ERROR: Fail to run task:Error: 豆瓣服务器返回错误

[2020-02-06T06:22:22.559Z] DEBUG: Close local database

[2020-02-06T06:22:22.560Z] DEBUG: Job completed...

[2020-02-06T06:22:22.562Z] DEBUG: Service is pending...

[2020-02-06T06:22:22.563Z] DEBUG: Waiting for the job...

Also the export procedure is not shutting down gracefully, instead it halts on the WAITING state.

书影音备份条目缺失

我的“看过”一共有543条，但备份后只有511条，缺失的条目都在第205条到第250条之间（按豆瓣书影音界面上顺序）。

Cloudinary 接口返回错误

[2020-02-06T08:30:53.455Z] ERROR: Fail to run task:Error: Cloudinary 接口返回错误

[2020-02-06T08:30:53.460Z] DEBUG: Close local database

[2020-02-06T08:30:53.464Z] DEBUG: Job completed...

[2020-02-06T08:30:53.468Z] DEBUG: Service is pending...

[2020-02-06T08:30:53.471Z] DEBUG: Waiting for the job...

如果导出的文件能将电影的海报抓进去就太好了，否则重名的实在很多，无法分辨。。

感谢感谢

希望改进导出的xlsx条目

现在导出的书影音会把导演、年份、演员、类型、地区等统统丢到一列「简介」里，希望可以分离成每一个单独的列。
现在的书影音名字只有中文名，希望在中文名之后加上外文原名。

插件里边显示图片上传到cloudinary了，但进入cloudinary却找不到

日志的最后几条显示如下
[2019-08-28T08:43:16.624Z] DEBUG: Fetching https://api.cloudinary.com/v1_1/douban/image/upload...

[2019-08-28T08:43:16.768Z] DEBUG: Fetching https://api.cloudinary.com/v1_1/douban/image/upload...

[2019-08-28T08:43:16.907Z] DEBUG: Fetching https://api.cloudinary.com/v1_1/douban/image/upload...

[2019-08-28T08:43:17.039Z] DEBUG: Close local database

[2019-08-28T08:43:17.046Z] DEBUG: Job completed...

[2019-08-28T08:43:17.053Z] DEBUG: Service is pending...

[2019-08-28T08:43:17.058Z] DEBUG: Waiting for the job...

账号迁移过程中报错，无法识别已经迁移过的数据，每次都重新操作一遍

条目比较多，接近4000多条，每次似乎都在同一个地方出错，但下次会比前面一次多迁移1-2个条目

[2020-02-07T13:58:21.228Z] DEBUG: Fetching https://music.douban.com/j/subject/1752101/interest...
[2020-02-07T13:58:24.451Z] ERROR: Fail to run task:SyntaxError: Unexpected token < in JSON at position 1
[2020-02-07T13:58:24.454Z] DEBUG: Close local database
[2020-02-07T13:58:24.457Z] DEBUG: Job completed...
[2020-02-07T13:58:24.461Z] DEBUG: Service is pending...
[2020-02-07T13:58:24.463Z] DEBUG: Waiting for the job...

无法备份广播和日记下的评论

虽然备份的时候广播和日记的评论那里会现实数量，但是却是灰色无法点击，有没有办法可以备份这些评论呢？

QuotaExceededError 连续出现，本以为等24小时可以解决，但并没有。。

[2019-08-28T05:26:05.024Z] ERROR: AbortError: QuotaExceededError

[2019-08-28T05:26:05.034Z] DEBUG: Stopping service...

[2019-08-28T05:26:05.045Z] DEBUG: Service stopped.

无法备份豆列？

不知道是不是暂时的故障。有其他人也这样的吗?

（可能不是插件问题）Mac环境，chrome组件，无法连接至m.douban.com

[2020-09-03T09:11:07.740Z] DEBUG: Starting service...

[2020-09-03T09:11:07.743Z] DEBUG: Service started.

[2020-09-03T09:11:07.744Z] DEBUG: Performing job...

[2020-09-03T09:11:07.745Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-09-03T09:11:09.203Z] DEBUG: TypeError: Failed to fetch

[2020-09-03T09:11:09.205Z] DEBUG: Attempt to fetch 2 times...

[2020-09-03T09:11:09.205Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-09-03T09:11:10.665Z] DEBUG: TypeError: Failed to fetch

[2020-09-03T09:11:10.666Z] DEBUG: Attempt to fetch 1 times...

[2020-09-03T09:11:10.667Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-09-03T09:11:12.185Z] ERROR: TypeError: Failed to fetch

[2020-09-03T09:11:12.187Z] DEBUG: Stopping service...

[2020-09-03T09:11:12.189Z] DEBUG: Service stopped.

豆瓣FM支持

https://douban.fm/mine/hearts
主要是红心的曲名、艺术家、专辑名、年份。
https://douban.fm/history/played
https://douban.fm/history/banned
累计收听和不再播放顺便也可以弄下。
谢谢。

可否增加备份“收藏的影人”？感谢

请问有没有类似豆坟可以备份哔哩哔哩收藏夹的工具？

希望可以导出电影原名

如图，导出的 data 里只有电影的中文译名：

希望支持增量备份

点击停止后服务状态始终在“正在停止”状态上

点击停止后，服务状态始终在“正在停止”状态上不能改变，已经半个多小时。无法开启或者进行新的备份。也不能让它停止。

mac按照教程设置好了本地域名解析但最近不知道为什么又不能备份了

电脑是mac浏览器是Chrome，之前根据这个教程设置好了，能打开https://m.douban.com 并进行备份了，但最近不知道为什么又没办法备份了。没有更新过系统在这期间。

可否添加导出图相册(甚至所有数据)到 dav 网盘的功能？

由于Chrome扩展没有写入本地文件的权限，所以无法下载图片。倒是可以把相册的图片链接导出，然后导入下载工具进行下载，不过没有归档整理，意义不大。

图片备份会在以后的“里豆瓣”项目中实现

Originally posted by @tabris17 in #2 (comment)

所以储存可以指向 dav 等协议的网盘吗?

发现上一个备份任务即便手动结束，也没有办法开始下一个备份任务。

如题。有时候就卡住，重新开始，但点击了新建任务之后出现的界面是上一个没完成的。

希望能把小组相关的数据导出来，尤其是「发起的讨论」

比如，有些文章没发布在笔记或日记里，而是发布在一些小组里了，希望能把这部分的数据也导出来

「豆坟」浏览器是开源的吗

好像只找到二进制文件没找到源代码

增加：搜索功能

你好！

谢谢开发者开源出这好的工具。

不知以后有无增加搜索功能？
或是在设置页面可以设置 page_size，然后可以全部显示，然后自己用 Chrome 自带的搜索功能？

谢谢！

无法备份书影音

如图，点击“开始”按钮之后，并不会开始，状态一直卡在“已停止”，请问是什么原因呢？

谢谢。

备份过程停留在“服务状态：等待任务”页面

一开始每个条目的备份都有进度条在显示

过了一会页面只显示：服务状态：等待任务

请问这正常吗？

部分长广播没有备份完整内容

无法导出数据

Windows 10 Pro 20H2
Google Chrome Version 87.0.4280.88 (Official Build) (64-bit)
浏览备份是正常的，但是点击导出数据会一直转圈圈。
感谢！！！

备份 cloudinary 报错

相关配置是按照教程设置的，但是会报错

命令行报错信息

[2021-01-23T07:29:01.998Z] DEBUG: Fetching https://api.cloudinary.com/v1_1/franksun/image/upload...

[2021-01-23T07:29:03.096Z] ERROR: Fail to run task:Error: Cloudinary 接口返回错误

[2021-01-23T07:29:03.097Z] DEBUG: Close local database

接口报错信息

{
"error": {
"message": "Upload preset must be specified when using unsigned upload"
}
}
{
error: {
message: "Upload preset must be specified when using unsigned upload"
}
}

请问能否增加导出原名？方便书影音导入letterbox等网站，谢谢

如题

requestInterval加点随机吧

有两次豆瓣需要验证了，感觉加点随机会好点。

可有加入导出图片功能的计划？

无法导出广播

广播都备份好了,但是导出广播的时候会一直转圈圈. 其他项目导出没有问题. 我没有笔记. 谢谢!

最近几次更新都不成功，显示 TypeError: Failed to fetch

最近尝试更新了几次，显示都是不成功，日志如下图：

[2020-02-05T04:50:04.849Z] DEBUG: TypeError: Failed to fetch

[2020-02-05T04:50:04.851Z] DEBUG: Attempt to fetch 2 times...

[2020-02-05T04:50:04.853Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-02-05T04:50:05.065Z] DEBUG: TypeError: Failed to fetch

[2020-02-05T04:50:05.066Z] DEBUG: Attempt to fetch 1 times...

[2020-02-05T04:50:05.067Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-02-05T04:51:20.396Z] ERROR: TypeError: Failed to fetch

[2020-02-05T04:51:20.399Z] DEBUG: Stopping service...

[2020-02-05T04:51:20.402Z] DEBUG: Service stopped.

[2020-02-05T04:51:43.947Z] DEBUG: Starting service...

[2020-02-05T04:51:43.953Z] DEBUG: Service started.

[2020-02-05T04:51:43.956Z] DEBUG: Performing job...

[2020-02-05T04:51:43.958Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-02-05T04:52:59.381Z] DEBUG: TypeError: Failed to fetch

[2020-02-05T04:52:59.382Z] DEBUG: Attempt to fetch 2 times...

[2020-02-05T04:52:59.383Z] DEBUG: Fetching https://m.douban.com/mine/...

[2020-02-05T04:52:59.638Z] DEBUG: TypeError: Failed to fetch

[2020-02-05T04:52:59.639Z] DEBUG: Attempt to fetch 1 times...

[2020-02-05T04:52:59.639Z] DEBUG: Fetching https://m.douban.com/mine/...

请问有虾坟吗？听说虾米可能要没了~

备份好像失败了，账号信息找不到

上一次任务是一个多月前，今天打开看，账号那个tab是空的，看不到任何信息；然后开启新任务每次都是开始后几秒就立即回到了“停止”状态，似乎是账号信息找不到了，但是又没有地方重新输入。

作者大神是否考虑把项目放到其他代码托管平台上？

如题

开始备份后进度条没有变化

运行一会儿以后，服务状态变成已停止。进度条都是灰的。

此插件会将备份数据存储在何处（未导出）？

我的 Chrome 因为诡异 Bug 而无法使用插件了。
我现在只想把此插件的已有数据提取出来——比如拷贝到 Edge 再导出成 .xlsx 表格文件。
所以需要请教此插件会将备份数据存储在何处（未导出）？

其他导出方式

豆瓣的数据比较适合用表格记录。
有没有可能支持下导出到其他软件，比如Notion，AirTable这些，都有对应的api，应该可以实现。

无法备份广播

其他内容都可以正常备份，但备份广播的任务总是在新建之后迅速结束，但实际上没有备份

任务新建后仅显示“运行中”，进度条不动，一段时间后显示为“已停止”，数据未备份

如题。

插件内的Bug提交结果：
[2019-08-09T23:48:16.920Z] DEBUG: Creating a job...
[2019-08-09T23:51:15.037Z] DEBUG: Starting service...
[2019-08-09T23:51:15.045Z] DEBUG: Service started.
[2019-08-09T23:51:15.047Z] DEBUG: Performing job...
[2019-08-09T23:51:15.051Z] DEBUG: Fetching https://m.douban.com/mine/...
[2019-08-09T23:51:36.061Z] ERROR: TypeError: Failed to fetch
[2019-08-09T23:51:36.081Z] DEBUG: Stopping service...
[2019-08-09T23:51:36.110Z] DEBUG: Service stopped.

Console的错误信息：
m.douban.com/rexxar/api/v2/user/【【我的豆瓣数字ID】】?ck=4UcR:1 Failed to load resource: net::ERR_CONNECTION_TIMED_OUT
options.js:75 Uncaught (in promise) TypeError: Failed to fetch
async function (async)
render @ options.js:74
(anonymous) @ options.js:270