后端(新增 ~4400 行):
- 新增 IRSA/IPAC、MAST 两客户端:ZTF 光变曲线(IRSA REST,CSV,免认证)、
TESS 光变(MAST TIC cone search + LC FITS),均复用 SSRF 安全重定向 + 重试
- Gaia DR3 XP_CONTINUOUS 光谱还原(gaia_xp/):逆向 GaiaXPy calibrate() 算法,
55 个 Hermite 系数 → 采样光谱;design_matrix 启动时 OnceLock 预计算一次。
因 fitsio crate 遇 PD(55) 变长数组列会 panic,改用 fitsio-sys 直连 CFITSIO
原生读取;新增 fitsio/fitsio-sys(vendored,无需系统 cfitsio)
- FITS 预览解析层(preview.rs):跨 LAMOST/SDSS/DESI/Gaia XP 的异构 FITS
(BinTable/Image/Hermite 系数)统一归一化为 ObservationPreview JSON
(Spectrum/LightCurve/Photometry/Image 标签枚举,OCP 可扩展)
- 测光 fetcher(photometry.rs):2MASS/AllWISE/Pan-STARRS/Gaia 四源,
均复用 VizieR/Gaia TAP 查询、零新 HTTP 代码,配置驱动表名/列名差异
- 统一全源检索(unified.rs):在 dispatch 之上叠加多目标 × 多源并发 cone 扇出,
失败隔离,两阶段(检索聚合 → 勾选后复用现有 download 端点批量下载)
- registry 注册 6 个新 fetcher + list_all_keys() 暴露全 (Source,ProductSpec)
组合供前端细粒度勾选;Source 枚举增 5 个变体
- 新增 3 条路由:GET /observation/preview、POST /observation/unified/{search,resolve}
前端(新增 ~1600 行):
- UnifiedSearchPanel:三模式目标输入(坐标/天体名/CSV)+ 源 chip 筛选,
按 (source,product) 分组展示候选源并支持勾选批量下载
- SpectrumPlot:手写内联 SVG 光谱折线图(零第三方绘图库),多段叠加 + hover 取值
- ObservationPreviewRenderer + useObservationPreview:预览渲染接入
- useObservation/ObservationResultCard/App 联动统一检索状态与下载链路
|
||
|---|---|---|
| bin | ||
| dashboard | ||
| docs | ||
| migrations | ||
| profiles | ||
| scratch | ||
| skills | ||
| src | ||
| .dockerignore | ||
| .env.example | ||
| .gitignore | ||
| build.rs | ||
| Cargo.lock | ||
| Cargo.toml | ||
| CLAUDE.md | ||
| deploy.sh | ||
| dictionary.txt | ||
| docker-compose.yml | ||
| Dockerfile | ||
| Dockerfile.modeB | ||
| README.md | ||
AstroResearch 天文科研辅助系统
AstroResearch 是一个基于 Rust (Axum) 后端与 React (Vite + TypeScript) 前端的天文文献一体化科研辅助系统。
1. 功能概述 (Overview)
AstroResearch 为天文领域的学者与研究人员提供一站式的文献管理与智能阅读解决方案,核心功能包括:
- 🌌 统一学术检索:一键跨源检索 NASA ADS 与 arXiv 数据库,支持去重元数据卡片式展示、高级组合条件检索与多种排序方式。
- 📥 多通道文献同步与防爬绕过:支持智能后台下载(官方 HTML / ar5iv 回退)、网页端本地 PDF/HTML 手动离线上传,以及浏览器书签脚本一键直推同步(无惧 Cloudflare 等高强度 WAF 拦截)。
- 🏷️ 下载错误诊断与无资源标记:自动记录每篇文献 PDF/HTML 下载失败的具体原因(数据库
error:前缀字段),支持一键标记"无有效全文资源"并从批量任务中排除。 - 📝 结构化文献解析:解析 HTML 或调用 MinerU (PDF 降级解析) 输出标准 GFM Markdown,对 LaTeX 公式实施占位符保护。
- 🗣️ 大模型双语翻译:基于本地天文学词汇库 (Trie 树最长匹配) 构建翻译 Glossary,指导大模型进行公式级精准中英翻译。
- 🪐 引文网络星系图:基于 HTML5 Canvas 的高性能力导向拓扑渲染,双击节点支持引文深度探索。
- ✍️ 划词高亮与笔记:在双语阅读器中自由划词、多色高亮并记录学术心得,数据与文献双向绑定。
- 🩺 馆藏健康度检查:内置诊断与修复工具,检测数据库与物理文件的不一致性并支持一键自动修复。
2. 快速启动 (Quickstart)
2.1 配置环境变量
将根目录下的 .env.example 复制并重命名为 .env:
cp .env.example .env
用编辑器打开填入你的 ADS_API_KEY、LLM_API_KEY、QINIU_ 等第三方服务的认证 Token。
2.2 运行服务 (Run)
方案一:本地开发调试模式 (Development Mode)
开发模式下分别启动后端 API 服务和前端 HMR 热更新服务:
- 启动后端 (Rust Axum):
后端服务默认运行在cargo runhttp://localhost:8000,并会自动初始化本地 SQLite 数据库及运行 migrations 迁移。 - 启动前端 (React Vite):
前端开发服务器默认运行在cd dashboard npm install npm run devhttp://localhost:5173。前端的所有/api接口请求已配置反向代理,会自动转发到后端的8000端口。
方案二:生产打包与单程序部署模式 (Production Mode)
生产模式下需要先编译前端静态文件,随后由后端进程统一托管分发:
-
打包编译前端:
cd dashboard npm install npm run build静态资源将打包并输出在项目根目录下的
dashboard/dist/目录。 -
运行后端服务:
- 方式一:外部命令行模式(默认):
注意:默认模式下需下载 Obscura 二进制文件并放置在项目根目录的cd .. cargo run --releasebin/目录下。 - 方式二:进程内浏览器模式(免外部二进制分发):
此时无头浏览器将直接编译进主二进制中,首次编译较慢但能一键运行。cd .. cargo run --release --features obscura-inprocess
运行后直接访问
http://localhost:8000即可使用,此时所有 React 网页和后台 API 均由 Rust 进程统一分发托管,无需额外启动 Vite。详细配置说明参见 编译与部署指南。 - 方式一:外部命令行模式(默认):
2.3 馆藏文献健康度检查与修复 (Health Check)
系统提供内置的健康度校验脚本,可用于排查与自动修复数据库状态和物理磁盘文件的不一致问题:
- 只读扫描模式:检测损坏文件、丢失文件、报错记录和孤立 Markdown,不改动任何数据。
cargo run --bin health_check - 自动修复模式:物理清理磁盘损坏/无源文件,将失效路径重置为
NULL(安全保留error:报错诊断日志)。cargo run --bin health_check -- --fix
3. 技术文档结构 (Documentation Directory)
- 🏗️ 架构设计 — 系统宏观架构、Agent 子系统、Mermaid 流程图
- 🌐 API 接口规范 — 全部 Axum REST 端点与 SSE 事件
- 🗄️ 数据库设计 — SQLite 表结构、ER 图、迁移历史
- 🛠️ 开发指南 — 构建/测试/环境变量/项目结构
- 🎨 视觉设计 — UI 设计系统与交互体验
- 🚀 部署指南 — 生产构建与发布
- 🔧 排障指南 — 常见问题与解决方案
- 🤝 参与贡献 — 代码规范与测试要求
4. 项目目录结构 (Project Structure)
AstroResearch/
├── src/
│ ├── main.rs # Axum 服务入口:路由、中间件、静态资源托管
│ ├── lib.rs # Config 配置加载
│ ├── api/ # HTTP handlers + AppState
│ │ ├── agent.rs # SSE 智能体对话、会话管理、指标、审计
│ │ ├── papers.rs # 文献检索/下载/解析/翻译/引文/导出
│ │ ├── notes.rs # 笔记 CRUD
│ │ ├── sync.rs # 批量同步
│ │ ├── targets.rs # 天体目标识别
│ │ └── helpers.rs # 共享工具函数
│ ├── agent/ # ReAct 智能体引擎 (参考 Claude Code 分层设计)
│ │ ├── runtime/ # ReAct 循环、流式执行、Token 管理、权限、熔断
│ │ ├── tools/ # 工具系统 (filesystem/ astro/ memory/ team/)
│ │ ├── compact/ # 三层上下文压缩
│ │ ├── memory/ # 项目记忆管理 (提取/去重/衰减/保活/护栏)
│ │ ├── team/ # 多 Agent 团队协作
│ │ ├── hooks.rs # 生命周期事件系统
│ │ ├── skills.rs # 技能注册表 (热加载)
│ │ ├── subagent.rs # 上下文隔离子代理
│ │ └── terminal.rs # 循环终止信号
│ ├── clients/ # 外部 API 客户端 (ADS, arXiv, LLM, Qiniu)
│ ├── services/ # 业务逻辑
│ │ ├── parser/ # HTML/PDF → Markdown 解析器 (A&A, IOP, ar5iv, MinerU)
│ │ ├── batch/ # 批量同步引擎
│ │ ├── download.rs # 文献下载器 (反爬伪装、多级回退)
│ │ ├── translation.rs # LLM 翻译 + Trie 天文词典
│ │ └── rag.rs # 向量检索增强生成
│ └── bin/ # 独立二进制 (cli, health_check, reparse)
├── dashboard/ # React 19 + Vite + TypeScript 前端 (按技术类型划分)
│ └── src/ # pages/ components/ hooks/ types/ utils/ assets/
├── skills/ # Agent Skills (Markdown 知识模块)
├── migrations/ # SQLite 迁移脚本
├── library/ # 本地文献存储 (PDF/HTML/Markdown/Translation)
├── docs/ # 技术文档 (架构/API/数据库/开发/部署/排障)
└── dictionary.txt # 天文学双语名词词典