Phụ lục A. Tái lập thực nghiệm và cấu hình Colab CPU-only#
A.1 Tái lập báo cáo Jupyter Book#
Notebook đọc số liệu trực tiếp từ report_summary.json (chỉ chứa số liệu tổng hợp và ví dụ code minh họa) nên có thể dựng lại ở mọi máy mà không cần tải 22,72 GiB corpus hay khóa API:
python -m pip install -r requirements.txt
jupyter-book build . --all -W
A.2 Tái lập xử lý M2 trên Google Colab CPU-only (từng thành viên & gộp 25.000 bài)#
Khởi chạy lần lượt từng thành viên qua
colab_parser_full.ipynbhoặctools/m2_colab_runner.pytrên runtime Colab CPU Standard (nvidia0=False,COLAB_TPU_ADDR=None), cấu hìnhconfig_<MSSV>_full.json.Chạy
tools/m2_team_consolidator.pytrên Colab CPU để gộp M1merge_shards, trích batch M2, tínhstats.jsonhợp nhất, chạysrc.parser.validation.validate_projecttoàn cục 25.000 bài và tổng hợp benchmark nhiều phiên quasrc.crawler.benchmark_sessions.
Toàn nhóm (5 thành viên): 25,000 paper / 41,498 version | Cập nhật: 2026-11-22
Python biên dịch Book: 3.12.16
| package | version | |
|---|---|---|
| 0 | jupyter-book | 1.0.4.post1 |
| 1 | pandas | 3.1.1 |
| 2 | pyarrow | 26.0.1 |
| 3 | matplotlib | 3.11.2 |
| 4 | nbformat | 5.11.1 |
| 5 | arxiv-harvester | 0.2.0 |
Tài liệu và mã nguồn tham chiếu#
Mã nguồn triển khai: colab_parser_full.ipynb.
Mã nguồn triển khai: tools/m2_colab_runner.py.
Mã nguồn triển khai: tools/m2_team_consolidator.py.
Mã nguồn triển khai: tools/extract_book_aggregates_colab.py.