FAS Research Computing - Lịch sử thông báo

Globus Data Transfer Trải qua sự cố ngừng hoạt động lớn

Status page for the Harvard FAS Research Computing cluster and other resources.

Cluster Utilization (VPN and FASRC login required): Cannon | FASSE


Please scroll down to see details on any Incidents or maintenance notices.
Monthly maintenance occurs on the first Monday of the month (except holidays).

GETTING HELP
Documentation: https://docs.rc.fas.harvard.edu | Account Portal https://portal.rc.fas.harvard.edu
Email: rchelp@rc.fas.harvard.edu | Support Hours

The colors shown in the bars below were chosen to increase visibility for color-blind visitors.
For higher contrast, switch to light mode at the bottom of this page if the background is dark and colors are muted.
Đang hoạt động

SLURM Scheduler - Cannon - Đang hoạt động

Cannon Compute Cluster (Holyoke) - Đang hoạt động

Boston Compute Nodes - Đang hoạt động

GPU nodes (Holyoke) - Đang hoạt động

seas_compute - Đang hoạt động

Đang hoạt động

SLURM Scheduler - FASSE - Đang hoạt động

FASSE Compute Cluster (Holyoke) - Đang hoạt động

Đang hoạt động

Kempner Cluster CPU - Đang hoạt động

Kempner Cluster GPU - Đang hoạt động

Đang hoạt động

FASSE login nodes - Đang hoạt động

Đang hoạt động

Cannon Open OnDemand - Đang hoạt động

FASSE Open OnDemand - Đang hoạt động

Sự cố lớn

Netscratch (Global Scratch) - Đang hoạt động

Home Directory Storage - Boston - Đang hoạt động

Tape - (Tier 3) - Đang hoạt động

Holylabs - Đang hoạt động

Isilon Storage Holyoke (Tier 1) - Đang hoạt động

Holystore01 (Tier 0) - Đang hoạt động

HolyLFS04 (Tier 0) - Đang hoạt động

HolyLFS05 (Tier 0) - Đang hoạt động

HolyLFS06 (Tier 0) - Đang hoạt động

Holyoke Tier 2 NFS - Đang hoạt động

Holyoke Specialty Storage - Đang hoạt động

holECS - Đang hoạt động

Isilon Storage Boston (Tier 1) - Đang hoạt động

BosLFS02 (Tier 0) - Đang hoạt động

Boston Tier 2 NFS - Đang hoạt động

CEPH Storage Boston (Tier 2) - Đang hoạt động

Boston Specialty Storage - Đang hoạt động

bosECS - Đang hoạt động

Samba Cluster - Đang hoạt động

Globus Data Transfer - Sự cố lớn

Lịch sử thông báo

Xem trạng thái hiện tại

thg 11 2025

Coldfront outage
Đã khắc phụcSự cố lớn1 giờ 11 phút
  • Đã khắc phụcUTC

    This alert was a false alarm. Coldfront is operating normally.

  • Đang điều traUTC
    Coldfront cannot be accessed at the moment. This incident was created by an automated monitoring service.
Authentication outage
Đã khắc phụcSự cố lớn1 phút
  • Đã khắc phụcUTC

    This test incident has been resolved.

  • Đang điều traUTC

    Authentication issues with openauth/radius. This incident was created by an automated monitoring service.

THG 1118
Slurm scheduler unplanned maintenance
Đã khắc phụcBảo trì6 phút
  • Đã khắc phụcUTC
    The Slurm scheduler is back online.
  • Đã nhận diệnUTC
    The Slurm scheduler is experiencing a problem and we need to take it down briefly to clear this up. Should be short duration, but no ETA yet. This will not affect running jobs but will mean you cannot talk to the scheduler or submit new jobs.
THG 1114
Starfish dashboard maintenance Nov. 14th 5-6PM
Hoàn thànhBảo trì1 giờ
  • Hoàn thànhtháng 11 14, 2025 tại 23:00UTC
    Maintenance has completed successfully
  • Đang tiến hànhtháng 11 14, 2025 tại 22:00UTC
    Maintenance is now in progress
  • Đã lên kế hoạchtháng 11 14, 2025 tại 22:00UTC

    There is a planned upgrade of the Starfish dashboard scheduled for Friday November 14th starting at 5PM.
    The dashboard will be down for an hour while the upgrade is performed.

Slurm scheduler issues - WIP
Đã khắc phụcHiệu suất giảm sút15 phút
  • Đã khắc phụcUTC

    The Slurm scheduler is back up and new jobs can be scheduled at this time.

    This incident has been resolved.

  • Đã nhận diệnUTC
    The Slurm job scheduler will be offline temporarily while we resolve some minor issues. Jobs will continue to run but you will be unable to access the scheduler or submit new jobs until we return it to service.

thg 10 2025

Holystore01 is degraded.
Đã khắc phục32 phút
  • Đã khắc phụcUTC
    This incident has been resolved.
  • Đang điều traUTC

    We are currently investigating an issue with holystore01. Service may be degraded. Updates will be posted here as we identify the root cause.

License servers down
Đã khắc phụcSự cố một phần49 phút
  • Đã khắc phụcUTC

    The license server is responding normally again.

  • Cập nhậtUTC
    We are currently investigating this incident.
  • Đang điều traUTC

    rclic is currently down. Software licenses may not be accessible, particularly for the following:

    • Matlab

    • Gurobi

    • Mathematica

    We are currently investigating this incident.

THG 106
FASRC monthly maintenance Monday October 6th, 2025 9am-1pm
Hoàn thànhBảo trì4 giờ
  • Hoàn thànhtháng 10 06, 2025 tại 17:00UTC
    Maintenance is now in progress
  • Đang tiến hànhtháng 10 06, 2025 tại 13:00UTC
    Maintenance is now in progress
  • Đã lên kế hoạchtháng 10 06, 2025 tại 13:00UTC

    FASRC monthly maintenance will take place Monday October 6th, 2025 from 9am-1pm

    NOTICES

    MAINTENANCE TASKS
    Cannon cluster will be paused during this maintenance?: NO
    FASSE cluster will be paused during this maintenance?: NO

    • DNS server reboots

      • Audience: All FASRC services

      • Impact: Rolling reboot should have no impact

    • Login node reboots

      • Audience: Anyone logged into a FASRC Cannon or FASSE login node

      • Impact: All login nodes will rebooted during this maintenance window

    • Netscratch cleanup ( https://docs.rc.fas.harvard.edu/kb/policy-scratch/ )

      • Audience: Cluster users

      • Impact: Files older than 90 days will be removed. Please note that retention cleanup can and does run at any time, not just during the maintenance window.

    Thank you,
    FAS Research Computing
    https://docs.rc.fas.harvard.edu/
    https://www.rc.fas.harvard.edu/

THG 103
OOD, FASRC authentication down
Đã khắc phụcBảo trì20 phút
  • Đã khắc phụcUTC

    This incident has been resolved and login to FASRC sites and services, including OOD and Spinal, is restored.

  • Đã nhận diệnUTC

    Some FASRC webpages and services (such as OOD) that require authentication may not load.

    We have identified the cause and are working on a solution

thg 9 2025

THG 930
VPN concentrator rolling updates overnight
Hoàn thànhBảo trì
  • Cập nhậttháng 09 30, 2025 tại 07:00UTC
    Maintenance has completed successfully
  • Hoàn thànhtháng 09 30, 2025 tại 06:00UTC

    Networking will be patching the VPN concentrators overnight. This will be done in a rolling order so that one ore more are always online.

    This may cause active VPN connections to drop, but they can be re-connected shortly after. ETA is one hour total.

  • Đã lên kế hoạchtháng 09 30, 2025 tại 06:00UTC

    Networking will be patching the VPN concentrators overnight. This will be done in a rolling order so that one ore more are always online.

    This may cause active VPN connections to drop, but they can be re-connected shortly after. ETA is one hour total.

holylfs05 changelog errors
Đã khắc phụcSự cố lớn3 giờ 4 phút
  • Đã khắc phụcUTC

    The root cause was found and a fix has been implemented.

  • Đang điều traUTC

    The changelog (which tracks changes on the filesystem) on holylfs05 is throwing errors creating instability on the filesystem. We are investigating.

gpu_test partition down
Đã khắc phụcSự cố một phần2 giờ 18 phút
  • Đã khắc phụcUTC

    The gpu_test partition is back to normal service.

    This incident has been resolved.

  • Đang điều traUTC

    The gpu_test partition is currently down. Please use our other public gpu partitions in the meanwhile.

    We are currently investigating this incident. incident.

gpu_test down
Đã khắc phụcSự cố một phần1 giờ 52 phút
  • Đã khắc phụcUTC

    The gpu_test partition is back in normal service.

  • Đang điều traUTC

    The gpu_test partition is currently down due to a networking issue in that row. Please use our other public gpu partitions in the meanwhile.

    We are currently investigating this incident.

holylfs05 issues
Đã khắc phụcSự cố lớn64 giờ 38 phút
  • Đã khắc phụcUTC

    holylfs05 is back online. Thank you for your patience.

  • Cập nhậtUTC

    holylfs05 is undergoing filesystem checks. Due to the size of the system, this process will take the rest of the weekend at a minimum.

    No ETA at this time.

    We are continuing to work on a fix for this incident. Our sincere apologies for the unexpected disruption.

  • Đã nhận diệnUTC

    holylfs05 will be inaccessible for an extended period of time while our staff continues to troubleshoot the underlying cause.

    We are continuing to work on a fix for this incident.

  • Đang điều traUTC

    Writing to holylfs05 may result in errors.

    We are currently investigating this incident.

Trước

thg 9 2025 đến thg 11 2025

Sau

For issues not shown here, please contact FASRC via
https://portal.rc.fas.harvard.edu or email rchelp@rc.fas.harvard.edu