( hajbazer | 2021. 10. 04., h – 23:37 )

Egy magát a recovery/investigation csapatban dolgozónak nevező sysadmin kiírt értelmeseket is a Redditjébe, de sajnos a multikra jellemző nagyvállalati arrogancia utolérte és most már a fiókját is törölnie kellett. Szerencsére archívumok még vannak.

 

A fontosabbakat kiemeltem.

This is a global outage for all FB-related services/infra (source: I'm currently on the recovery/investigation team).

 

Update 1440 UTC:

As many of you know, DNS for FB services has been affected and this is likely a symptom of the actual issue, and that's that BGP peering with Facebook peering routers has gone down, very likely due to a configuration change that went into effect shortly before the outages happened (started roughly 1540 UTC).

There are people now trying to gain access to the peering routers to implement fixes, but the people with physical access is separate from the people with knowledge of how to actually authenticate to the systems and people who know what to actually do, so there is now a logistical challenge with getting all that knowledge unified.

Part of this is also due to lower staffing in data centers due to pandemic measures.

 

No discussion that I'm aware of yet that is considering a threat/attack vector.

I believe the original change was 'automatic' (as in configuration done via a web interface). However, now that connection to the outside world is down, remote access to those tools don't exist anymore, so the emergency procedure is to gain physical access to the peering routers and do all the configuration locally.

 

Elnézve egyébként azt, hogy a kommentelők már egyből az állása elvesztésétől féltik azt, aki millirádoknak próbálja újra biztosítani a függőség felhasználói élményét, most jutottam arra a következtetésre, hogy egy nagyvállalat sem működik másként és etikusabban, mint Csernobil idején a Szovjetunió. Ide alám pedig jöhetnek fősodratúék védeni a szent nagyvállalati érdekeket és titkokat a már jól megszokott hupu módon.