Hálózati félrekonfigurálás miatt köhög(ött) a Microsoft 365 számos szolgáltatása

Microsoft, Windows

Ma reggel 9:49-től számos Microsoft 365 szolgáltatás áll(t) le, érhető el részlegesen vagy akadozva. Többek közt:

  • Microsoft Teams
  • Exchange Online
  • Outlook
  • SharePoint Online
  • OneDrive for Business
  • Microsoft Graph
  • PowerBi
  • M365 Admin Portal
  • Microsoft Intune

A hibát egy vélhetően hibás hálózati konfiguráció-változás okozta, amit a Microsoft igyekszik javítani:

Title: Users may be unable to access multiple Microsoft 365 services

User Impact: Users may be unable to access multiple Microsoft 365 services.

More info: Impact is occurring to the following services but is not limited to them:

-Microsoft Teams
-Exchange Online
-Outlook
-SharePoint Online
-OneDrive for Business
-Microsoft Graph
-PowerBi
-M365 Admin Portal
-Microsoft Intune

Current status: We’ve isolated the problem to a networking configuration issue, and we are analyzing the best mitigation strategy to address it without causing additional impact. We’ll provide more information once we have additional information.

Scope of impact: Any user serviced by the affected infrastructure may be unable to access multiple Microsoft 365 services.

Next update by: Wednesday, January 25, 2023, 12:00 PM (11:00 AM UTC)

A fejleményeket az M365 adminok az Admin Portal-on követhetik figyelemmel (már ha az éppen elérhető 🤣)

( persicsb | 2023. 01. 25., sze – 13:48 )

#worksforme. Semmilyen szolgáltatáskiesést nem tapasztaltam, pedig reggel óta kb. csak Microsoft 365 eszközöket használva dolgoztam.

  • Exchange Online                     2 advisories
    • Users may be unable to access the Exchange Online service using Outlook on the web
    • Some delegate users' unprocessed meetings may not show as tentative on their calendar in Exchange Online
  • Microsoft 365 Defender           1 advisory
  • Microsoft 365 suite                 1 advisory
  • Microsoft Teams                     4 advisories
  • SharePoint Online                   1 advisory

Már javul ...

trey @ gépház

nem jellemző. Azt ne keverjük ide, hogy a kedves felhasználó három falon át a pincéből akar wifizni és szakadozik az internete. Meg azt se, amikor az egész netforgalmát rátolják a vpn-es céges internetkapcsolatra, ami nem bír el több száz embert. A visszangos tükörfalú bútorozatlan szobából, laptopnak háttal hívásba lépők szoktak még akadozni, de azért, mert a zajcsökkentés kiszűri őket. 

( Ice | 2023. 01. 25., sze – 14:04 )

Szintén "zenészek" voltunk. Teams nem ment normálisan.

( nagyjoco | 2023. 01. 25., sze – 17:28 )

Aki nem borított még le központi szolgáltatást félrekonfiguárcóval, nem is igazi hálózatos. 

Egy nagy cégtől elvárná az ember, hogy a kommunikáció zöme belül follyon, ne a Microsoft cloudjain keresztül.

Kidől egy távvezeték az USA-ban és a világgazdaság leáll? Vagy mi?

A teamsen a kollégákkal dumáltam volna cégen belül. Egyáltalán semmi szükség nem lett volna a Microsoftra.

Voltak supernode-ok. Néhány persze a központban. De a többi az dinamikusan alakult ki, nagy uptime-jű, gyors egyetemi hálón ülő non-stop bekapcsolt gépeken keresztül stb. Rohadt gyors volt annak idején, nem volt szakadozás, packetloss, jó minőségben lehetett beszélni egymással. Aztán szép lassan elszaródott, végül a msft tette taccsra. Kb. 10 éve nem használom a szkájpot.

De azokon csak a voice meg a többi adat ment át, azért találta így ki a Skype, hogy ne az ő sávszélességét terhelje (túl kicsi cég voltak, amikor elkezdték, a userek sávszélességét használták inkább).

Szóval szimpla gazdasági döntés volt, hogy ilyen legyen a Skype.

De a központi adminisztráció (státusz, login stb) az központi volt.

 

Manapság a WebRTC is ilyen (pl. Jitsi), ott sem a központot terheled. De a Teams hívása is WebRTC szerintem, csak ott a többi dolog (státusz, login, appok) központiak - ahogy a Skype-nál is volt.
 

( DJTommyka | 2023. 01. 26., cs – 08:57 )

Burult nálunk is a rendszer, teams, sharepoint, onedrive, outlook... Erőteljes késztetés fogott el, hogy le kéne lépni :)

Ennyire azért nem kritikus a helyzet. Ilyen előfordult már minden másik versenytárssal. Ha meg magadnak akarsz összerakni egy ilyen képességű és rendelkezésre-állású rendszert, az horribilis pénz és humán erőforrás az üzemeltetése.

Nem sértettek szerintem SLA-t, ha pedig igen, akkor kompenzációra számíthatnak az ügyfelek. Amilyen biztonsága van mostanában az on-premise Exchange szervereknek, még mindig ezerszer az M364!

trey @ gépház

( dyra | 2023. 01. 26., cs – 09:06 )

Szerkesztve: 2023. 01. 26., cs – 09:07

Komplett irodák álltak le nálunk. Azért nagy volt a duma pár éve, hogy ez a szolgáltatás atomstabill de minden évben van 2 - 3 nap amikor olyan szinten csuklik, hogy nem lehet érdemi munkát végezni.

Ezeket a leállásokat simán megcsináltuk régebben is, onpremben. :)

Életem legelső deploymentje úgy nézett ki, hogy a http://teszt.webshop-api.example.com jellegű endpointra megküldtem az új csomagot, és fél perc múlva csörgött a főnim telefonja, hogy megállt a komplett cég, webshoppal, számlázással, ügyfélszolgálattal, stb.

Ezeket a leállásokat simán megcsináltuk régebben is, onpremben. :)

Érdekes, nekem sosem volt ilyen. Csak tervezett leállások voltak. Mondjuk, hogy mennyi geci munka volt mögötte, azt senki sem fizette meg, senki sem értékelte és senki sem adja vissza. Ha nálunk vissza kellene lapátolni mindent az M364-ből most on-premise Exchange-re, arra azt mondanám, hogy azt már csinálja valaki más. Aki még fiatal, szereti a kihívásokat, a lassan heti patcheléseket, a rendszert random összeborító cumulative update-eket ...

Amióta ezeket a Bill Gates csinálja nekünk, sokkal nyugodtabb az élet.

BTW: az M364-gyel is van elég meló. Aki azt hiszi, hogy azt nem kell adminolni eleget, az egy kötözni való bolond. Amit meg lehet spórolni az infra üzemeltetés, a patchelés stb. Mondjuk az épp elég.

trey @ gépház

( trey | 2023. 01. 26., cs – 09:31 )

Ma reggeli állapot:

Issue title              Affected service                Issue type            Status              Updated       ID

Microsoft‎ service health (‎6‎)

Users may be experiencing crashes when using bot input menus in the Microsoft Teams desktop app or web appUsers may be experiencing crashes when using bot input menus in the Microsoft Teams desktop app or web app
Microsoft Teams             Advisory             Service degradation January 26, 2023 2:00 AM           TM503221

Admins may be unable to add external numbers when creating or editing auto attendants        Admins may be unable to add external numbers when creating or editing auto attendants          Microsoft Teams             Advisory
Service degradation         January 19, 2023 10:09 PM       TM498187

Some users may intermittently see a black screen during Microsoft Teams meetings or group calls that include videoSome users may intermittently see a black screen during Microsoft Teams meetings or group calls that include video
Microsoft Teams               Advisory              Service degradation         January 23, 2023 7:56 PM        TM485572

Teams Only users’ calls placed to Skype for Business hybrid users are dropping after 30 secondsTeams Only users’ calls placed to Skype for Business hybrid users are dropping after 30 seconds  Microsoft Teams    Advisory
Service degradation      January 23, 2023 11:21 AM          TM467455

Users may see issues using custom, auto, and some system properties for recently indexed items in SharePoint OnlineUsers may see issues using custom, auto, and some system properties for recently indexed items in SharePoint Online    Microsoft 365 suite, Microsoft Teams, SharePoint Online        Advisory             Service degradation          January 23, 2023 6:37 PM     MO494352

Some delegate users' unprocessed meetings may not show as tentative on their calendar in Exchange Online      Exchange Online     Advisory     Service degradation      January 26, 2023 6:36 AM       EX496574

Issues in your environment that require action (‎1‎)

Exchange Online Basic Auth Deprecation – In Progress
Exchange Online     Incident         Investigating        January 24, 2023 11:17 PM       EX501455

‎Microsoft‎ service health
Shows the current health status of your ‎Microsoft‎ services, and updates when we fix issues.

Service
Status
Exchange Online     1 advisory
Microsoft 365 suite  1 advisory
Microsoft Teams      5 advisories
SharePoint Online    1 advisory

[...]

trey @ gépház

( bennyh | 2023. 01. 26., cs – 11:08 )

Jó, hogy az OTP se akar lemaradni rendelkezésre állásban a Microsoft- tól :)

( yoshida | 2023. 01. 26., cs – 13:27 )

Azure-ban senkinek nem fájt semmi? Nálunk pont az o365-el nem volt baj, viszont AKS, meg random VM-ek lettek elérhetetlenek több régióban is tegnap délelőtt...