自分の場合コミュ力はそこまで問題じゃないが
役所の仕事は総合職みたいなもので人事異動もあって、覚えることがたくさんあるからそれが苦労しているかなと。
学校や公務員試験や資格の勉強だと、教科書や問題集の解答とか覚えればどうにかなるし、
覚えか悪い分はガリ勉してカバーすれば良かったから学校の成績は普通くらいだったけど、
仕事だとマニュアル化されていないから。
先輩から教わったこと目や耳で聞いてその場で覚えないといけないし。
覚えが悪くて仕事遅いと白い目で見られるし残業やり過ぎると給料泥棒扱いだからね。
１から10まで先輩に教えてくださいじゃなく、自分で調べないといけないし。

あと役所の仕事に限らないけど、定型業務(単調作業)はIT化が進んでコンピューターやあるいは非正規職員がやるような時代だから
決まった仕事じゃなく臨機応変に何でもこなさないといけないのは自分みたいなアスペにとって苦手ですわ。