國民黨立委葉元之深陷罷免危機，並遭方姓助理遺孀指控霸凌助理，今年4月台北市勞動局前往國會辦公室稽查，因辦公室未設打卡鐘而依法裁罰9萬元。本月14日，勞動局因接獲檢舉並認定葉元之辦公室未依法給付加班費、未給予特休假等兩項目違反《勞動基準法》，各裁罰2萬元，合計裁罰4萬元，累計至今裁罰13萬元。
北市勞動局今年4月稽查葉元之辦公室，發現涉違反《勞基法》，因未設置出勤紀錄違規，已裁處葉元之9萬元，涉職安衛生部分，勞檢處通知葉辦1個月內改善缺失，已收到相關資料，書面審查後認已改善。
方姓遺孀檢舉葉元之未支付加班費和特休假，葉元之上周出面回應，沒有惡意辭退員工，並批評此次爆料時機過於政治化。葉元之說，由於持續被惡意攻擊，他選擇不公開解釋以避免泛政治化，但對於事件被政治化表示遺憾。葉元之也強調，他有關心助理的健康，並未拒絕助理請病假，並由多位現場助理證明他沒有苛扣員工，強調自己不是慣老闆。
不過，本月14日，北市勞動局因接獲檢舉，認定葉元之辦公室未依法給付加班費、未給予特休假，已違反《勞動基準法》，再各裁罰2萬元，合計裁罰4萬元，兩次裁罰累積共13萬元。
葉元之也提到，第二次、第三次檢舉是查助理加班費，有沒有給助理特休，他本人也有親自說明，「我們並不會無緣無故不給加班費」，這其實是認定問題，因為上班有非常充裕的時間 ，可是助理沒完成工作，後來下班時間他再次詢問助理，早上的東西怎麼該交的沒交 ，助理可能臨時處理這些工作，然後全部被認定為加班。
勞動局下午對外說明表示，該案是由勞工家屬向本局陳情，經查葉元之辦公室因未給付勞工平日延長工時工資，違反《勞動基準法》第24條第1項規定；也未給予勞工特別休假，違反《勞動基準法》第38條第1項規定，勞動局已於7月14日，各裁處新台幣2萬元罰鍰。
