跳到主要內容

加入玉山 Data Engineer,打造新世代 AI 平台

加入玉山 Data Engineer,打造新世代 AI 平台

面對來勢洶洶的 AIGC 應用與雲端相關法規的鬆綁等議題,玉山銀行持續追求打造出具備彈性、穩定性且高度自動化的系統平台。我們運用眾多開源專案 (kubernetes、Docker、Helm、FastAPI、Kafka、Airflow、Prometheus、GrafanaDataHub、ElasticSearch、Fluentd、Kibana) 進行應用服務部署與管理、完善整體資料流程並進行系統效能監控與告警,未來結合雲端服務後產生錯綜複雜部署策略將是我們面臨的挑戰。
玉山銀行正朝向透過開源專案推行 MLOps 與 SRE,致力於回饋開源社群。如果你也對此感到熱血沸騰,不要猶豫,趕快加入玉山銀行 Data Engineer 的行列和我們的一起打造新世代 AI 平台!

  • 熱愛寫程式,且具強烈學習慾望,不排斥新工具及新觀念
  • 對程式碼有潔癖,開發過程不寫測試會渾身不對勁
  • 對於分散式系統架構(設計或原理)有強烈好奇心
  • 對於維持系統平台穩定具使命感,並願意說服團隊認同降低故障成本是件值得驕傲的成就
  • 對於重複執行的瑣事會忍不住寫程式自動化

機器學習平台工程師

Job Description

  1. 處理巨量結構化資料、半結構化資料甚至非結構化資料的分析、處理與儲存
  2. 打造機器學習平台及系統軟體框架,將機器學習建構在分散式系統及微服務系統(docker)之上
  3. 參與機器學習 (Machine Learning) 專案開發、資料特徵工程、規劃設計次世代機器學習平台發展與藍圖等任務
  4. 具備金融/金流/支付相關知識和興趣,且有專案管理及良好溝通協作能力
  5. 具備雲端工具使用經驗,熟悉雲地整合架構流程設計與開發

Requirements

  1. 3 年以上系統管理及維護經驗,具備技術架構規劃能力與制定技術規範(大數據傳輸及倉儲等)
  2. 具備 SQL 技術能力,熟悉 Linux、 Python 程式開發、Git 版本控制, 略懂資訊安全及網路傳輸相關基礎知識
  3. 熟悉 Django、uWSGI、Flask、FastAPI 框架開發與應用
  4. 認同 DevOps 文化與 Open Source 理念,願意挑戰高流量 MLOps 相關工作
  5. 具備以下系統建置、調校維護實務經驗之一尤佳,Kubernetes、PostgreSQL、MinIO、Kafka、ElasticSearch、Fluentd、Kibana、Nginx、JupyterHub、Grafana、Prometheus、Redis
  6. 公有雲使用與管理相關經驗

資料工程師 Data Engineer

Job Description

  1. 建置與優化巨量結構化資料、半結構、非結構化資料的資料管線
  2. 建置不同類型的 data infra/pipeline,並設計部署策略、監控機制,以確保服務穩定性
  3. 評估與導入 modern data stack,用以解決以下問題:data governance、data quality、MLOps
  4. 優化開發者體驗,解決資料科學家開發與部署會遇到的問題

Requirements

  1. 熟悉 Linux、Python 程式開發、Git 版本控制
  2. 熟悉軟體開發流程實務,包含但不限於開發滿足可讀性、可維護性、可擴充性之應用程式
  3. 精通開發與維護 ETL、資料管線,並具有處理每日 100GB 以上資料的經驗,熟悉 Airflow 佳
  4. 具備以下任一系統建置、監控機制、效能調校與維護實務經驗尤佳:DataHub、PostgreSQL、ElasticSearch、Kafka
  5. 熟悉 SQL,有效能調校經驗佳
  6. (加分條件)具備 Kubernetes 基本概念
  7. (加分條件)具備 CI/CD pipeline 基本概念
  8. (加分條件)具備 Infrastructure as Code(IaC) 基本概念
  9. (加分條件)具備 Spark 基本概念
  10. (加分條件)具備 Data Streaming 基本概念

後端工程師 Back-end Engineer

Job Description

  1. 內部 API 系統串接整合
  2. 將機器學習產品中的各模組給與打包整合
  3. 開發機器學習人機互動回饋程式

Requirements

  1. Python 後端開發經驗
  2. 至少熟悉一項 Backend Framework (Django、Flask、FastAPI、Golang)
  3. 熟悉 API 開發與設計(RESTful API, 可提供 github 作品尤佳)
  4. 熟悉關聯式資料庫與具備SQL技術能力(PostgreSQL 尤佳)
  5. 熟悉 Linux、Git 版本控制,略懂資訊安全及網路傳輸相關基礎知識
  6. 對程式碼的設計有自我要求,重視個人的開發品質
  7. (加分條件)任何機器學習框架有相關經驗
  8. (加分條件)有使用 MLflow、Docker、Kubernetes、Airflow、Minio 的相關經驗
  9. (加分條件)熟悉 Unit test、TDD 開發流程
  10. (加分條件)有高流量系統架構設計經驗
  11. (加分條件)有 Open Source 相關經驗

SRE 工程師

Job Description

  1. 規劃、建立及推動高效率自動化維運系統機制建立
  2. 確保系統,伺服器,Storage等高效率運行
  3. 負責伺服器配置,維護,監控,效能調校和故障排除
  4. 負責與開發團隊,專案經理以及業務單位共同規劃系統架構
  5. 配合ISMS及金管會金融稽核檢查作業
  6. 確保流程,制度規範及資訊全符合主管機關及內部風險控管標準

Requirements

  1. 熟悉 Linux 相關系統 (如 RHEL, Ubuntu) 及其管理,維運有深入的了解
  2. 熟悉任一種程式語言,如 C, Python or Golang,若具有 REST API 開發經驗尤佳
  3. 熟悉任一種自動化工具,如 Chef, Puppet or Ansible,熟悉 Ansible 特別加分
  4. 熟悉 K8s, 若對企業級平台有經驗者尤佳(RedHat OpenShift or SUSE Rancher)
  5. 軟性良好的溝通能力,積極主動,人際交往和解決問題的能力
  6. (加分條件)具備已工有雲建置大型系統之經驗
  7. (加分條件)熟悉任一大廠 Server, Network, Firewall 等硬體設備規格
  8. (加分條件)熟悉任一種監控與日誌分析工具,如 EFK, Splunk, Grafana
  9. (加分條件)熟悉 DevOps 實踐及 CI/CD pipeline
  10. (加分條件)具事件及故排除、根因分析,事後分析有豐富經驗者,以及故障故事分享等經驗者特別加分

更多職缺資訊,請見玉山銀行網站

  • 機器學習工程師Machine Learning Engineer
  • 資料庫管理工程師
  • 前端工程師 Front-end engineer

留言

這個網誌中的熱門文章

COC 通報處理說明公告 - 20240811 通報事件

各位好, COSCUP COC 服務小組於 2024 年 8 月 11 日接獲一件通報,內容涉及在會期干擾議程進行;並於會後持續發送私訊予會中結識的講者;同時,該行為人亦被紀錄於活動當日干擾志工執行勤務。 有關此事件的處理過程,詳如下述: COC 服務小組接到通報後,於 8 月 15 日正式成立專案小組進行討論與檢視相關資料。經查,通報內容與 COC 條款「持續干擾議程或活動的正常進行,無視工作人員或與會者的制止」相符。同一行為人於大會期間,另有兩位會眾通報類似事件,COC 服務小組皆已明確指正其行為並重申 COC 規範和界線。綜合此次會後通報,行為人經提醒仍多次抵觸 COC 條例。 有鑒於上述行徑已明確影響 COSCUP 其他會眾之權益,COC 服務小組將依照 COSCUP COC 之辦法記錄事件處理過程及結果、行為人資料等,於籌備團隊組長群資料夾建立文件,以俾後續籌備團隊審慎思量該名行為人未來的參與形式與程度。 在此,感謝會眾願意信任 COC 和 COSCUP 團隊並且將其所遇到的事件於會後彙整提供予我們。另本次通報中,通報人所提及之部分事項,因非屬 COSCUP 大會參與期間和相關行為,已建議通報人另行循其他正規途徑處理。在此聲明, COSCUP 的 COC 落實並非要拒任何人於門外,而是希冀透過針對行為本身的評估,為無論志工、社群協調人、講者、廠商與所有會眾營造舒適與安全的交流環境。 我們在乎所有人於 COSCUP 大會的各種參與體驗與感受,如果您在大會和籌組期間有相關困擾,籌備團隊志工將會竭力協助釐清,希望一同打造友善的 COSCUP 與會環境。 COSCUP 2024 COC 服務小組

COSCUP 2024 財務報告

COSCUP 2024 年度財務收支摘要 COSCUP 2024 Annual Income and Expenditure Summary For the period 2024/01/01~2024/12/31 收入 Revenues 金額 總計 企業贊助收入 NT$1,644,863 個人贊助收入 129,099 義賣收入 141,555 利息收入 6,199 周邊活動收入 59,200 總收入 Total Revenues NT$1,980,916 支出 Expenses 金額 總計 場地費 NT$714,338 義務工作人員費用 592,639 擺攤出訪費用 471,205 行銷費 353,631 餐飲費用 230,079 議程交流費用 229,525 設備與器材費 220,106 周邊活動費用 75,500 倉儲及物流費用 45,510 線上系統費用 41,728 保險費 15,228 雜支 3,017 捐贈開源社群 43,000 金流手續費 6,412 稅費與金流服務費 174,693 總支出 Total Expenses NT$3,216,611 期間淨收支 Net Income 2024/01/01~2024/12/31 -NT$1,235,695 支出科目 歷年結餘 歷年結餘 2006/2008~2018 結餘 NT$5,146,663 2019 結餘 NT$1,128,514 2020 結餘 NT$86,842 2021 結餘 NT$744,271 2022 結餘 NT$1,015,462 2023 結餘 -NT$198,240 2024 結餘 -NT$1,235,695 結餘款總計 NT$6,806,648

Early Guide to Joining COSCUP 2025 

Many people in the community are excited to find out how to participate in COSCUP 2025. We’ll share more updates soon, but here’s what we can share so far! You can join as a speaker, host a booth, organize a track, or become a sponsor. If you’re new to COSCUP, take a look at the article " COSCUP Unveiled " to learn more. Date and Location To be decided: The event may take place on a weekend in either August (2-3) or August (9-10). The planned venue is NTUST in Taipei, Taiwan. Be a Speaker Our early bird Call for Proposals (CfP) is going to open in the following few days. If you have a presentation about open culture or open-source technology, we want to hear from you. Submitting early means you’ll hear back sooner about your proposal. Host a Booth Open-source communities can set up booths to display their work and interact with attendees. This is a great way to share your community’s projects and connect with others. Businesses that support open-source can also host a booth ...