資料擷取與 ETL
使用 Python 建立爬蟲、API 擷取、資料清洗與排程流程，將網頁、文件與系統資料整理成可查詢、可分析、可重複使用的資料資產。
Python Engineer
江易倫 I-Lun Chiang
Data Engineering / Generative AI / Workflow Automation
將重複的人工作業轉成可維護的系統，專注以 Python、資料處理、 NLP 與生成式 AI 建立能落地的企業內部工具。
automation pipeline
適合職缺
01
核心能力
AI 知識系統
參與知識庫問答、RAG 架構、prompt 設計與測試資料生成，協助改善內部 AI 問答品質，降低人工整理與驗證成本。
流程自動化與內部工具
以 n8n、API、資料庫與 Python 腳本串接內部流程，將週期性查詢、資料整理與通知作業轉為穩定的自動化流程。
後端服務與系統重構
具備 Python、FastAPI、Docker、Linux 與 RESTful API 經驗，能重構既有內部服務，改善維護性與使用效率。
02
代表專案
內部服務重構與資料轉移
- Context
- 既有內部服務與資料儲存方式不易維護，部分流程仍依賴人工處理。
- Built
- 協助將服務資料從舊架構轉移，並以 Python 重新整理內部服務邏輯，建立更容易維護的查詢與管理流程。
- Stack
- Python, RESTful API, Linux, Docker, Database
- Impact
- 降低人工查詢與維護成本，讓內部資料處理流程更穩定、更容易擴充。
AI 知識庫與問答品質改善
- Context
- 內部知識分散，使用者問題需要仰賴人工查找與整理，問答品質也需要持續驗證。
- Built
- 使用生成式 AI、知識庫整理、prompt 設計與測試問題生成，協助建立更可驗證的 AI 問答流程。
- Stack
- Python, RAG, Prompt Engineering, LLM, Knowledge Base
- Impact
- 降低人工測試與整理成本，提升知識查找與 AI 輔助回覆的實用性。
爬蟲與資料處理流程
- Context
- 市場、媒體與網路資料需要定期收集、清洗與分析，人工處理成本高且難以穩定重複。
- Built
- 使用 Python 建立爬蟲、資料清洗、ETL 與分類流程，支援後續分析、標註與研究工作。
- Stack
- Python, ETL, Web Scraping, MySQL, PostgreSQL, Linux
- Impact
- 提升資料取得與整理效率，支援內容分類、交易資料分析與市場研究。
03
精選成果
重構內部服務流程
協助將既有內部服務改以 Python 重新整理，改善資料轉移、查詢與維護流程，讓日常作業更穩定。
建立內部查詢與管理工具
將專員反覆執行的查詢、整理與比對工作轉為內部工具，降低人工查找時間與操作錯誤。
導入 AI 與自動化工作流
協助公司導入生成式 AI、n8n 與 API 串接，讓 AI 不只停留在聊天工具，而是進入實際工作流程。
建立爬蟲與 ETL 資料流程
開發定期擷取、清洗與整理資料的流程，支援媒體內容分類、交易資料分析與市場研究。
04
經歷
源昇整合方案智財 / 軟體工程師
負責內部服務重構、資料轉移、AI 輔助工具、流程自動化、資料查詢服務與爬蟲 API，協助將專員日常作業轉為可維護的內部系統。
帝緯系統整合 / 資料分析師
測試生成式 AI 模型能力，整理知識庫問答流程，產生測試問題並協助評估回覆品質，降低人工整理與檢查成本。
東方線上 / 研發工程師
參與資料工程、爬蟲、機器學習、媒體內容標註、交易資料分析與廣告推薦支援，協助市場研究與資料分析流程自動化。
05
技術棧
主要使用Python, MySQL, PostgreSQL, Linux, Web Scraping, ETL
後端與服務FastAPI, RESTful API, Docker, Internal Tools
AI 與 NLPRAG, Prompt Engineering, NLP, Ollama, Claude, Gemini, Codex
自動化n8n, API Integration, Scheduled Jobs, Workflow Automation
協作與維運Git, Docker Compose, Linux Server Operation
06
證照與語言
JLPT N1
具備日文閱讀與溝通能力，可支援日文資料、文件與跨語言工作情境。
iPAS+ AI 應用規劃師
具備 AI 應用導入、需求整理與規劃基礎，能協助將 AI 工具轉為實際工作流程。
把資料、AI 與流程自動化落到實際工作現場。
適合討論 Python 工程、資料處理、內部工具、AI knowledge workflow 與企業自動化導入。