技能概述
数据工程与管道
Charles 构建生产级数据管道,从多个来源摄取、转换和验证数据。作为 Clearway Energy Group 的数据工程师 I,他日常使用 Dagster、dbt、Polars 和 Snowflake 来自动化可再生能源资产数据工作流。他具备设计 ETL/ELT 流程的经验,这些流程处理 API 集成、空间数据连接和增量加载模式。
工具与技术: Python, Dagster, dbt, dlt, Polars, Snowflake, DuckDB, Hex
展示项目: 可再生能源资产性能管道、住房可负担性与通勤分析、Google Analytics 数据归档、能源分析管道、合成信号观测站
统计分析与建模
Charles 应用严格的统计方法回答研究问题并验证发现。他的工作包括带有稳健标准误的 OLS 回归、方差分析、交互模型、分位数回归和交叉验证。他擅长使用 AIC 选择模型规范、使用 VIF 诊断多重共线性,并向技术及非技术受众解读结果。
工具与技术: Python (statsmodels, scipy), scikit-learn, R
展示项目: 住房可负担性与通勤分析、葡萄酒质量分析、埃姆斯房价预测、睡眠剥夺分析
机器学习
Charles 具备构建和评估监督学习模型的经验,涵盖回归和分类任务。他曾使用线性模型、k-近邻、随机森林、XGBoost、神经网络(TensorFlow/Keras)和堆叠集成学习。他应用特征工程、交叉验证、超参数调优以及 SHAP 等模型可解释性技术来理解和沟通模型行为。
工具与技术: scikit-learn, TensorFlow/Keras, XGBoost, SHAP
展示项目: 埃姆斯房价预测、Spaceship Titanic 分类、葡萄酒质量分析、住房可负担性与通勤分析
数据可视化与仪表板
Charles 创建的可视化和交互式仪表板使决策者能够轻松访问数据。他构建了带有动态筛选和交互式表格的 R Shiny 仪表板、带有参数化视图的 Tableau 仪表板,以及使用 Matplotlib 和 Streamlit 的 Python 可视化。他注重清晰性、合适的图表选择,并让数据背后的故事易于理解。
工具与技术: Tableau, R Shiny, Matplotlib, Streamlit, ggplot2, Plotly
展示项目: 全球 CO₂ 排放仪表板、国家公园访问量仪表板、世界幸福指数仪表板、合成信号观测站、住房可负担性与通勤分析
SQL 与数据库分析
Charles 编写 SQL 用于数据提取、转换和分析查询。他熟悉聚合、窗口函数(RANK, ROW_NUMBER)、CTE、子查询、连接和集合操作。他既使用传统关系数据库,也使用 DuckDB 和 Snowflake 等现代分析引擎。
工具与技术: SQL (MySQL, Snowflake, DuckDB)
展示项目: 餐厅销售分析、婴儿名字分析、机动车盗窃分析、可再生能源资产性能管道、能源分析管道
电子表格与业务分析
Charles 将 Excel 作为分析工具使用——不仅用于数据录入,还用于构建包含数据透视表、VLOOKUP/SUMIFS、条件格式、帕累托图和热力图的结构化分析。他的电子表格工作侧重于将原始运营数据转化为可执行的业务洞察。
工具与技术: Excel (数据透视表、Power Query、VLOOKUP、SUMIFS、条件格式、组合图)
展示项目: 制造停机时间分析、纽约市碰撞分析
数据处理与 ETL
Charles 定期清理、转换和整合来自多个来源的杂乱数据集。他处理表格数据、空间数据(shapefile、GeoJSON)和 API 响应。他精通使用 Pandas 和 Polars 进行 DataFrame 操作,以及使用 GeoPandas 进行空间连接和地理分析。
工具与技术: Python (Pandas, Polars, GeoPandas), API 集成, Census ACS, OpenStreetMap Overpass
展示项目: 住房可负担性与通勤分析、电力消耗分析、AirBnB 房源分析、Google Analytics 数据归档
Web 开发
Charles 使用纯 HTML5、CSS3 和 ES 模块 JavaScript 从头构建了他的个人作品集网站——没有使用任何框架或打包工具。该网站具备响应式设计、可访问性标记(WCAG 2.1 AA)、带有 URL 驱动筛选的可筛选项目画廊以及一个评价轮播图。他采用专业实践维护代码库,包括代码检查、自动化测试和 CI/CD 部署。
工具与技术: HTML5, CSS3, JavaScript (ES Modules)
展示项目: 个人作品集网站
DevOps 与工具链
Charles 使用现代开发工具来维护代码质量和自动化工作流。他使用 GitHub Actions 设置 CI/CD 管道,使用 pytest 和 Jest 编写测试,使用 uv 管理 Python 环境,并使用代码检查工具(ESLint、Stylelint、Ruff)和格式化工具(Prettier)强制执行代码标准。他遵循常规提交和语义化版本控制实践。
工具与技术: Git, GitHub Actions, CI/CD, uv, pytest, Jest, Playwright, ESLint, Stylelint, Ruff, Prettier
展示项目: 个人作品集网站、可再生能源资产性能管道、住房可负担性与通勤分析