Senior Performance Test Engineer

**Tổng quan về vị trí**

Chuyên viên/ chuyên viên cấp cao Performance Testing chịu trách nhiệm xây dựng và triển khai chiến lược kiểm thử hiệu năng cho các hệ thống công nghệ có quy mô rất lớn, lượng người dùng và giao dịch cao, yêu cầu nghiêm ngặt về hiệu năng, khả năng mở rộng, độ ổn định và tính sẵn sàng.

Vị trí sẽ tham gia các dự án large-scale, mission-critical, distributed và real-time systems, trong đó hệ thống có thể phải phục vụ hàng chục đến hàng trăm nghìn người dùng đồng thời, hàng triệu giao dịch hoặc sự kiện mỗi ngày và tải tăng đột biến trong các thời điểm cao điểm.

Vai trò không chỉ dừng ở việc thực hiện Load Test và đo Response Time mà yêu cầu khả năng xây dựng mô hình tải thực tế, phân tích bottleneck trên toàn bộ hệ thống, đánh giá capacity, khả năng scale và đưa ra các khuyến nghị tối ưu hiệu năng.

Chuyên viên/chuyên viên cấp cao Performance Testing sẽ làm việc xuyên suốt với Solution Architect, Developer, DevOps, DBA, Infrastructure, Cloud và các đội sản phẩm để đảm bảo hệ thống đáp ứng các Performance SLA/SLO trước khi triển khai và vận hành thực tế.

**Mô tả công việc**

● Xây dựng Performance Test Strategy, Performance Test Plan và Performance Test Model cho các hệ thống quy mô lớn.

● Phân tích business requirements, system architecture và operational scenarios để xây dựng Realistic Workload Model (concurrent users, transaction rate, request rate, event rate, data volume và traffic pattern).

● Thiết kế và thực hiện Load Test, Stress Test, Spike Test, Endurance/Soak Test, Volume Test, Scalability Test, Capacity Test và Failover/Recovery Performance Test.

● Xây dựng và vận hành Distributed Load Testing để mô phỏng tải ở quy mô rất lớn (hàng chục đến hàng trăm nghìn concurrent users hoặc lượng transaction/event tương đương).

● Sử dụng các công cụ như JMeter, K6, Gatling, LoadRunner hoặc framework tương đương để xây dựng, tự động hóa và thực hiện performance test.

● Thu thập, phân tích các chỉ số Response Time, Throughput, TPS/RPS, Concurrent Users, Error Rate, CPU, Memory, Disk I/O, Network, Database, Message Queue và Infrastructure Metrics để xác định bottleneck.

● Phối hợp với Architect, Developer, DevOps, DBA, Cloud và Infrastructure để thực hiện Bottleneck Analysis, Capacity Planning, Performance Optimization và Scalability Assessment.

● Xây dựng hệ thống Performance Monitoring & Observability sử dụng Grafana, Prometheus, OpenTelemetry, Jaeger, Loki hoặc giải pháp tương đương.

● Thực hiện Performance Testing trong môi trường Microservices, Kubernetes, Cloud, API Gateway, Load Balancer, Database Cluster, Kafka/MQTT và các hệ thống Distributed/Event-driven.

● Phân tích kết quả, xây dựng Performance Benchmark, Capacity Limit, Bottleneck, Risk và Recommendation; thiết lập Performance Quality Gate trước release/go-live.

**Phạm vi hệ thống**

● Large-scale Digital Platforms

● Enterprise Systems

● E-commerce

● Banking / Financial Systems

● Telecom

● Transportation

● Smart City

● IoT Platforms

● AI / Video Analytics

● Real-time Systems

● Event-driven Systems

● Cloud-native Platforms

● Microservices Platforms

● Mission-critical Systems

**Các loại Performance Test**

**Loại kiểm thử**

**Mục tiêu**

Load Test

Kiểm tra hệ thống dưới tải dự kiến

Peak Load Test

Kiểm tra tại mức tải cao nhất dự kiến

Stress Test

Xác định giới hạn của hệ thống

Spike Test

Kiểm tra khi tải tăng đột biến

Endurance / Soak Test

Kiểm tra tính ổn định trong thời gian dài

Volume Test

Kiểm tra với khối lượng dữ liệu lớn

Capacity Test

Xác định năng lực tối đa

Scalability Test

Đánh giá khả năng scale

Failover Performance

Đánh giá performance khi một thành phần gặp sự cố

Recovery Performance

Đánh giá performance trong quá trình recovery

Distributed Load Test

Tạo tải từ nhiều Load Generator

Real-time Performance Test

Kiểm tra latency của event/message/stream

AI/Video Performance Test

Đánh giá throughput và processing latency

**Yêu cầu về Trình độ / Năng lực chuyên môn / Kinh nghiệm**

*(Danh sách các yêu cầu công việc chung cho vai trò (không dành riêng cho từng cá nhân) – bao gồm trình độ học vấn, kinh nghiệm làm việc và kiến thức kỹ thuật mong muốn.)*

**Bắt buộc**

● Tốt nghiệp Đại học trở lên chuyên ngành CNTT, Khoa học máy tính, Kỹ thuật phần mềm, Điện tử viễn thông hoặc các chuyên ngành liên quan.

● Có tối thiểu 5–8 năm kinh nghiệm trong Software Performance Testing / Performance Engineering.

● Có kinh nghiệm tham gia hoặc dẫn dắt Performance Testing cho các hệ thống quy mô lớn, yêu cầu cao về hiệu năng, scalability và availability.

● Có kinh nghiệm xây dựng Performance Test Strategy, Workload Model, Test Scenario, Test Script và Performance Test Plan.

● Thành thạo ít nhất một trong các công cụ JMeter, K6, Gatling hoặc LoadRunner; ưu tiên ứng viên có kinh nghiệm với nhiều công cụ.

● Có kiến thức sâu về HTTP/HTTPS, REST API, WebSocket, TCP/IP, DNS, Load Balancing, Connection Pool và Caching.

● Có khả năng phân tích performance của Application, Microservices, Database, Cache, Message Broker và Infrastructure.

● Có kinh nghiệm với SQL và Database Performance (query performance, connection pool, locking, indexing, transaction behavior).

● Có kinh nghiệm Performance Testing trên Cloud / Docker / Kubernetes và các hệ thống Distributed.

● Có khả năng sử dụng Linux và các công cụ system monitoring/profiling để phân tích CPU, Memory, Disk I/O, Network và Process.

**Điểm cộng**

● Có kinh nghiệm Performance Testing với hàng chục nghìn hoặc hàng trăm nghìn concurrent users.

● Có kinh nghiệm với các hệ thống Banking, Telecom, E-commerce, Transportation, Smart City, Government hoặc Mission-critical.

● Có kinh nghiệm với AI / Computer Vision / Video Analytics / IoT.

● Có kinh nghiệm với Real-time / Event-driven / Distributed Systems.

● Có kinh nghiệm xây dựng Performance Testing Framework.

● Có kinh nghiệm Capacity Planning, Performance Optimization và Production Performance Monitoring.

● Có kiến thức về Chaos Engineering, Resilience Testing, High Availability và Disaster Recovery.

● Có kinh nghiệm triển khai Performance Test trên Kubernetes / Cloud / Distributed Environment.

● Có chứng chỉ ISTQB Performance Testing, AWS/GCP/Azure, Kubernetes hoặc tương đương.

**Năng lực Performance Engineering**

Ứng viên cần có khả năng chuyển đổi từ Business Load → Technical Load. Ví dụ:

● 150.000 concurrent users

● Concurrent Sessions

● Requests/sec

● Transactions/sec

● Events/sec

● Messages/sec

● Network Throughput

● Database Transactions

● Infrastructure Capacity

Ứng viên phải xác định được mối quan hệ giữa business volume và technical capacity, thay vì chỉ đơn thuần chạy một bài load test.

**Bottleneck Analysis**

Có khả năng trả lời câu hỏi “Tại sao hệ thống chậm?” — không chỉ báo cáo Response Time = 5 seconds, mà phải phân tích toàn bộ request path:

● User

● Load Balancer

● API Gateway

● Microservice

● Cache

● Message Broker

● Database

● External Service

…và xác định chính xác component, resource hoặc architectural constraint đang tạo bottleneck.

**Capacity Planning**

Có khả năng xác định:

● Maximum TPS

● Maximum RPS

● Maximum Concurrent Users

● Maximum Event Rate

● Maximum Message Rate

● Maximum Database Connections

● Maximum Kafka Throughput

● Infrastructure Capacity

● Scaling Requirement

● System Breaking Point

● Recommended Operating Capacity

Đồng thời đưa ra khuyến nghị về:

● Scale-up

● Scale-out

● Load Balancing

● Database Scaling

● Cache

● Message Queue

● Kubernetes Autoscaling

● Infrastructure Sizing

**Công cụ / Công nghệ**

**Nhóm**

**Công nghệ**

Performance Testing

JMeter; k6; Gatling; LoadRunner

Monitoring & Observability

Grafana; Prometheus; Loki; OpenTelemetry; Jaeger

Infrastructure

Linux; Docker; Kubernetes; Cloud

Messaging

Kafka; MQTT; RabbitMQ hoặc tương đương

Database

PostgreSQL; MySQL; Oracle; SQL Server; NoSQL

API / Protocol

REST; WebSocket; gRPC; TCP; MQTT

**Kết quả / KPI kỳ vọng**

**Performance Benchmark**

● Response Time

● P90 / P95 / P99

● Throughput

● TPS/RPS

● Concurrent Users

● Event Processing Rate

● Processing Latency

● Error Rate

**Capacity**

● Maximum Supported Load

● Breaking Point

● Recommended Operating Capacity

● Scaling Requirement

**Reliability**

● Soak Test Stability

● Memory Leak

● Resource Exhaustion

● Failover Impact

● Recovery Time

**Performance Quality Gate**

● P95 Response Time ≤ SLA

● P99 Response Time ≤ SLA

● Error Rate ≤ SLA

● Event Processing Latency ≤ SLA

● CPU/Memory trong giới hạn cho phép

● Không xảy ra Memory Leak

● Không xảy ra Resource Exhaustion

● Recovery đáp ứng yêu cầu RTO/RPO

*Các ngưỡng cụ thể được xác định theo SLA/SLO của từng hệ thống.*

**Phẩm chất cần có**

● System Thinking

● Analytical & Troubleshooting

● Data-driven Thinking

● Khả năng điều tra nguyên nhân gốc

● Tư duy về scalability và capacity

● Khả năng làm việc với hệ thống phức tạp

● Khả năng giao tiếp với Architect, Developer, DevOps, DBA và Infrastructure

● Khả năng trình bày kết quả Performance Testing cho Technical Lead và Management

● Chủ động và có khả năng dẫn dắt các bài toán Performance Testing phức tạp

**Tiêu chí tuyển dụng ưu tiên**

**MUST HAVE**

Performance Testing + JMeter / k6 / LoadRunner + Distributed Systems + Linux + SQL / Database + Monitoring + API + Performance Analysis

**STRONG PLUS**

Kubernetes + Kafka / MQTT + Cloud + Microservices + Real-time Systems + AI / Video Analytics + IoT

**SENIOR LEVEL**

Workload Modeling + Capacity Planning + Bottleneck Analysis + Performance Engineering + Performance Optimization + Production Performance + Large-scale Distributed Systems