Library Search
结果页

XGBoost 调参心法与数学原理

在 技术栈 中找到 8 个匹配结果。

返回文档库
技术栈

技术栈

8 个
查看全部
XGBoost ## XGBoost XGBoost(eXtreme Gradient Boosting)是由陈天奇于 2014 年创建的**梯度提升树算法优化实现**,被誉为机器学习竞赛的「瑞士军刀」。Kaggle 上超过 50% 的冠军方案都使用了 XGBoost。 **核心价值:** - **极致性能**:C++ 底层,多线程并行,比 scikit-learn GBDT 快 10x+ - **正则化**… 3% LightGBM . LightGBM 的设计哲学 LightGBM 的三个核心问题: > "XGBoost 在大数据上太慢了,内存也吃不起。能不能更快、更省?" 答案:三个算法创新 —— **Leaf-wise / GOSS / EFB**。 ## 2. Leaf-wise vs Level-wise ``` XGBoost (Level-wise): LightGBM (Leaf-w… 2% PyTorch self.conv2 = nn.Conv2d(16, 32, kernel_size=3, padding=1) # → (32, 14, 14) self.bn2 = nn.BatchNorm2d(32) self.conv3 = nn.Conv2d(32, 64, kernel_size=3, padding=1) # → (64, 7, 7)… 2% JAX # JAX 入门教程:纯函数式思维与神经网络 ## 1. JAX 的哲学 JAX 不是另一个 TensorFlow 或 PyTorch。它的核心是**函数变换**:把普通的 Python/NumPy 函数,变换为可微分、可编译、可并行的版本。 ``` 你的函数 f ──► jax.grad(f) ──► 自动求导 ──► jax.jit(f) ──► XL… 1% MLflow 验 ## 目标 用 `mlflow.autolog()` 一行代码自动记录 XGBoost 训练的所有参数、指标、模型,然后在 UI 中对比多次实验。 ## 完整代码 ```python import mlflow import xgboost as xgb from sklearn.datasets import load_breast_cancer from sklearn.model… 1% Preact // useCallback — 缓存回调 const focusInput = useCallback(() => { inputRef.current?.focus(); }, []); return ( <div className={`app ${theme}`}> <h1>⚛️ Preact Demo</h1> <p classNam… 1% Python if bmi < 18.5: return f"BMI={bmi:.1f},偏瘦" elif bmi < 24: return f"BMI={bmi:.1f},正常" elif bmi < 28: return f"BMI={bmi:.1f},偏胖" else: return f"BMI={bmi:.1f},肥… 1% gRPC ```go // 服务端一元拦截器 func loggingInterceptor(ctx context.Context, req interface{}, info *grpc.UnaryServerInfo, handler grpc.UnaryHandler) (interface{}, error) { start := time.Now() resp, err… 1%