リードデータサイエンティスト面接質問集

# 例: メンターシップ追跡システム
class MentorshipTracker:
    def __init__(self):
        self.mentees = {}
    
    def create_development_plan(self, mentee_name, current_level, target_level, timeline_months):
        """個別育成計画の作成"""
        plan = {
            'mentee': mentee_name,
            'current_level': current_level,
            'target_level': target_level,
            'timeline_months': timeline_months,
            'skills_to_develop': [],
            'projects': [],
            'milestones': [],
            'check_ins': []
        }
        self.mentees[mentee_name] = plan
        return plan
    
    def add_skill_goal(self, mentee_name, skill, current_proficiency, target_proficiency):
        """スキル開発目標の追加"""
        goal = {
            'skill': skill,
            'current': current_proficiency,
            'target': target_proficiency,
            'resources': [],
            'progress': 0
        }
        self.mentees[mentee_name]['skills_to_develop'].append(goal)
    
    def log_check_in(self, mentee_name, date, notes, progress_rating):
        """メンターシップチェックインの記録"""
        check_in = {
            'date': date,
            'notes': notes,
            'progress_rating': progress_rating,
            'action_items': []
        }
        self.mentees[mentee_name]['check_ins'].append(check_in)
    
    def get_progress_summary(self, mentee_name):
        """メンティーの進捗状況の概要を取得"""
        plan = self.mentees[mentee_name]
        avg_progress = sum(s['progress'] for s in plan['skills_to_develop']) / len(plan['skills_to_develop'])
        return {
            'mentee': mentee_name,
            'overall_progress': avg_progress,
            'skills_in_progress': len([s for s in plan['skills_to_develop'] if 0 < s['progress'] < 100]),
            'skills_completed': len([s for s in plan['skills_to_develop'] if s['progress'] == 100]),
            'total_check_ins': len(plan['check_ins'])
        }

# 使用例
tracker = MentorshipTracker()
tracker.create_development_plan('Alice', 'ジュニアDS', 'ミドルレベルDS', 12)
tracker.add_skill_goal('Alice', '深層学習', current_proficiency=2, target_proficiency=4)
tracker.add_skill_goal('Alice', 'モデルのデプロイ', current_proficiency=1, target_proficiency=3)
tracker.log_check_in('Alice', '2025-01-15', 'PyTorchコースを完了', progress_rating=7)

summary = tracker.get_progress_summary('Alice')
print(f"進捗状況の概要: {summary}")

# 例: MLプラットフォームのアーキテクチャ設計
class MLPlatformArchitecture:
    def __init__(self):
        self.components = {
            'data_layer': {
                'data_lake': 'S3/GCS/Azure Blob',
                'data_warehouse': 'Snowflake/BigQuery/Redshift',
                'feature_store': 'Feast/Tecton',
                'data_catalog': 'DataHub/Amundsen'
            },
            'compute_layer': {
                'training': 'SageMaker/Vertex AI/AzureML',
                'batch_inference': 'Spark/Dask',
                'real_time_serving': 'Kubernetes/SageMaker Endpoints'
            },
            'ml_ops': {
                'experiment_tracking': 'MLflow/W&B',
                'model_registry': 'MLflow/SageMaker',
                'pipeline_orchestration': 'Airflow/Kubeflow',
                'monitoring': 'Prometheus/Grafana'
            },
            'governance': {
                'version_control': 'Git/DVC',
                'access_control': 'IAM/RBAC',
                'audit_logging': 'CloudTrail/StackDriver'
            }
        }
    
    def design_for_scale(self, expected_models, expected_requests_per_sec):
        """スケール要件に基づいてアーキテクチャを設計"""
        recommendations = []
        
        if expected_models > 100:
            recommendations.append("自動化されたモデルレジストリとライフサイクル管理を実装")
            recommendations.append("冗長性を減らすために特徴量ストアを使用")
        
        if expected_requests_per_sec > 1000:
            recommendations.append("自動スケーリングでKubernetesにモデルをデプロイ")
            recommendations.append("頻繁な予測のためにキャッシュレイヤーを実装")
            recommendations.append("モデルサービングの最適化を使用 (TensorRT, ONNX)")
        
        return recommendations
    
    def estimate_costs(self, team_size, data_volume_tb, model_count):
        """インフラストラクチャのコストを見積もる"""
        # 簡略化されたコスト見積もり
        costs = {
            'storage': data_volume_tb * 23,  # $23/TB/月
            'compute_training': model_count * 500,  # $500/モデル/月
            'compute_serving': model_count * 200,  # $200/モデル/月
            'tools_licenses': team_size * 100,  # $100/人/月
        }
        costs['total'] = sum(costs.values())
        return costs

# 使用例
platform = MLPlatformArchitecture()
recommendations = platform.design_for_scale(expected_models=150, expected_requests_per_sec=2000)
print("アーキテクチャの推奨事項:")
for rec in recommendations:
    print(f"- {rec}")

costs = platform.estimate_costs(team_size=10, data_volume_tb=50, model_count=20)
print(f"\n月額見積もりコスト: ${costs['total']:,.0f}")

import pandas as pd
import numpy as np

class ProjectPrioritization:
    def __init__(self):
        self.projects = []
    
    def add_project(self, name, business_value, feasibility, urgency, 
                   resource_requirement, strategic_alignment):
        """スコアリング基準でプロジェクトを追加"""
        project = {
            'name': name,
            'business_value': business_value,  # 1-10
            'feasibility': feasibility,  # 1-10
            'urgency': urgency,  # 1-10
            'resource_requirement': resource_requirement,  # 1-10 (低いほど良い)
            'strategic_alignment': strategic_alignment  # 1-10
        }
        
        # 優先度スコアを計算
        # ビジネス価値、実現可能性、緊急性、整合性が高いほどスコアが上がる
        # リソース要件が高いほどスコアが下がる
        project['priority_score'] = (
            business_value * 0.3 +
            feasibility * 0.25 +
            urgency * 0.2 +
            strategic_alignment * 0.15 +
            (10 - resource_requirement) * 0.1
        )
        
        self.projects.append(project)
    
    def get_prioritized_projects(self):
        """優先度でソートされたプロジェクトを返す"""
        df = pd.DataFrame(self.projects)
        return df.sort_values('priority_score', ascending=False)
    
    def allocate_resources(self, available_capacity):
        """優先度とキャパシティに基づいてリソースを割り当てる"""
        df = self.get_prioritized_projects()
        allocated = []
        remaining_capacity = available_capacity
        
        for _, project in df.iterrows():
            if project['resource_requirement'] <= remaining_capacity:
                allocated.append(project['name'])
                remaining_capacity -= project['resource_requirement']
        
        return {
            'allocated_projects': allocated,
            'capacity_used': available_capacity - remaining_capacity,
            'capacity_remaining': remaining_capacity
        }

# 使用例
prioritizer = ProjectPrioritization()

# プロジェクトを追加
prioritizer.add_project(
    name='顧客離反予測',
    business_value=9,
    feasibility=8,
    urgency=7,
    resource_requirement=5,
    strategic_alignment=9
)

prioritizer.add_project(
    name='レコメンデーションシステム',
    business_value=8,
    feasibility=6,
    urgency=5,
    resource_requirement=8,
    strategic_alignment=7
)

prioritizer.add_project(
    name='不正検知',
    business_value=10,
    feasibility=7,
    urgency=9,
    resource_requirement=6,
    strategic_alignment=10
)

prioritizer.add_project(
    name='需要予測',
    business_value=7,
    feasibility=9,
    urgency=6,
    resource_requirement=4,
    strategic_alignment=6
)

# 優先順位付けされたリストを取得
prioritized = prioritizer.get_prioritized_projects()
print("優先順位付けされたプロジェクト:")
print(prioritized[['name', 'priority_score', 'business_value', 'feasibility']].to_string(index=False))

# リソースを割り当てる (キャパシティ15ユニットを想定)
allocation = prioritizer.allocate_resources(available_capacity=15)
print(f"\n割り当てられたプロジェクト: {allocation['allocated_projects']}")
print(f"使用されたキャパシティ: {allocation['capacity_used']}/15")

class StakeholderPresentation:
    def __init__(self, project_name, audience_type):
        self.project_name = project_name
        self.audience_type = audience_type
    
    def create_executive_summary(self, business_problem, solution, impact, timeline, investment):
        """経営幹部向けの概要を作成"""
        summary = f"""
# {self.project_name}

## ビジネス上の問題
{business_problem}

## 提案されたソリューション
{solution}

## 期待されるインパクト
{impact}

## タイムラインと投資
- タイムライン: {timeline}
- 必要な投資: {investment}

## 主なリスクと軽減策
- データ品質: データ検証パイプラインを実装
- モデルの精度: ベースラインと成功指標を確立
- 採用: ユーザーのトレーニングと変更管理計画
"""
        return summary
    
    def create_technical_analogy(self, ml_concept):
        """MLの概念について技術的知識のない人にわかりやすいアナロジーを作成"""
        analogies = {
            'supervised_learning': "フラッシュカードで子供に教えるようなもの - パターンを学習するまで、正しい答えの例を表示します",
            'neural_network': "専門家チームのようなもの。各レイヤーは異なる側面に焦点を当て、次のレイヤーに情報を渡します",
            'overfitting': "概念を理解する代わりに答えを暗記するようなもの - 練習テストでは機能しますが、新しい質問では失敗します",
            'feature_engineering': "レシピに適した材料を選ぶようなもの - 入力の品質が出力の品質を決定します",
            'model_deployment': "新製品の発売のようなもの - 徹底的にテストし、徐々に展開し、パフォーマンスを監視します"
        }
        return analogies.get(ml_concept, "概念が見つかりません")
    
    def quantify_business_impact(self, metric_name, baseline, predicted, confidence_interval):
        """不確実性を考慮してビジネスインパクトを提示"""
        improvement = ((predicted - baseline) / baseline) * 100
        
        report = f"""
## ビジネスインパクト: {metric_name}

- **現在の状態**: {baseline:,.0f}
- **予測される状態**: {predicted:,.0f}
- **期待される改善**: {improvement:.1f}%
- **信頼区間**: {confidence_interval[0]:.1f}% から {confidence_interval[1]:.1f}%

この改善は、モデルの不確実性を考慮しながら、ビジネスに大きな価値をもたらします。
"""
        return report

# 使用例
presentation = StakeholderPresentation("顧客離反予測", "経営幹部")

summary = presentation.create_executive_summary(
    business_problem="年間15%の顧客を失い、500万ドルの収益を失っている",
    solution="3か月前に離反リスクを予測するMLモデル。プロアクティブな維持が可能になる",
    impact="離反を20〜30%削減し、年間100〜150万ドルを節約",
    timeline="3か月の開発、1か月のパイロット、2か月の展開",
    investment="20万ドル（チームの時間+インフラストラクチャ）"
)

print(summary)

analogy = presentation.create_technical_analogy('overfitting')
print(f"\n過学習のアナロジー: {analogy}")

impact = presentation.quantify_business_impact(
    metric_name="顧客維持率",
    baseline=85,
    predicted=88,
    confidence_interval=(87.5, 88.5)
)
print(impact)

import numpy as np
from sklearn.metrics import confusion_matrix

class FairnessAuditor:
    def __init__(self, model, sensitive_attribute):
        self.model = model
        self.sensitive_attribute = sensitive_attribute
    
    def calculate_demographic_parity(self, X, y_pred, sensitive_feature):
        """人口統計パリティの差を計算"""
        groups = np.unique(sensitive_feature)
        positive_rates = {}
        
        for group in groups:
            group_mask = sensitive_feature == group
            positive_rate = np.mean(y_pred[group_mask])
            positive_rates[group] = positive_rate
        
        max_rate = max(positive_rates.values())
        min_rate = min(positive_rates.values())
        parity_difference = max_rate - min_rate
        
        return {
            'positive_rates': positive_rates,
            'parity_difference': parity_difference,
            'is_fair': parity_difference < 0.1  # 10%のしきい値
        }
    
    def calculate_equal_opportunity(self, y_true, y_pred, sensitive_feature):
        """均等な機会の差 (グループ全体のTPR) を計算"""
        groups = np.unique(sensitive_feature)
        tpr_by_group = {}
        
        for group in groups:
            group_mask = sensitive_feature == group
            y_true_group = y_true[group_mask]
            y_pred_group = y_pred[group_mask]
            
            # 真陽性率
            tp = np.sum((y_true_group == 1) & (y_pred_group == 1))
            fn = np.sum((y_true_group == 1) & (y_pred_group == 0))
            tpr = tp / (tp + fn) if (tp + fn) > 0 else 0
            
            tpr_by_group[group] = tpr
        
        max_tpr = max(tpr_by_group.values())
        min_tpr = min(tpr_by_group.values())
        eo_difference = max_tpr - min_tpr
        
        return {
            'tpr_by_group': tpr_by_group,
            'equal_opportunity_difference': eo_difference,
            'is_fair': eo_difference < 0.1
        }
    
    def generate_fairness_report(self, X, y_true, y_pred, sensitive_feature):
        """包括的な公平性レポートを生成"""
        dp = self.calculate_demographic_parity(X, y_pred, sensitive_feature)
        eo = self.calculate_equal_opportunity(y_true, y_pred, sensitive_feature)
        
        report = f"""
# 公平性監査レポート

## 人口統計パリティ
- グループごとの陽性率: {dp['positive_rates']}
- パリティの差: {dp['parity_difference']:.3f}
- 公正 (< 0.1): {dp['is_fair']}

## 均等な機会
- グループごとのTPR: {eo['tpr_by_group']}
- EOの差: {eo['equal_opportunity_difference']:.3f}
- 公正 (< 0.1): {eo['is_fair']}

## 推奨事項
"""
        if not dp['is_fair']:
            report += "- リサンプリングまたはしきい値の調整を通じて、人口統計パリティの問題に対処します\n"
        if not eo['is_fair']:
            report += "- キャリブレーションまたは公平性の制約を通じて、均等な機会の問題に対処します\n"
        
        return report

# 使用例
np.random.seed(42)
n_samples = 1000

# バイアスのあるデータをシミュレート
sensitive_feature = np.random.choice(['グループA', 'グループB'], n_samples, p=[0.7, 0.3])
y_true = np.random.randint(0, 2, n_samples)

# バイアスのある予測をシミュレート (グループBの陽性率が低い)
y_pred = y_true.copy()
group_b_mask = sensitive_feature == 'グループB'
y_pred[group_b_mask] = np.where(
    np.random.random(np.sum(group_b_mask)) < 0.3,
    1 - y_pred[group_b_mask],
    y_pred[group_b_mask]
)

auditor = FairnessAuditor(model=None, sensitive_attribute='group')
report = auditor.generate_fairness_report(None, y_true, y_pred, sensitive_feature)
print(report)

class DataScienceRoadmap:
    def __init__(self, company_name):
        self.company_name = company_name
        self.initiatives = {
            'quick_wins': [],
            'medium_term': [],
            'long_term': []
        }
        self.capabilities = []
    
    def add_initiative(self, name, timeline, business_value, dependencies, resources):
        """ロードマップにイニシアチブを追加"""
        initiative = {
            'name': name,
            'timeline': timeline,
            'business_value': business_value,
            'dependencies': dependencies,
            'resources': resources,
            'status': 'planned'
        }
        
        if timeline <= 6:
            self.initiatives['quick_wins'].append(initiative)
        elif timeline <= 12:
            self.initiatives['medium_term'].append(initiative)
        else:
            self.initiatives['long_term'].append(initiative)
    
    def add_capability(self, capability_name, current_level, target_level, timeline):
        """能力開発目標を追加"""
        capability = {
            'name': capability_name,
            'current_level': current_level,  # 1-5
            'target_level': target_level,  # 1-5
            'timeline': timeline,
            'gap': target_level - current_level
        }
        self.capabilities.append(capability)
    
    def generate_roadmap_summary(self):
        """ロードマップの概要を生成"""
        summary = f"""
# {self.company_name} データサイエンスロードマップ

## 短期的な成功 (0〜6か月)
"""
        for init in self.initiatives['quick_wins']:
            summary += f"- **{init['name']}**: {init['business_value']}\n"
        
        summary += "\n## 中期的な計画 (6〜12か月)\n"
        for init in self.initiatives['medium_term']:
            summary += f"- **{init['name']}**: {init['business_value']}\n"
        
        summary += "\n## 長期的な計画 (12か月以上)\n"
        for init in self.initiatives['long_term']:
            summary += f"- **{init['name']}**: {init['business_value']}\n"
        
        summary += "\n## 能力開発\n"
        for cap in sorted(self.capabilities, key=lambda x: x['gap'], reverse=True):
            summary += f"- **{cap['name']}**: レベル {cap['current_level']} → {cap['target_level']} ({cap['timeline']} か月)\n"
        
        return summary

# 使用例
roadmap = DataScienceRoadmap("TechCorp")

# 短期的な成功を追加
roadmap.add_initiative(
    name="顧客離反ダッシュボード",
    timeline=3,
    business_value="離反要因の可視化、プロアクティブな維持が可能",
    dependencies=[],
    resources="1 DS, 1 アナリスト"
)

# 中期的なイニシアチブを追加
roadmap.add_initiative(
    name="パーソナライゼーションエンジン",
    timeline=9,
    business_value="コンバージョンを15%向上、ユーザーエクスペリエンスを改善",
    dependencies=["特徴量ストア", "A/Bテストフレームワーク"],
    resources="2 DS, 1 MLE"
)

# 長期的なイニシアチブを追加
roadmap.add_initiative(
    name="リアルタイムレコメンデーションシステム",
    timeline=18,
    business_value="リアルタイムパーソナライゼーション、競争上の優位性",
    dependencies=["ストリーミングインフラストラクチャ", "モデルサービングプラットフォーム"],
    resources="3 DS, 2 MLE, 1 DE"
)

# 能力を追加
roadmap.add_capability("MLOpsの成熟度", current_level=2, target_level=4, timeline=12)
roadmap.add_capability("リアルタイムML", current_level=1, target_level=3, timeline=18)
roadmap.add_capability("NLPの能力", current_level=2, target_level=4, timeline=15)

print(roadmap.generate_roadmap_summary())