tibia772/scripts/fetch-data.sh

69 lines
2.4 KiB
Bash

#!/bin/sh
# ============================================================
# fetch-data.sh — trae la data del leak desde un link compartido
# (OneDrive / Google Drive / URL directa) usando una variable de entorno.
#
# Uso:
# export TIBIA_DATA_URL="https://..." # link compartido
# export TIBIA_DATA_TOKEN="" # opcional: token para OneDrive con password / gdrive confirm
# ./scripts/fetch-data.sh [destino] # default: ./data
#
# El destino NO se commitea: está en .gitignore (regla de oro).
# ============================================================
set -e
URL="${TIBIA_DATA_URL:?Debes exportar TIBIA_DATA_URL con el link de la data}"
TOKEN="${TIBIA_DATA_TOKEN:-}"
DEST="${1:-./data}"
# --- Detecta el tipo de link y lo convierte a descarga directa ---
case "$URL" in
*drive.google.com*drive/d/*|*drive.google.com*file/d/*)
# Google Drive: id del archivo -> descarga directa (con confirm para archivos grandes)
FILE_ID=$(printf '%s' "$URL" | sed -E 's#.*file/d/([A-Za-z0-9_-]+).*#\1#;s#.*drive/d/([A-Za-z0-9_-]+).*#\1#')
DL_URL="https://drive.google.com/uc?export=download&id=${FILE_ID}&confirm=t"
;;
*1drv.ms*|*onedrive.live.com*|*sharepoint.com*)
# OneDrive: el link corto redirige al archivo; dejar que curl siga el redirect.
# "download=1" fuerza descarga en vez de preview HTML.
case "$URL" in
*\?*) DL_URL="${URL}&download=1" ;;
*) DL_URL="${URL}?download=1" ;;
esac
;;
*)
DL_URL="$URL"
;;
esac
mkdir -p "$DEST.tmp"
echo "[fetch-data] descargando a $DEST.tmp/data.tar.gz ..."
curl -fL --retry 3 ${TOKEN:+-H "Authorization: Bearer $TOKEN"} \
-o "$DEST.tmp/data.tar.gz" "$DL_URL"
echo "[fetch-data] verificando que es un tarball válido..."
tar -tzf "$DEST.tmp/data.tar.gz" >/dev/null || {
echo "[fetch-data] ERROR: el contenido no es un tar.gz válido."
echo " Verifica que el link sea de descarga directa y no de vista previa."
exit 1
}
echo "[fetch-data] extrayendo..."
tar -xzf "$DEST.tmp/data.tar.gz" -C "$DEST.tmp"
# Si el tarball trae una carpeta raíz única, aplánala
if [ -d "$DEST.tmp/data" ]; then
mv "$DEST.tmp/data" "$DEST.new"
else
mv "$DEST.tmp" "$DEST.new"
fi
if [ -d "$DEST" ]; then
echo "[fetch-data] ya existe $DEST — moviendo el anterior a $DEST.old"
mv "$DEST" "$DEST.old"
fi
mv "$DEST.new" "$DEST"
rm -rf "$DEST.tmp" "$DEST.old"
echo "[fetch-data] listo: data en $DEST (recordar ./qm-db también)"