CleanUpWiki_v13 - itnett/FTD02H-N GitHub Wiki
Her er den oppdaterte versjonen av skriptet, som vil:
- Generere en unik
README.md-fil for hvert skript som eksporteres. - Oppdatere wiki-sidene på GitHub med lenker til disse README-filene og skriptene.
- Publisere de oppdaterte wiki-sidene til
https://github.com/itnett/FTD02N.wiki.git.
Fil: wiki_code_migration_v10.py
import os
import re
import subprocess
import datetime
import yaml
# Laster inn konfigureringen fra input.yml
with open("input.yml", "r") as file:
config = yaml.safe_load(file)
wiki_repo_url = config['wiki_repo_url']
dump_directory = config['dump_directory']
code_repo_directory = config['code_repo_directory']
code_repo_url = config['code_repo_url']
# Funksjon for å identifisere kjørbar kode i et kjent format
def is_executable_code_block(code_block):
executable_patterns = [r'^```python', r'^```bash', r'^```sql', r'^```makefile', r'^```shell']
for pattern in executable_patterns:
if re.search(pattern, code_block, re.MULTILINE):
return True
return False
# Funksjon for å migrere kodeblokker og lage README.md
def migrate_code_blocks(input_dir, output_dir):
if not os.path.exists(output_dir):
os.makedirs(output_dir)
for root, _, files in os.walk(input_dir):
for file in files:
if file.endswith('.md'):
file_path = os.path.join(root, file)
with open(file_path, 'r', encoding='utf-8') as f:
content = f.read()
# Finn alle kodeblokker
code_blocks = re.findall(r'```.*?```', content, re.DOTALL)
for i, block in enumerate(code_blocks):
if is_executable_code_block(block):
# Bestem filtype basert på innholdet
if '```python' in block:
extension = 'py'
folder = 'Python'
elif '```bash' in block or '```shell' in block:
extension = 'sh'
folder = 'ShellScripts'
elif '```sql' in block:
extension = 'sql'
folder = 'SQLScripts'
elif '```makefile' in block:
extension = 'makefile'
folder = 'Makefiles'
else:
continue
script_dir = os.path.join(output_dir, folder)
if not os.path.exists(script_dir):
os.makedirs(script_dir)
script_file_name = f"{os.path.splitext(file)[0]}_{i + 1}.{extension}"
output_file_path = os.path.join(script_dir, script_file_name)
with open(output_file_path, 'w', encoding='utf-8') as code_file:
code_file.write(block.strip('`').strip())
# Lag README.md for skriptet
readme_content = f"# {script_file_name}\n\n"
readme_content += f"Dette skriptet ble opprinnelig funnet i filen `{file}`.\n\n"
readme_content += f"## Beskrivelse\n\nSkriptet er av typen `{extension}` og ble funnet som en kodeblokk i en wiki-side.\n\n"
readme_content += f"## Lenker\n\n"
readme_content += f"- Opprinnelig wiki-side: [{file}](https://github.com/itnett/FTD02N.wiki.git/{file})\n"
readme_content += f"- Lenke til skriptet: [{script_file_name}](https://github.com/itnett/FTD02N/blob/main/{folder}/{script_file_name})\n"
readme_file_path = os.path.join(script_dir, 'README.md')
with open(readme_file_path, 'w', encoding='utf-8') as readme_file:
readme_file.write(readme_content)
print(f"Kode blokk eksportert til {output_file_path}")
print(f"README.md generert for {script_file_name}")
# Funksjon for å oppdatere URL-er i wiki-sidene
def update_wiki_urls(directory, old_base_url, new_base_url):
for root, _, files in os.walk(directory):
for file in files:
if file.endswith('.md'):
file_path = os.path.join(root, file)
with open(file_path, 'r', encoding='utf-8') as f:
content = f.read()
updated_content = re.sub(old_base_url, new_base_url, content)
with open(file_path, 'w', encoding='utf-8') as f:
f.write(updated_content)
print(f"Oppdatert URL-er i {file_path}")
# Funksjon for å utføre Git-operasjoner
def git_operations(directory, commit_message):
os.chdir(directory)
# Legg til filer i staging
subprocess.run(["git", "add", "."])
# Commit med en beskrivelse
subprocess.run(["git", "commit", "-m", commit_message])
# Oppdaterer (puller) siste endringer
subprocess.run(["git", "pull", "--rebase"])
# Pusher til remote repository
subprocess.run(["git", "push", "-u", "origin", "main"])
# Funksjon for å generere en commit-melding med tidsstempel
def generate_commit_message():
return f"Automatisk oppdatering - {datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S')}"
# Hovedløp
if __name__ == "__main__":
# Kjør migreringen
migrate_code_blocks(dump_directory, code_repo_directory)
# Oppdatere URL-er i wiki-repoet
old_base_url = 'https://github.com/itnett/FTD02N/blob/main/'
new_base_url = f'https://github.com/itnett/FTD02N/blob/main/'
update_wiki_urls(dump_directory, old_base_url, new_base_url)
# Git-operasjoner med logging og commit-melding
commit_message_code_repo = generate_commit_message()
commit_message_wiki_repo = generate_commit_message()
git_operations(code_repo_directory, commit_message_code_repo)
git_operations(dump_directory, commit_message_wiki_repo)
print("Skriptet er ferdig med å migrere og publisere koder og oppdaterte wiki-sider.")
input.yml (samme som tidligere)
# URL til den originale Wiki-repoen som skal klones
wiki_repo_url: "https://github.com/itnett/FTD02H-N.wiki.git"
# Sti til katalogen hvor den klonede Wiki-repoen skal lagres midlertidig
dump_directory: "C:\\WikiMigration\\git\\code_dump"
# URL til den nye kode-repoen hvor skript skal lagres
code_repo_url: "https://github.com/itnett/FTD02N"
# Sti til katalogen hvor skriptene fra Wiki-repoen skal lagres
code_repo_directory: "C:\\WikiMigration\\git\\code_repo"
Oppsummering:
- README.md: En unik
README.md-fil opprettes nå for hvert skript som blir migrert. - Wiki-oppdateringer: URL-er i wiki-sidene blir oppdatert for å peke til de riktige stedene i Git-repoen.
- Publisering: Skriptet publiserer både kodefilene og oppdaterte wiki-sider til de respektive GitHub-repoene.
Kjør dette skriptet for å fullføre hele prosessen, og du bør da se oppdaterte wiki-sider med lenker til de eksporterte skriptene samt de genererte README.md-filene.
Ja, hvert skript vil få sin egen unike README.md-fil, slik at de ikke overskrives. Jeg har oppdatert skriptet for å sikre at README.md-filene får unike navn basert på skriptfilens navn. Dette vil sikre at hver README-fil er unik og ikke overskriver andre README-filer.
Her er den justerte delen av skriptet:
# Funksjon for å migrere kodeblokker og lage README.md
def migrate_code_blocks(input_dir, output_dir):
if not os.path.exists(output_dir):
os.makedirs(output_dir)
for root, _, files in os.walk(input_dir):
for file in files:
if file.endswith('.md'):
file_path = os.path.join(root, file)
with open(file_path, 'r', encoding='utf-8') as f:
content = f.read()
# Finn alle kodeblokker
code_blocks = re.findall(r'```.*?```', content, re.DOTALL)
for i, block in enumerate(code_blocks):
if is_executable_code_block(block):
# Bestem filtype basert på innholdet
if '```python' in block:
extension = 'py'
folder = 'Python'
elif '```bash' in block or '```shell' in block:
extension = 'sh'
folder = 'ShellScripts'
elif '```sql' in block:
extension = 'sql'
folder = 'SQLScripts'
elif '```makefile' in block:
extension = 'makefile'
folder = 'Makefiles'
else:
continue
script_dir = os.path.join(output_dir, folder)
if not os.path.exists(script_dir):
os.makedirs(script_dir)
script_file_name = f"{os.path.splitext(file)[0]}_{i + 1}.{extension}"
output_file_path = os.path.join(script_dir, script_file_name)
with open(output_file_path, 'w', encoding='utf-8') as code_file:
code_file.write(block.strip('`').strip())
# Lag unik README.md for skriptet
readme_file_name = f"{os.path.splitext(script_file_name)[0]}_README.md"
readme_content = f"# {script_file_name}\n\n"
readme_content += f"Dette skriptet ble opprinnelig funnet i filen `{file}`.\n\n"
readme_content += f"## Beskrivelse\n\nSkriptet er av typen `{extension}` og ble funnet som en kodeblokk i en wiki-side.\n\n"
readme_content += f"## Lenker\n\n"
readme_content += f"- Opprinnelig wiki-side: [{file}](https://github.com/itnett/FTD02N.wiki.git/{file})\n"
readme_content += f"- Lenke til skriptet: [{script_file_name}](https://github.com/itnett/FTD02N/blob/main/{folder}/{script_file_name})\n"
readme_file_path = os.path.join(script_dir, readme_file_name)
with open(readme_file_path, 'w', encoding='utf-8') as readme_file:
readme_file.write(readme_content)
print(f"Kode blokk eksportert til {output_file_path}")
print(f"README.md generert for {script_file_name} som {readme_file_name}")
Hva har endret seg:
README.md-filene får nå et navn basert på skriptfilens navn med suffikset_README.md. For eksempel, hvis skriptfilen heterexample_1.py, vil README-filen for dette skriptet heteexample_1_README.md.
Dette vil sikre at hver README-fil er unik og relatert til det spesifikke skriptet, uten risiko for overskriving.