# isnan lab — Eksperimen kecil. Hasil yang berguna.

> isnan lab: semua eksperimen yang saya jalankan, dengan pertanyaan di baliknya, hasilnya, dan apa yang masih terbuka. Eksperimen kecil. Hasil yang berguna.

- Penulis: Falah Isnan (https://falah-isnan.com/)

## Eksperimen

- [RAG vs wiki Markdown](https://lab.falah-isnan.com/experiments/rag-vs-markdown-wiki): Knowledge base yang sama dibangun dua kali: dengan indeks RAG, dan sebagai LLM Wiki Markdown yang ditautkan manual. Tidak ada yang menang telak. Hasil sementara: RAG unggul dalam efisiensi token dan kecepatan, dan keunggulan itu makin lebar seiring knowledge base membesar. LLM Wiki Markdown unggul dalam kemudahan perawatan dan keterprediksian. Untuk knowledge base kecil sampai menengah yang kamu tulis sendiri, pendekatan Markdown lebih efektif di antara keduanya: hubungannya eksplisit, jadi kamu bisa memperkirakan apa yang akan dibaca model.
- [AI Behavioral Runtime](https://lab.falah-isnan.com/experiments/ai-behavioral-runtime): Mengarahkan penalaran model lewat prinsip yang ditentukan sejak awal. Skor benchmark naik, tapi setiap langkah ada harganya. Hasil sementara: Pengarahan berhasil. Mengharuskan model bernalar mengikuti prinsip yang sudah ditentukan menaikkan skor benchmark tanpa menyentuh penalaran bawaannya — hasil yang memang dicari eksperimen ini. Tapi tidak gratis: pengarahan dibayar di setiap langkah, dan apa pun yang tidak pernah dijelaskan oleh prinsipnya tetap belum terpecahkan, sama seperti sebelumnya.
- [Workflow Runtime](https://lab.falah-isnan.com/experiments/workflow-runtime): Model menyusun workflow sendiri dan memanggil agen untuknya. Sering berhasil; sering juga membuang token dan waktu berjam-jam untuk pekerjaan yang tak perlu. Hasil sementara: Workflow yang sudah dirancang dan diuji lebih unggul daripada mengarahkan model ke setiap masalah dan membiarkannya menyusun workflow sendiri. Workflow dinamis tidak dibuang — tapi sebelum jalur itu layak diambil, Workflow Runtime harus membatasi pekerjaan yang boleh dilakukan agen dan menegaskan kapan prosesnya harus berhenti.

## Di tempat lain

- [Falah Isnan](https://falah-isnan.com/): Falah Isnan builds systems, products, and interfaces. Selected work, how I think, and how to get in touch.
- [isnan tools](https://tools.falah-isnan.com/): Free, public tools by Falah Isnan. Practical utilities for recurring problems.
- [GitHub](https://github.com/mohfalahisnan)