Naukowcy z arXiv opracowali Sketch2Sim - system, który fotografuje odręczny rysunek obwodu elektrycznego i automatycznie generuje netlist kompatybilny z SPICE, gotowy do symulacji komputerowej. To rozwiązanie stanowi znaczący krok naprzód w automatyzacji analizy ręcznie rysowanych schematów elektronicznych, które są uniwersalnym narzędziem edukacyjnym i pierwszą fazą projektowania obwodów.
System opiera się na trzystopniowym potoku przetwarzania. W pierwszym etapie dwa detektory YOLO (sieci You Only Look Once) identyfikują komponenty elektryczne i regiony zawierające tekst na zdjęciu. Drugi etap wykorzystuje sieć neuronową CRNN z technologią CTC do rozpoznawania i ekstrakcji wartości rezystorów, kondensatorów, cewek i innych elementów. Trzeci, krytyczny etap obejmuje przetwarzanie obrazu - thresholding, skeletonizację oraz algorytm DBSCAN - aby automatycznie zlokalizować węzły połączeń i mapować ich powiązania z komponentami.
Aby wytrenować model, badacze zebrali i zaannotowali zbiór danych zawierający 1000 schematów obwodów RLC. System nie tylko generuje netlist, ale bezpośrednio go rozwiązuje, zwracając napięcia w węzłach i prądy w gałęziach. To narzędzie może znacząco przyspieszyć pracę studentów, nauczycieli i inżynierów, automatyzując żmudny proces ręcznego przepisywania schematów do formatu cyfrowego przed symulacją.