이 글에서는 RNN과 CNN의 차이점과 각각의 응용 분야에 대해 설명합니다.
The paper explores the use of differential testing to uncover failures in Automatic Speech Recognition (ASR) systems.
this paper presents an SMT-based encoding of the problem, exploring its utility and limitations.
이 논문은 안전이 중요한 시스템에서 매우 중요한 구조적으로 유사한 신경망의 차등 검증 문제를 다룹니다.저자들은 피드포워드 ReLU 네트워크에서 미분 검증의 정확도와 계산 효율성을 크게 향상시키는 기호적이고 세분화된 근사화 기법인 NeuroDiff를 제안합니다.이 논문은
ReluDiff는 원하는 속성이 검증될 때까지 근사치를 반복적으로 개선하는 빨리 감기 간격 분석 패스와 역방향 패스로 구성되며, 기존 검증 도구에 비해 상당한 속도 향상을 달성하고 더 많은 속성을 증명할 수 있습니다.
error message build error가 여러 폴더에서 발생한 것을 확인할 수 있었습니다. 중복되는 클래스가 각 폴더마다 존재해서 삭제했습니다. 경로는 다음과 같습니다.
다중 비트 양자화는 비트 분할 및 스티칭 프레임워크를 사용하여 구현할 수 있습니다.이 프레임워크는 두 가지 주요 단계로 구성됩니다: 비트 분할과 비트 최적화다음은 다중 비트 양자화를 위한 단계별 프로세스입니다:비트 분할: 이 단계에서는 가중치 양자화의 M비트 제약 조건
ModelDiff는 두 모델의 유사도를 비교하는 데에 사용됩니다. ModelDiff github Directory와 파일 및 코드 구성을 소개하는 글입니다.
NNrepair는 결함 위치 파악을 사용하여 잠재적으로 결함이 있는 네트워크 매개 변수를 식별하고 결함을 해결하기 위해 작은 수정을 가하는 제약 조건 기반 기법입니다. Directory와 코드에 대한 설명을 담은 글입니다.
화이트박스 테스팅은 소프트웨어의 내부 구조와 작동 원리를 분석하여 테스팅을 수행하는 방법입니다. 여기에는 여러 가지 테스팅 기법이 포함되며, 각 기법은 특정한 목적과 접근 방식을 가지고 있습니다. 글에서 몇 가지 주요 화이트박스 테스팅 기법에 대해 설명합니다.
블랙박스 테스팅(Black Box Testing)과 화이트박스 테스팅(White Box Testing)은 소프트웨어 테스팅의 두 가지 기본적인 접근법이며, 각각의 테스팅 방식은 다음과 같은 차이점을 가지고 있습니다.
표준 상관 분석(CCA)을 사용하여 신경망 표현을 비교하는 방법을 살펴보고, 서로 다른 초기화에서 학습된 네트워크의 표현 간의 대응을 안정적으로 식별할 수 있는 중심 커널 정렬(CKA)이라는 유사성 지수를 소개합니다.
배경지식 Centering Matrix Gram matrix CKA연산 유사성 행렬 연산 시각화
Public API: jax packagehttps://jax.readthedocs.io/en/latest/jax.htmljax.numpy modulejax.scipy modulejax.lax modulejax.random modulejax.sharding m
Torch 환경에서 작성된 코드를 Jax로 run 하기 위하여Torch2Jax 관련 소스를 살펴보았습니다.나중엔 Torch 환경 코드를 Jax환경에 맞춰port를 할 예정이라 참고하기 좋을 것 같아 정리하기로 했습니다.https://github.com/rdyr
JAX 기능: Tensorflow에 있던 XLA 기능을 빼와서 독립적인 모듈로 만들어낸 것. @tf.function 데코레이터만 함수에 붙여주면 JIT 연산이 가능해집니다. fn, fnjit, fntf2 비교 https://brunch.co.kr/@chris-son
JAX is a machine learning library that has gained popularity in the research community. Here's a breakdown of what it is and how it compares to other
The paper proposes a new method called Weight Fixing Networks (WFN) to minimize the information content of neural networks by reducing the number of u
NNrepair is a technique for repairing neural network classifiers by identifying faulty network parameters and applying small modifications to fix them